Дубликаты страниц в поиске, как убрать?

compik 11.10.2023 дубликаты страниц, поиск, яндекс Все вопросы » Общие вопросы 408

вопрос

Здравствуйте.

Каким-то непонятным образом создались дубликаты множества страниц на сайте.

К примеру, основная страница:
/Категория/1959-amnesia.html

И вот такие дубликаты:
/Категория/page,1,3,1959-amnesia.html
/Категория/page,1,7,1959-amnesia.html
/Категория/page,1,5,1959-amnesia.html

Причем все эти страницы открываются, индексируются, и естественно поисковики их отмечают как дубликаты.

Версия DLE: 14, подскажите пожалуйста:

1) Каким вообще образом создались все эти странные страницы?
2) Как избавиться от этих дублей страниц?

Ответа пока нет

8 комментариев

Эксперт

801

TeraMoune - 2018-08-2512 октября 2023 02:49 - #82404

Тут нету ничего не понятного, это ссылки на страницы пагинации комментариев. Убирается это либо запретом индексации ссылок в robots.txt. Либо еще перевести комментарии ajax подгрузку.

Тестовый репозиторий установки плагинов: teramoune

Юзер

compik - 2018-08-2512 октября 2023 12:09 - #82406

TeraMoune, благодарю за ответ.

Раз это действительно ссылки на страницы комментариев, то запрещать их индексацию (если при этом не будут индексироваться все комментарии) скорее всего будет неправильно.

На блоге «АлаичЪ» нашел информацию по этому вопросу, но к сожалению информация очень старая и актуальна только для DLE 9.5. Возможно ли подкорректировать информацию под версию DLE 14? И будут ли индексироваться все комментарии, если ставить редирект на "основную" страницу по информации данного блога?

Другой способ решить данную проблему по рекомендации Яндекса, это:

Если заголовки создаются автоматически, вы можете разнообразить их наполнение: добавить номер страницы, характеристики товара и пр.

Как раз в категориях, при переходе на разные страницы, автоматически в <title> добавляется "Страница 2", "Страница 3" и тд, и видимо поэтому поисковики не отмечают эти страницы как "Одинаковые заголовки и описания страниц".

Эксперт

801

TeraMoune - 2018-08-2512 октября 2023 13:03 - #82407

Возможно ли подкорректировать информацию под версию DLE 14?

Всё возможно подкорректировать.

И будут ли индексироваться все комментарии, если ставить редирект на "основную" страницу по информации данного блога?

Не совсем понял. Если будет редирект то и откроется первая страница комментариев.

Другой способ решить данную проблему по рекомендации Яндекса, это:

Ну тоже быть может можно, вот только для комментариев это и не предусмотрено. Ну тут уже оставляйте пожелания на официальном форуме.

P.S. Так-то смысла индексировать комментарии нету, как и в целом любые разделы где есть разбивка контента на страницы. В таких разделах контент часто слишком быстро движется и толку от индексации не много когда спустя время информация становится неактуальной. Ну и обновлять содержимое всех этих бесконечных ссылок пагинаций уж точно не будет регулярным и частым.

Тестовый репозиторий установки плагинов: teramoune

Юзер

compik - 2018-08-2512 октября 2023 15:09 - #82409

Цитата: TeraMoune

Не совсем понял. Если будет редирект то и откроется первая страница комментариев.

Если будет редирект на "основную" страницу, будут ли тогда индексироваться поисковиками комментарии со всех страниц? Или будут индексироваться только комментарии "основной" страницы?

PHP-developer

1696

LazyDev - 2018-08-2512 октября 2023 18:08 - #82410

compik, конечно же не будут.

Мой блог: LazyDev.pro

Помогаю с решением проблем на платной основе.

Юзер

compik - 2018-08-2512 октября 2023 18:27 - #82412

LazyDev, благодарю за ответ.
На ваш взгляд, какое будет правильное и лучшее решение тогда? Чтобы и комментарии все индексировались, и дублей страниц не было.

PHP-developer

1696

LazyDev - 2018-08-2512 октября 2023 19:43 - #82414

compik, уникализировать meta теги, других вариантов нет, кроме как ещё сделать чтобы все комментарии были на одной странице но при условии что их не слишком много.

Мой блог: LazyDev.pro

Помогаю с решением проблем на платной основе.

Юзер

compik - 2018-08-2524 октября 2023 02:44 - #82430

Единственным оптимальным решением данной проблемы на данный момент является совет TeraMoune.

В админ панели, в настройках "Комментарии", можно Включить динамическую загрузку комментариев по мере просмотра.

Будем надеется в последующих обновлениях разработчики учтут этот недочёт и добавят в <title> хотя бы "Страница 2", "Страница 3" и тд, как сделали в категориях.