Технический сбой

Сайт временно работает в режиме только для чтения, идут восстановительные работы. Приносим свои извинения за неудобства.
DLE FAQ » Все вопросы » Общие вопросы » Дубликаты страниц в поиске, как убрать?

Дубликаты страниц в поиске, как убрать?

     дубликаты страниц, поиск, яндекс    Все вопросы » Общие вопросы    353

вопрос
Здравствуйте.

Каким-то непонятным образом создались дубликаты множества страниц на сайте.

К примеру, основная страница:
/Категория/1959-amnesia.html

И вот такие дубликаты:
/Категория/page,1,3,1959-amnesia.html
/Категория/page,1,7,1959-amnesia.html
/Категория/page,1,5,1959-amnesia.html

Причем все эти страницы открываются, индексируются, и естественно поисковики их отмечают как дубликаты.

Дубликаты страниц в поиске, как убрать?

Версия DLE: 14, подскажите пожалуйста:

1) Каким вообще образом создались все эти странные страницы?
2) Как избавиться от этих дублей страниц?

Ответа пока нет

 

8 комментариев

TeraMoune
Эксперт

TeraMoune - -

Тут нету ничего не понятного, это ссылки на страницы пагинации комментариев. Убирается это либо запретом индексации ссылок в robots.txt. Либо еще перевести комментарии ajax подгрузку.
Тестовый репозиторий установки плагинов: teramoune
compik
Юзер

compik - -

TeraMoune, благодарю за ответ.

Раз это действительно ссылки на страницы комментариев, то запрещать их индексацию (если при этом не будут индексироваться все комментарии) скорее всего будет неправильно.

На блоге «АлаичЪ» нашел информацию по этому вопросу, но к сожалению информация очень старая и актуальна только для DLE 9.5. Возможно ли подкорректировать информацию под версию DLE 14? И будут ли индексироваться все комментарии, если ставить редирект на "основную" страницу по информации данного блога?

Другой способ решить данную проблему по рекомендации Яндекса, это:

Если заголовки создаются автоматически, вы можете разнообразить их наполнение: добавить номер страницы, характеристики товара и пр.

Как раз в категориях, при переходе на разные страницы, автоматически в <title> добавляется "Страница 2", "Страница 3" и тд, и видимо поэтому поисковики не отмечают эти страницы как "Одинаковые заголовки и описания страниц".
TeraMoune
Эксперт

TeraMoune - -

Возможно ли подкорректировать информацию под версию DLE 14?

Всё возможно подкорректировать.
И будут ли индексироваться все комментарии, если ставить редирект на "основную" страницу по информации данного блога?

Не совсем понял. Если будет редирект то и откроется первая страница комментариев.

Другой способ решить данную проблему по рекомендации Яндекса, это:

Ну тоже быть может можно, вот только для комментариев это и не предусмотрено. Ну тут уже оставляйте пожелания на официальном форуме.

P.S. Так-то смысла индексировать комментарии нету, как и в целом любые разделы где есть разбивка контента на страницы. В таких разделах контент часто слишком быстро движется и толку от индексации не много когда спустя время информация становится неактуальной. Ну и обновлять содержимое всех этих бесконечных ссылок пагинаций уж точно не будет регулярным и частым.
Тестовый репозиторий установки плагинов: teramoune
compik
Юзер

compik - -

Цитата: TeraMoune
Не совсем понял. Если будет редирект то и откроется первая страница комментариев.

Если будет редирект на "основную" страницу, будут ли тогда индексироваться поисковиками комментарии со всех страниц? Или будут индексироваться только комментарии "основной" страницы?
LazyDev
PHP-developer

LazyDev - -

compik, конечно же не будут.
Мой блог: LazyDev.pro

Помогаю с решением проблем на платной основе.
compik
Юзер

compik - -

LazyDev, благодарю за ответ.
На ваш взгляд, какое будет правильное и лучшее решение тогда? Чтобы и комментарии все индексировались, и дублей страниц не было.
LazyDev
PHP-developer

LazyDev - -

compik, уникализировать meta теги, других вариантов нет, кроме как ещё сделать чтобы все комментарии были на одной странице но при условии что их не слишком много.
Мой блог: LazyDev.pro

Помогаю с решением проблем на платной основе.
compik
Юзер

compik - -

Единственным оптимальным решением данной проблемы на данный момент является совет TeraMoune.

В админ панели, в настройках "Комментарии", можно Включить динамическую загрузку комментариев по мере просмотра.

Будем надеется в последующих обновлениях разработчики учтут этот недочёт и добавят в <title> хотя бы "Страница 2", "Страница 3" и тд, как сделали в категориях.

Похожие вопросы

 20.09.2011 Гость  Общие вопросы
 28.06.2012 Гость  Общие вопросы
 10.10.2012 Гость  Общие вопросы
 25.01.2013 Гость  Общие вопросы, Ламерские вопросы
 26.05.2014 dfuploader  Общие вопросы
 01.12.2014 xpchelkinx  Общие вопросы
 21.12.2014 lGaaral  Общие вопросы, Шаблоны (TPL), Модули
 21.12.2014 HidaN20  Общие вопросы
 21.07.2016 rau7  Общие вопросы, Ламерские вопросы
 25.08.2018 RAMSESS  Общие вопросы, Шаблоны (TPL), Модули
  • Puxlik | Telegram Sender 13
    Фото Puxlik
    Puxlik
    Telegram Sender
    Версию 17.1 поддерживает ?
  • TeraMoune | Не загружается изображение [Ошибка HTTP] ... 2
    Фото TeraMoune
    TeraMoune
    Не загружается изображение [Ошибка HTTP]. Как исправить?
    В этой версии есть фрагментация загрузки файла когда загружаемый файл разделяется на фрагменты, по умолчанию 1 фрагмент 1.5мб. (И у вас написано лимиты на файл 4мб и картинки 5.86мб, этого достаточно чтобы принимать 1.5мб фрагменты) И если бы была проблема с весом или чем-то подобным то об этом бы сервер сообщил. Сервер отдал 500 ошибку это значит что угодно, нужно смотреть ответ от сервера в консоли разработчика или логах.
  • RedFox | Не загружается изображение [Ошибка HTTP] ... 2
    Фото RedFox
    RedFox
    Не загружается изображение [Ошибка HTTP]. Как исправить?
    "Некоторые картинки загружаются, но большинство нет."

    Сначала не обратил внимания, но видимо проблема в этом. Все, что больше 100Кб, не загружается. Что странно, поскольку в php у меня следующие значения:
    post_max_size = 100M
    upload_max_filesize = 100M
    max_file_uploads = 20

    Полагаю, где-то еще надо увеличить размер загружаемой картинки, но где?
  • LMakc | Модуль читалка pdf 1
    Фото LMakc
    LMakc
    Модуль читалка pdf
    Не начинай, я заплатил сегодня штраф за підручники. Сейчас очень сложно с этим.
  • ssssss | Сделать подсчет количества символов в ко ... 5
    Фото ssssss
    ssssss
    Сделать подсчет количества символов в комментариях
    Есть актуальный плагин под 17 версию? (только количество символов! без наворотов... записей куда-либо и т.п.) *ББ-редактор
  • alex.sg.spb | Как вывести информацию о обновлении ново ... 8
    Фото alex.sg.spb
    alex.sg.spb
    Как вывести информацию о обновлении новости, но на время?
    вопрос, в продолжение поста. Помогите с кодом вывода инфо UPDATE на краткой новости, так чтобы не нужно было нажимать внутри новости при редактировании галочку?
  • Kentavr | Как вместо %20 в адресной строке подстав ... 9
    Фото Kentavr
    Kentavr
    Как вместо %20 в адресной строке подставлять символ + между словами ???
    Спасибо огромное. Этот вариант самый простой и рабочий!
  • derebas | Как вместо %20 в адресной строке подстав ... 9
    Фото derebas
    derebas
    Как вместо %20 в адресной строке подставлять символ + между словами ???
    К черту htaccess давайте проще

    к href добавьте id="xfield_value"
    <a href="/company/[xfvalue_company]/" id="xfield_value">[xfvalue_company]</a>

    И добавьте скрипт обработчик 
    <script>
document.addEventListener('DOMContentLoaded', function() {
    const links = document.querySelectorAll('a#xfield_value');

    links.forEach(link => {
      let href = link.getAttribute('href');

      if (href) {
        href = href.replace(/ /g, '+');
        link.setAttribute('href', href);
      }
    });
  });
</script>
  • Kentavr | Как вместо %20 в адресной строке подстав ... 9
    Фото Kentavr
    Kentavr
    Как вместо %20 в адресной строке подставлять символ + между словами ???
    Так сайт не работает вообще. Браузер выдает такое

    Страница недоступна Сайт ... выполнил переадресацию слишком много раз.
    Попробуйте удалить файлы cookie.

    ERR_TOO_MANY_REDIRECTS

    Куки чистил не помогает
  • derebas | Как вместо %20 в адресной строке подстав ... 9
    Фото derebas
    derebas
    Как вместо %20 в адресной строке подставлять символ + между словами ???
    Попробуйте так
    RewriteEngine On
    RewriteCond %{REQUEST_URI} %20
    RewriteRule (.*)%20(.*) $1+$2 [N]
    RewriteRule (.*) $1 [R=301,L]
наверх