Задать вопрос
Не нравятся результаты поиска? Попробуйте другой поиск!
DLE FAQ » Все вопросы » Общие вопросы » Как правильно создать Robots.txt?

Как правильно создать Robots.txt?

     03.06.2017    Все вопросы » Общие вопросы    1733

вопрос
Какой он правильный Robots.txt для dle?
Чтобы в гугл вебмастере не вылазили все ошибки типа: повторяющиеся мета описание, отсутствующие теги title и прочее
..

Вот мой Robots.txt, насколько он правильный?
 Показать / Скрыть текст

Ответил: PunPun

User-agent: *
Disallow: /engine/*
Disallow: */page/*/
Disallow: */page/
Disallow: /index.php?do=*
Allow: /engine/classes/js/
Allow: /engine/classes/min/index.php
Allow: /engine/data/emoticons/

Host: site.com
Sitemap: http://site.com/sitemap.xml

Google игнорирует robots.txt лучше использовать meta robots.

2 комментария

Jehmel
Юзер

Jehmel - 3 июня 2017 22:04 -

Подробнее можно про meta robots
king
Юзер

king - 6 января 2018 20:31 -

Jehmel, PUNPUN верно написал, поэтому правильный Robots.txt будет таким, как написано здесь.
Чтобы комментировать - войдите или зарегистрируйтесь на сайте

Похожие вопросы

 24.11.2012 olleg  Общие вопросы
 21.11.2013 doktorpull  Общие вопросы, Ламерские вопросы
 15.12.2013 par14ok  Общие вопросы
 11.07.2014 Skyter  Общие вопросы
 22.10.2014 mixa920808  Общие вопросы, Шаблоны (TPL), Общие вопросы по PHP
 08.04.2015 Mambaman  Общие вопросы, Ламерские вопросы
 28.03.2016 krasszen  Общие вопросы
 11.05.2016 dimon174  Общие вопросы
 15.08.2016 Rahmukov  Общие вопросы
 29.03.2017 VIPERst  Общие вопросы
  • derebas | Убираем xfsearch из адресной строки 7
    Фото derebas
    derebas
    Убираем xfsearch из адресной строки
    16-12-2024, 02:35
    в правилах транслитерации для tagvalue поставьте замену " " => "-", например так
    str_replace(array('.', ' ', '/', '&', "'", '+', '«', '»', ':', '!'), array('', '-', '-', 'and', '', '', '', '', '', '')
  • toxicpioner | Убираем xfsearch из адресной строки 7
    Фото toxicpioner
    toxicpioner
    Убираем xfsearch из адресной строки
    15-12-2024, 19:31
    если в доп поле есть пробел, будет выдавать просто 403 стр
  • dj-avtosh | Воспользовался хаком удаление html из ад ... 2
    Фото dj-avtosh
    dj-avtosh
    Воспользовался хаком удаление html из адресной строки у новости, появилась ошибка, как пофиксить?
    12-12-2024, 17:26
    Нужно правило с year поднять выше всех в .htaccess
  • TeraMoune | Воспользовался хаком удаление html из ад ... 2
    Фото TeraMoune
    TeraMoune
    Воспользовался хаком удаление html из адресной строки у новости, появилась ошибка, как пофиксить?
    11-12-2024, 22:12
    У вас убрано слишком много отличительных признаков в ссылках и теперь ссылки пересекаются. Убрали xfsearch, убрали html, а так же зачем то убрали дефиз разделяющий id и alt_name. Теперь некоторые ссылки будут отвечать выражению под правила ссылок новостей. Исправить вы можете только переосмыслив эти ссылки и добавить в них каких-то отличительных особенностей, переосмыслить чпу.
  • toxicpioner | Как упорядочить ID новостей 19
    Фото toxicpioner
    toxicpioner
    Как упорядочить ID новостей
    9-12-2024, 22:24
    ***Комментарий удален***
  • DnCnv | Как показать только одну категорию, к ко ... 1
    Фото DnCnv
    DnCnv
    Как показать только одну категорию, к которой принадлежит новость?
    9-12-2024, 01:46
    ***Комментарий удален***
  • web102 | Почему не отображается картинка в галере ... 3
    Фото web102
    web102
    Почему не отображается картинка в галерее?
    4-12-2024, 11:49
    дайте адрес сайта. можно в личку
  • Shandi | Почему не отображается картинка в галере ... 3
    Фото Shandi
    Shandi
    Почему не отображается картинка в галерее?
    3-12-2024, 08:53
    Мне как ламеру ничего не понятно:( Кто-то это исправляет за денужку?
  • TeraMoune | Как сделать водяной знак с заменой? 1
    Фото TeraMoune
    TeraMoune
    Как сделать водяной знак с заменой?
    2-12-2024, 23:29
    Картинки загружаются в разные директории в зависимости от длительного периода загрузок этих папок может быть десятки. Более того оригинальные изображения не всегда имеют безопасные имена и при загрузке часто переименовываются. Так что не факт, что оригиналы соответствуют загруженным копиям.
  • TeraMoune | Почему не отображается картинка в галере ... 3
    Фото TeraMoune
    TeraMoune
    Почему не отображается картинка в галерее?
    2-12-2024, 23:19
    Потому что какой-то стиль может скрывает изображение. Проинспектируйте элемент, отыщите в древо html изображение и указав на него указатель в инспекторе кода посмотрите не наследуются ли какие-то посторонние стили.
наверх