вопрос
Добрый день! Перечитал много информации от Алаича, на которого часто ссылается Пафнутий и решил настроить правильный robots.txt.
Всё вроде хорошо, но как быть с запретом данных страниц.
Прошу вашей помощи, возможно я что-то не понимаю, а играться с такими параметрами не хочу.
Конструкция роботс в engine.php никак не влияет на это:
Всё вроде хорошо, но как быть с запретом данных страниц.
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /dle-rules-page.html
Disallow: /addnews.html
Disallow: /statistics.html
Disallow: /*printПрошу вашей помощи, возможно я что-то не понимаю, а играться с такими параметрами не хочу.
Конструкция роботс в engine.php никак не влияет на это:
if (
$do == 'addnews' OR /* Страница добавления новости с сайта */
$do == 'alltags' OR /* Страница просмотра списка тегов */
$do == 'feedback' OR /* Страница формы обратной связи */
$do == 'favorites' OR /* Страницы закладок пользователей */
$do == 'lastcomments' OR /* Страница просмотра всех последних комментариев на сайте, в т.ч. комментариев отдельного пользователя */
$do == 'lastnews' OR /* Страница просмотра всех последних новостей */
$do == 'lostpassword' OR /* Страница восстановления пароля */
$do == 'pm' OR /* Страницы личных сообщений пользователей */
$do == 'register' OR /* Страница регистрации нового пользователя */
$do == 'rules' OR /* Страница правил сайта */
$do == 'stats' OR /* Страница статистики сайта */
$do == 'search' OR /* Страница поиска и результатов поиска */
$do == 'static' OR /* Все статические страницы */
$do == 'tags' OR /* Просмотр новостей по тегу */
$do == 'xfsearch' OR /* Просмотр новостей новостей по доп. полям */
$subaction == 'allnews' OR /* Просмотр всех новостей пользователя */
$subaction == 'newposts' OR /* Просмотр непрочитанных новостей для пользователя */
$subaction == 'showfull' OR /* Просмотр полной новости */
$subaction == 'userinfo' OR /* Просмотр профиля пользователя */
$dle_module == 'date' OR /* Просмотр архива новостей за год/месяц/день. Заменяет собой сразу все три следующие строки */
(intval($_GET['cstart']) > 1 ) OR /* Любые страницы пагинации */
($dle_module == 'main' and (intval($_GET['cstart']) > 1)) OR /* Страницы пагинации для главной страницы */
$catalog != '' /* Просмотр каталога по буквенному идентификатору */
) $metatags .= <<<HTML
\n<meta name="robots" content="noindex,nofollow" />
HTML;
