Технический сбой

Сайт временно работает в режиме только для чтения, идут восстановительные работы. Приносим свои извинения за неудобства.
DLE FAQ » Все вопросы » Общие вопросы по вёрстке » В индекс Яндекса попадают RSS ленты пользователей. Как от этого правильно избавиться?

В индекс Яндекса попадают RSS ленты пользователей. Как от этого правильно избавиться?


     Общие вопросы по вёрстке, Ламерские вопросы    1351

вопрос
В индекс Яндекса попадают ссылки такого типа:
http://www.musite.ru/user/Username/rss.xml
HTTP-код 200

Как лучше запретить к индексации подобные адреса?

Ответа пока нет


1 комментарий

Апельсин
Юзер

Апельсин - -

в robots.txt добавить

Disallow: /user/

Похожие вопросы

наверх