Не нравятся результаты поиска? Попробуйте другой поиск!
DLE FAQ » Все вопросы » Общие вопросы » Как составить robots.txt на DLE в 2020 году ?

Как составить robots.txt на DLE в 2020 году ?


     17.08.2020    dle, robots.txt    Общие вопросы, Ламерские вопросы    127

вопрос
Вопрос правильно ли у меня составлен robot.txt , мне нужно что бы Googlebot мог получить доступ к файлам CSS и JS на сайте. помогите разобраться!

User-agent: Mediapartners-Google
Allow: /

User-agent: *
Disallow: /*print
Disallow: /user/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /upgrade/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /catalog/
Disallow: /xfsearch/
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /?do=lastcomments

и в чем разница если та /index.php?do=addnews или так /*do=addnews ?

Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts

Ответа пока нет


4 комментария

UsurpatorVaticana
Юзер

UsurpatorVaticana - 17 августа 2020 23:56 -

Также как в 2019

nikolay.safronov
Юзер

nikolay.safronov - 18 августа 2020 13:34 -

А зачем закрывать .css и .js? В индекс эти файлы не попадут в любом случае.

palladiums2020
Юзер

palladiums2020 - 18 августа 2020 13:47 -

UsurpatorVaticana,
Одни умника тут я погляжу ))

palladiums2020
Юзер

palladiums2020 - 18 августа 2020 13:48 -

nikolay.safronov,
Не закрывать их нужно а открыть для Googlebot

Чтобы комментировать - войдите или зарегистрируйтесь на сайте

Похожие вопросы

наверх