Не нравятся результаты поиска? Попробуйте другой поиск!
DLE FAQ » Все вопросы » Общие вопросы » Вопрос про ROBOTS.txt

Вопрос про ROBOTS.txt


     24.11.2012    robots    Все вопросы » Общие вопросы    3958

вопрос
Здравствуйте,нужно ли закрывать страницы пангинаций? у меня на сайте 380 страниц и навигация вверху и внизу,и надо ли закрывать RSS? Если всё это надо закрывать то скажите правильный это кусочек текста с robots?
User-agent: *
Allow: /uploads/posts/
Disallow: /page/
Disallow: */page/*
Disallow: /engine/rss.php

Ответил: ПафНутиЙ


Про правильый robotx.txt очень хорошо написал АлаичЪ

6 комментариев

olleg
Юзер

olleg - 24 ноября 2012 17:42 -

Про правильый robotx.txt очень хорошо написал АлаичЪ

Я это читал уже раз 20,про пангинацию ни чего ни нашёл.

oo22maxi
Юзер

oo22maxi - 24 ноября 2012 22:37 -

По мне, так там все что нужно, сам вот ток узнал из за ответа ПАФНУТИЯ.
Здравствуйте,нужно ли закрывать страницы пангинаций? у меня на сайте 380 страниц и навигация вверху и внизу,и надо ли закрывать RSS?

Я вот запретить индексацию страниц только в категориях, на главной пусть индексируются, rss тоже в запрете стоит.

DaivZ
Юзер

DaivZ - 24 ноября 2012 22:27 -

А это для кого написано в масиве:
[code]//(intval($_GET['cstart']) > 1 ) OR /* Любые страницы пагинации */
//($dle_module == 'main' and (intval($_GET['cstart']) > 1)) OR /* Страницы пагинации для главной страницы */[code]

oo22maxi
Юзер

oo22maxi - 24 ноября 2012 22:39 -

Раньше запрещал все в robotx.txt, но мне больше понравилось как предлагает АлаичЪ

olleg
Юзер

olleg - 24 ноября 2012 23:47 -

Ну а так ответ? можно услышать или нет?,спрашивал именно у вас,зачем эти редерикты?

ПафНутиЙ
Админ

ПафНутиЙ - 24 ноября 2012 23:55 -


Каков вопрос - таков и ответ. Просто помните об этом.

Чтобы комментировать - войдите или зарегистрируйтесь на сайте

Похожие вопросы

наверх