Не нравятся результаты поиска? Попробуйте другой поиск!

DLE FAQ » Все вопросы » Ламерские вопросы » Запрет индексации страниц с ошибкой 404 Not Found

Запрет индексации страниц с ошибкой 404 Not Found

Riger 07.06.2012 Йа креведко Все вопросы » Ламерские вопросы 13558

вопрос

Озаботился большим количеством 404-й в Я.Вебмастере. Контент на сайт добавляется и удаляется постоянно. Нашел в паблике, но т.к. сам не разбираюсь, то порошу гуру проверить хак на пригодность (требуется для версии 8.3), опасаюсь закрою по незнанию весь контент:

Показать / Скрыть текст


Установка:

1. Открыть файлы:
- /engine/modules/show.full.php
- /engine/modules/static.php
Найти:
@header( "HTTP/1.0 404 Not Found" );

Добавить ниже:
$robots_noindex = "<meta name=\"robots\" content=\"noindex\" />";

2. Открыть файл: /engine/modules/show.short.php
Найти: (2 раза)
msgbox( $lang['all_err_1'], $lang['news_err_27'] );

Добавить выше:
$robots_noindex = "<meta name=\"robots\" content=\"noindex\" />";

3. Открыть файл: /engine/engine.php
Найти:
$metatags = <<<HTML

Добавить выше:
if(!$robots_noindex) $robots_noindex = "<meta name=\"robots\" content=\"all\" />";

Найти:
<meta name="robots" content="all" />

Заменить на:
{$robots_noindex}

Версия DLE: все версии

Ответил: nowheremany

Бред. Как можно закрыть от индексации страницу которой нету?

15 комментариев

Админ

3457

ПафНутиЙ - 2015-05-097 июня 2012 15:38 - #5302

почитайте alaev.info там много интересного по поводу индексации и т.п. сео фигни

Каков вопрос - таков и ответ. Просто помните об этом.

Юзер

victim - 2015-05-097 июня 2012 16:14 - #5307

Внесу конкретики. Вот тут alaev.info/blog/post/3294 - пункт "Запрещаем индексацию разделов сайта". И всего одна правка, вместо перелопачивания кучи сайтов.

Юзер

victim - 2015-05-097 июня 2012 16:15 - #5308

Хотя я, возможно, протупил. Если тут речь идет про 404 ошибки. То, наверное, лучше делать 301 редирект с таких страниц на главную, например. Чтобы не терять посетителей.

Эксперт

1925

nowheremany - 2015-05-097 июня 2012 16:38 - #5309

301 то зачем??? несуществующая страница переехала на главную?

Благодарность принимаю тут Связь

Юзер

Riger - 2015-05-097 июня 2012 16:40 - #5310

nowheremany, может вам по поводу бреда к яндексу обратиться? Я сам себе чтоли эти 404-е штампую в я.вебмастере?

victim, редирект - возможно, но дело в том что посетители не ходят по этим страницам (или очень редко если в закладках было), по ним ходит бот, т.е. допустим вчера страница была и индексировалась, сегодня прибежал "яша" - опа, 404 - нет ничего, и естественно пишет эти страницы в ошибки.

Эксперт

1925

nowheremany - 2015-05-097 июня 2012 16:45 - #5311

Вы технологию передачи информации то хоть знаете?
Отправка/получение заголовка, в данном случае заголовок вернул 404 статус - читать страницу не имеет смысла, ибо её нет. Вы хоть @@@ напишите на странице её робот читать не будет.

Благодарность принимаю тут Связь

Юзер

Riger - 2015-05-097 июня 2012 16:56 - #5312

Я не утверждаю что знаю технологию передачи, я вижу около 500 штук 404-х ошибок в вебмастере. по вашему яндекс мне говрит что у меня на сайте совершенно не нужные ошибки, но типа не парься, т.к это просто так написано.
Опять же я не утверждаю, что эти ошибки очень критичны, просто я хочу от них избавиться. Если кого то устраивает, то ради бога. Вопрос был в том что бы проверить хак и все.

Эксперт

1925

nowheremany - 2015-05-097 июня 2012 17:14 - #5313

404 ошибка - страница не доступна, что вам надо проверять?
Эта страница вывалилась из индекса. Все её там больше нет. Надо вам не искать как можно убрать такие вещи а искать причины вываливания такого количества страниц из индекса.

Благодарность принимаю тут Связь

Юзер

Riger - 2015-05-097 июня 2012 17:22 - #5314

Причины вываливания просты и искать их мне незачем - сегодня информация размещена, завтра посетитель размещает другую информацию, а старая удаляется по причине окончания срока размещения.

Разговор ни о чем. Еще раз говорю, мне не нужно и не важно ваше мнение о полезности или бесполезности запрета индексации страниц с ошибкой 404.

Эксперт

1925

nowheremany - 2015-05-097 июня 2012 18:17 - #5315

Тогда чего вы хотите то? Ну удалены. Вот Яша вам и сообщает что их нет.

Я Вам говорю что для техстраниц которых нет не получится запретить индексацию.

Благодарность принимаю тут Связь

Админ

3457

ПафНутиЙ - 2015-05-097 июня 2012 20:51 - #5318

Выход прост: не давать ПС ходить по страницам, которые будут удаляться.
Но лучше всё же не удалять страницы, это глупо самостоятельно выкидывать из индекса страницы. на них в конце концов рекламу можно размещать. Возможно если бы вы озвучили причину таких действий нам бы стало понятнее. А так реально просто глупый поступок.

Каков вопрос - таков и ответ. Просто помните об этом.

Юзер

victim - 2015-05-098 июня 2012 08:38 - #5325

Какая разница, глупый поступок или нет, у автора свои причины, ему виднее.
И кстати, если понадобится 301 редирект с несуществующих/удаленных страниц - такое решение есть по ссылке, которую я давал в комменте выше.

Эксперт

1925

nowheremany - 2015-05-098 июня 2012 10:08 - #5326

Тут говориться что нельзя на странице 404 запретить индексацию. Глупый вопрос или нет, не важно.

Благодарность принимаю тут Связь

Юзер

victim - 2015-05-098 июня 2012 12:20 - #5327

Ну да. Нельзя, так как ответ сервера решает. Не спорю.

Юзер

Vozemz - 2015-05-098 июня 2012 12:33 - #5328

Эк Вас понесло wink

Для 8.3 нормально работает этот хак, чем плохо?

Показать / Скрыть текст

1. В файлах:
/engine/modules/show.full.php
/engine/modules/static.php

Найти: @header( "HTTP/1.0 404 Not Found" );

Добавить ниже:
$robots_noindex = "<meta name=\"robots\" content=\"noindex\">";

2. В файле /engine/modules/show.short.php найти: (2 раза)

msgbox( $lang['all_err_1'], $lang['news_err_27'] );

Добавить выше:
$robots_noindex = "<meta name=\"robots\" content=\"noindex\">";

3. В файле /engine/engine.php найти: $metatags = <<<HTML

Добавить выше:
if(!$robots_noindex) $robots_noindex = "<meta name=\"robots\" content=\"all\" />";

Найти: <meta name="robots" content="all" />

Заменить на: {$robots_noindex}

ВСЕ.

Можно еще в:
 /engine/modules/addnews.php
 /engine/modules/feedback.php
 /engine/modules/fullsearch.php
 /engine/modules/lostpassword.php
 /engine/modules/register.php
 /engine/modules/search.php
 /engine/modules/stats.php

после: 

if( ! defined( 'DATALIFEENGINE' ) ) {
 die( "Hacking attempt!" );
 }

добавить: 
$robots_noindex = "<meta name=\"robots\" content=\"noindex\" />";