Вредят ли ошибки 404 моему сайту?

Понедельник, 2 мая 2011 г.

Итак, вы занимаетесь своими делами, используя Инструменты для веб-мастеров, чтобы проверить, насколько крут ваш
сайт… но подождите! Страница
Ошибки сканирования
заполнена 404 (Не найдено)!
ошибками

Близок ли конец света?? 404 Не бойтесь, мой юный падаван. Давайте взглянем на

ошибки и на то, влияют ли они (и если да, то как) на ваш сайт: 404 В: Влияют ли
A: 404 ошибки, о которых сообщается в Инструментах для веб-мастеров, на позиции моего сайта в поиске?
404 ошибки — это совершенно нормальная часть сети; Интернет постоянно меняется, появляется новый контент, старый исчезает, и когда он исчезает, он (в идеале) возвращает 404
код ответа HTTP. Поисковые системы знают об этом; у нас самих есть ошибки на наших сайтах, как вы можете видеть выше, и мы находим их по всему интернету. На самом деле мы предпочитаем чтобы, когда вы удаляете страницу со своего сайта, вы следили за тем, чтобы она возвращала правильный 404 или 410 код ответа (а не мягкую
404). Имейте в виду, что для того, чтобы наш сканер мог увидеть код ответа HTTP для URL-адреса, он должен иметь возможность сканировать этот URL-адрес. Если URL-адрес заблокирован вашим файлом robots.txt, мы не сможем просканировать его и увидеть код ответа. Тот факт, что некоторые URL-адреса на вашем сайте больше не существуют или возвращают 404 ошибки, не влияет на то, как работают другие URL-адреса вашего сайта (те, которые возвращают
200 (Успех)
коды состояния), в результатах нашего поиска.

В: Значит, 404 ошибки совсем не вредят моему сайту?
О: Если некоторые URL-адреса на вашем сайте 404, сам по себе этот факт вам не вредит и не идет вам в минус в результатах поиска Google. Однако могут быть и другие причины, по которым вам захочется исправить определенные типы 404 ошибок. Например, если некоторые из страниц,
404 на самом деле важны для вас, вам следует выяснить, почему мы видим
404 ошибки при их сканировании! Если вы видите опечатку в действительном URL-адресе (www.example.com/awsome вместо www.example.com/awesome), вполне вероятно, что кто-то хотел сослаться на вас и просто допустил опечатку. Вместо возврата 404вы можете
301 перенаправить ошибочный URL-адрес на правильный и получить целевой трафик по этой ссылке. Вы также можете убедиться, что когда пользователи попадают на 404 страницу вашего сайта,
мы помогаем им найти то, что они искали
, а не просто говорим: «404 Не найдено».

В: Расскажите мне подробнее омягких 404 ошибках.
A: A
мягкая 404
— это когда веб-сервер возвращает код ответа, отличный от 404 (или 410) для
несуществующего URL-адреса. Распространенный пример — когда владелец сайта хочет вернуть 404 красивуюстраницу с полезной информацией для своих пользователей 200
,
и считает, что для предоставления контента пользователям он должен вернуть 404 код ответа. Это не так! Вы можете вернуть код ответа и при этом 404 показывать любой контент, который вы захотите. Другой пример — когда сайт перенаправляет любые неизвестные URL-адреса на свою главную страницу вместо возврата ошибок. Оба этих случая могут негативно повлиять на наше понимание и индексирование вашего сайта, поэтому мы рекомендуем убедиться, что ваш сервер возвращает правильные коды ответа для несуществующего контента. Имейте в виду, что “404 просто потому, что страница
404 говорит«Не найдено», это не значит, что она действительно возвращает
код ответа HTTP
— используйте функцию

Просмотреть как Googlebot 404в Инструментах для веб-мастеров, чтобы перепроверить. Если вы не знаете, как настроить сервер для возврата правильных кодов ответа, обратитесь к справочной документации вашего хостинг-провайдера. 301В: Как узнать, должен ли URL-адрес
410?
, или 301 , или 404 О: Когда вы удаляете страницу со своего сайта, подумайте, переносится ли этот контент куда-то еще или вы больше не планируете размещать контент такого типа на своем сайте. Если вы переносите 410этот контент на новый URL-адрес, вам следует
перенаправить старый URL-адрес на новый — таким образом, когда пользователи будут заходить на старый URL-адрес в поисках этого контента, они будут автоматически перенаправлены на что-то релевантное их запросу. Если вы избавляетесь от этого контента полностью и у вас нет на сайте ничего, что удовлетворяло бы ту же потребность пользователя, то старый URL-адрес должен возвращать или. В настоящее время Google обрабатывает

410 (Удалено) 404 так же, как
404 (Не найдено)
, поэтому нам все равно, возвращаете ли вы то или другое. В: Большинство моих 404 ошибок связаны со странными URL-адресами, которых никогда не было на моем сайте. В чем дело? Откуда они взялись?
404 О: Если Google найдет в сети ссылку, указывающую на URL-адрес в вашем домене, он может попытаться просканировать ее независимо от того, существует ли там какой-либо контент; и когда он это сделает, ваш сервер
404должен вернуть ответ, если там нечего искать. These links could be caused by someone making a typo when linking to you, some type of misconfiguration (if the links are automatically generated, for example, by a CMS), or by Google’s increased efforts to recognize and crawl links embedded in JavaScript or other embedded content; or they may be part of a quick check from our side to see how your server handles unknown URLs, to name just a few. If you see errors reported in Webmaster Tools for URLs that don’t exist on your site, you can safely ignore them. We don’t know which URLs are important to you vs. which are supposed to, so we show you all ошибки, которые мы обнаружили на вашем сайте, и 404 позвольте вам решить, какие из них, если таковые имеются, требуют вашего внимания.

В: Кто-то скопировал мой сайт с помощью парсера и вызвал кучу 404 ошибок в процессе. Все они представляют собой “реальные” URL с прикрепленным дополнительным кодом, например
https://www.example.com/images/kittens.jpg" width="100" height="300" alt="kittens"/>
Повредит ли это моему сайту?
О: Как правило, вам не нужно беспокоиться о том, что такие “битые ссылки” навредят вашему сайту. Мы
понимаем, что владельцы сайтов имеют минимальный контроль или вообще не контролируют тех, кто парсит их сайт илиссылается на него странным образом. Если вы ас в
regex,
вы можете рассмотреть вариант перенаправления этих URL
, но в целом

это не стоит вашего беспокойства. Помните, что вы также можете подать 404 запрос на удаление
контента, когда считаете, что кто-то ворует оригинальные материалы с вашего сайта. 404 В: На прошлой неделе я исправил все

ошибки, о которых сообщал Webmaster Tools, но они все еще отображаются в моем аккаунте. Значит ли это, что я исправил их неправильно? Сколько времени пройдет, прежде чем они исчезнут?
О: Взгляните на столбец “Обнаружено” на странице ошибок сканирования — это самая свежая дата,когда мы обнаружили каждую ошибку. Если дата(ы) в этом столбце предшествуют времени исправления ошибок, это означает, что мы не сталкивались с этими ошибками с указанной даты. Если даты более свежие, это значит, что мы продолжаем видеть эти

ошибки при сканировании. 404 После внедрения исправления вы можете проверить, видит ли наш сканер новый код ответа, используя функцию

Просмотреть как Googlebot 404. Проверьте несколько URL, и если все выглядит нормально, эти ошибки вскоре должны начать исчезать из вашего списка ошибок сканирования.
В: Могу ли я использовать инструмент удаления URL от Google, чтобы
ошибки исчезли из моего аккаунта быстрее?

О: Нет; инструмент удаления URL удаляет URL из результатов поиска Google, а не из вашего аккаунта Webmaster Tools. Он предназначен только для срочных запросов на удаление, и его использование не требуется, когда URL уже возвращает 404 , поскольку такой URL со временем естественным образом исчезнет из наших результатов поиска. Подробную информацию о том, что инструмент удаления URL может и не может сделать для вас, см. в нижней половине
404 этой записи в блоге .
Все еще хотите узнать больше об.

ошибках? Ознакомьтесь с
нашейстатьей в блоге за неделю или загляните на наш