Ошибки

Список ошибок — это место, где Яндекс сообщает о проблемах, которые либо удаляют страницы из поиска, либо ухудшают индексирование. Проверки выполняются ежедневно. Каждая запись содержит причину и способ исправления; далее описано, что эти записи означают на практике и в каком порядке мы с ними работаем.

Главная страница возвращает ошибку

Самая серьезная запись в списке, поскольку Яндекс воспринимает главную страницу как сигнал доступности сайта. Три частые причины: оставшаяся в HTML директива noindex , редирект с главной страницы или блокировка робота Яндекса системой безопасности хостинга. Проверьте код ответа в разделе Индексация → Статистика обхода, затем запустите проверку ответа сервера. Обратите внимание на раздел Содержимое страницы : статус «содержимое страницы отсутствует» при коде 200 OK обычно означает, что сервер отправляет заголовки Content-length: 0, и робот не может проиндексировать страницу с нулевой заявленной длиной, даже если браузер отображает ее идеально.

Ошибка DNS

Робот определяет IP-адрес сайта один раз в день. Если это не удается, сайт вообще не индексируется. Причины банальны и критичны в равной степени: неверно настроенные DNS-записи, временный сбой или то, на чем малый бизнес спотыкается каждый год — непродленный домен. Исправления появляются в панели вебмастера в течение нескольких дней.

Сайт закрыт от индексации в robots.txt

Робот запрашивает файл robots.txt несколько раз в день. Директива Disallow замораживает всю информацию о сайте. Тонкий нюанс этой ошибки заключается в ее привязке к протоколу: сайт отвечает как по HTTP, так и по HTTPS, панель зарегистрирована на HTTP, а файл блокирует оба варианта. Решение заключается не в том, чтобы просто отредактировать файл — добавьте адрес HTTPS в панель, настройте редирект с HTTP на HTTPS и отправьте запрос на переезд сайта, чтобы Яндекс осознанно перенес основной адрес.

Проблемы с безопасностью или нарушения

Эта запись ведет на конкретное обнаруженное нарушение: SEO-тексты, неожиданный редирект, маскировка под другой ресурс, клоакинг, нежелательное ПО, социальная инженерия, мошеннические действия, малополезный контент или симулятор поведения пользователя. Это оценки в масштабе всего сайта, а не ошибки на уровне отдельной страницы, и для каждой из них предусмотрен свой путь восстановления.

Медленный ответ сервера

Робот фиксирует среднее время ответа при обходе. Более трех секунд регистрируются как ошибка, и индексация соответственно замедляется. Список проблемных страниц указан в сообщении — как правило, оказывается, что дело в одном медленном шаблоне (результаты поиска, отфильтрованная категория, страница товара без кэширования), а не в сайте в целом.

Методика работы

Группируйте проблемы по причине, а не по URL: сотня записей обычно сводится к двум-трем шаблонным проблемам. Исправьте, проверьте с помощью проверки ответа сервера, отправьте на переиндексацию, а затем заявите об исправлении в панели — именно в таком порядке, поскольку отправка заявки об исправлении, которое еще не вступило в силу, влечет за собой 30-дневное ожидание.