Как отслеживать индексацию и управлять ею?

Мониторинг индексации означает ответы на пять вопросов, и в консоли есть отчет для каждого из них: когда пришел робот и что произошло, какие страницы находятся в поиске, а какие были исключены и почему, как работает каждый раздел, статус конкретной страницы и статус страниц, которые вы отметили как важные.

Отчеты и для чего предназначен каждый из них

• Статистика обхода (Индексация → Статистика обхода) — график истории плюс таблица кодов ответа, полученных роботом. Это журнал событий: что на самом деле ответил сервер и когда.
• Проверка страницы (Индексация → Проверить страницу) — статус одного URL, для десктопа или мобильных устройств, с подробной информацией.
• Страницы в поиске — что находится в поиске, что было исключено и указанная причина каждого исключения.
• Структура сайта — та же картина в разрезе разделов, где становится заметен сбой шаблона.
• Мониторинг важных страниц — наблюдение за конкретными URL с уведомлениями.

Два элемента управления

Помимо отчетов, консоль позволяет устанавливать скорость обхода и проверять, настроен ли robots.txt должным образом. Это единственные два прямых рычага; все остальное — наблюдение.

Как работать с этим набором

Читайте их в порядке специфичности. Поаудитные показатели на уровне сайта говорят вам, изменилось ли что-то. Цифры на уровне разделов локализуют проблему. Коды ответа в статистике обхода говорят о том, что сделал сервер. Проверка страницы подтверждает диагноз по одному URL. Начинать с частного конца — проверять отдельные страницы, не зная, затрагивает ли проблема весь сайт — это путь, когда аудиты пожирают дни и рождают мифы.

Привычка, которую стоит выработать

Короткий еженедельный обход: «Мои сайты» для всего, что изменилось, затем просмотр по разделам для изменившегося сайта, а затем статистика обхода, отфильтрованная по дате. Десять минут — и вылавливаете ошибки шаблона в ту неделю, когда они выкатываются, а не в тот месяц, когда они отражаются на выручке.