Два инструмента отвечают на вопрос, действительно ли важные страницы находятся в поиске, и разница между ними заключается в охвате: один непрерывно отслеживает выбранный список, другой проверяет отдельный URL по запросу.
Мониторинг важных страниц
Добавьте URL-адреса в разделе Индексирование → Мониторинг важных страниц, до 100 на сайт. В таблице отображается статус каждой страницы в поиске, и — что стоит знать — меню из трех точек рядом со статусом объясняет, почему страница была исключена и как это исправить. Диагноз привязан к строке, а не требует отдельного расследования.
После устранения проблемы отправьте страницу на переиндексацию, чтобы робот вернулся раньше, чем это произошло бы по его собственному графику.
Проверка страницы
Для быстрого ответа по одному URL: Индексирование → Проверить страницу, затем Подробнее → версия страницы в базе данных. Яндекс добавляет предупреждение, которое здесь важнее всего: страница может быть обойдена роботом и все равно не быть включена в поиск. Наличие в базе данных не означает наличие в результатах, и принятие первого за второе — самая частая ошибка в диагностике во всей этой области.
Статистика обхода как третий вид
Когда ни то, ни другое выше не объясняет ситуацию, статистика обхода показывает, что и когда ответил сервер — журнал событий, стоящий за текущим состоянием.
Построение работающей рутины
Заполняйте список мониторинга на основе коммерческой ценности, а не трафика: страницы за платными кампаниями, основные категории доходов, страницы, на вывод в топ ушли месяцы. Затем включите уведомления, чтобы инструмент сам сообщал вам, а не ждал, пока его посетят. Список мониторинга, который никто не открывает, равен отсутствию мониторинга вообще, а уведомление — это то, что превращает его в систему раннего предупреждения.
Последовательность
Мониторинг говорит что-то изменилось; проверка страницы говорит каково состояние сейчас; статистика обхода говорит что сделал сервер. Работа с ними в таком порядке позволяет локализовать практически любую проблему индексации за считанные минуты.
Как мы это применяем
We populate the monitoring list from revenue rather than from Yandex’s click recommendations, because the pages worth watching are the ones that would hurt if they broke, not the busiest. The distinction we spend the most time explaining is crawled versus in search — clients see a recent crawl date, conclude the page is fine, and the exclusion reason is sitting one click away in the same table.
Связанные услуги