Яндекс описывает свой собственный пайплайн в четыре этапа, и понимание того, к какому этапу относится проблема, превращает смутную жалобу в устранимую.

Как добавить сайт в поиск?

Страницы появляются в поиске после того, как их посетят роботы Яндекса. Задача добавления сайта в поиск сводится к двум шагам: сделать страницы видимыми для робота и сообщать ему, когда они меняются.

• Три канала обнаружения Карта сайта (sitemap).
• Автоматически. Охватывает каждый URL на сайте; обрабатывается при следующем краулинге робота. Краулинг через счетчик Яндекс Метрики.
• Автоматически. Установите счетчик, привяжите его к сайту в консоли, и робот узнает о тех страницах, куда действительно заходят посетители, включая те, на которые не ведет ни одна ссылка. Переиндексация.

Вручную. Указывает конкретные URL, которые нужно посетить в первую очередь (для новых или важных страниц).

Они дополняют друг друга, а не заменяют. Sitemap описывает сайт так, как его понимает владелец; счетчик Метрики описывает его так, как его видят посетители; переиндексация обрабатывает конкретную страницу, которая важна сегодня. Сайт, полагающийся только на один канал, доступен для обнаружения лишь в той степени, в какой точен этот канал.

Чего ни один из них не гарантирует

Обнаружение не равно включению в индекс. Страница может быть откраулена и все равно исключена — как дубль, как малоценный или невостребованный контент, либо из-за запрещающей директивы. Инструменты отправки сокращают время ожидания, но они не меняют вердикт.

Предварительные требования Все три канала предполагают, что страницы действительно доступны: <a href> простой путь откуда-либо, 200 OK

ответ, отсутствие блокирующих директив и наличие контента в HTML, который получает робот. Инструмент отправки, направленный на страницу, которую робот не может использовать, выдает статус «запрос обработан» и ничего более.

Практическая настройка