Пятница, 24 ноября 2023 г.
Инструмент ограничения скорости сканирования в Search Console будет отключен 8 января 2024 года. Этот инструмент был
доступен более десяти лет, но с усовершенствованиями, которые мы внесли в нашу логику сканирования и другие доступные издателям инструменты, его полезность снизилась.
Googlebot реагирует на то, как сайт — точнее, сервер, обслуживающий сайт — отвечает на HTTP-запросы Googlebot. Например, если сервер постоянно возвращает HTTP
500 коды состояния для диапазона URL-адресов, Googlebot автоматически и практически сразу замедляет сканирование. Аналогичным образом Googlebot автоматически замедляет работу, если время ответа на запросы значительно увеличивается. Если вы столкнулись с необычно интенсивным сканированием, с которым ваш сайт не справляется самостоятельно, обратитесь к этой
справочной статье.
Напротив, инструмент ограничения скорости оказывал гораздо более медленный эффект; на самом деле применение новых ограничений к сканированию могло занять больше суток. К счастью, владельцам сайтов редко приходилось прибегать к использованию этого инструмента, а те, кто это делал, во многих случаях устанавливали скорость сканирования на абсолютный минимум. С упразднением инструмента ограничения сканирования мы также устанавливаем минимальную скорость сканирования на более низкий уровень, сопоставимый со старыми ограничениями скорости сканирования. Это означает, что мы фактически продолжаем соблюдать настройки, заданные некоторыми владельцами сайтов в прошлом, если поисковый интерес невелик, и наши сканеры не расходуют впустую пропускную способность сайта.
Благодаря достижениям в области автоматизированного управления скоростью сканирования и в целях упрощения работы пользователей мы отключаем этот инструмент в Search Console. Мы сохраняем
форму отчета Googlebot для сообщения о необычной активности Googlebot и для экстренных случаев, но помните, что самый быстрый способ снизить скорость сканирования — это дать инструкции Googlebot через ответы сервера, как подробно описано в
нашей документации.
Если у вас есть вопросы или комментарии, пишите в нашем
сообществе Google Search Central.
Как мы это применяем
Google announcements age. We keep this post here for the record, and we note for clients whether the behaviour it describes still applies today or has since been superseded.
Связанные услуги