Googlebot и история про 15 МБ

Вторник, 28 июня 2022 г.

За последние несколько дней мы получили множество вопросов о недавнем обновлении в
нашей документации о Googlebot,
а именно: мы задокументировали, что Googlebot всегда “видит” только первые 15 мегабайт
(МБ)при запросе

определенных типов файлов
. Этот порог не нов; он существует уже много лет. Мы просто добавили его в нашу документацию, так как это может быть полезно некоторым людям при отладке, и потому что он практически никогда не меняется. Этот лимит применяется только к

16 марта 2023 г. : Чтобы уточнить дополнительно, каждый отдельный запрос подресурсов (в частности, CSS и JavaScript) ограничен лимитом в 15 МБ.Например, когда вы открываете

https://example.com/puppies.html
, ваш браузер сначала загружает байты HTML-файла и на их основе может делать дальнейшие запросы внешнего JavaScript, изображений или всего остального, на что ссылается URL в HTML.
Googlebot делает то же самое.
Что этот лимит в 15 МБ означает для меня?
Скорее всего, ничего.
В интернете очень мало страниц:
30 большего размера. Вы, дорогой читатель, вряд ли являетесь владельцем одной из них, посколькумедианный размер HTML-файла примерно в 500 раз меньше

килобайт (кБ)
.
Однако, если вы являетесь владельцем HTML-страницы размером более 15 МБ, пожалуйста, перенесите хотя бы часть инлайн-скриптов и CSS во внешние файлы.

Что происходит с контентом после 15 МБ?
Контент после первых 15 МБ отбрасывается Googlebot, и только первые 15 МБ передаются для индексации.
К каким типам контента применяется лимит в 15 МБ?.

Лимит в 15 МБ применяется к запросам, выполняемым Googlebot (Googlebot Smartphone и Googlebot Desktop) при запросе
типов файлов, поддерживаемых Поиском Google
Означает ли это, что Googlebot не видит мое изображение или видео?
Нет. Googlebot запрашивает видео и изображения, на которые есть ссылки в HTML по URL (например,

<img src=”https://example.com/images/puppy.jpg” alt=”cute puppy looking very disappointed” />
), отдельно последовательными запросами.
Увеличивают ли Data URI размер HTML-файла?
Да. Использование

Data URI
увеличит размер HTML-файла, так как они находятся внутри него.

Как узнать размер страницы?
Есть несколько способов, но самый простой — использовать собственный браузер и его инструменты разработчика. Загрузите страницу как обычно, затем откройте инструменты разработчика и перейдите на вкладку Network (Сеть). Перезагрузите страницу, и вы увидите все запросы, которые вашему браузеру пришлось сделать для рендеринга страницы. Самый верхний запрос — это то, что вам нужно, с размером страницы в байтах в колонке Size (Размер).
Например, в

Chrome Developer Tools это может выглядеть примерно так, со значением 150 кБ в колонке размера:
Если вы более опытны, вы можете использовать

cURL
из командной строки:
Если у вас есть еще вопросы, вы можете найти нас в
Twitterи на форумах

Search Central Forums ,
а если вам нужны дополнительные разъяснения по нашей документации, оставьте нам отзыв на самих страницах.