Вы отлаживаете ошибки рендеринга Googlebot, используя инструмент проверки URL в Google Search Console для сравнения необработанного HTML с отрендеренным состоянием вашей страницы. Когда Googlebot сканирует сайт, он выполняет двухэтапный процесс, при котором сначала считывает исходный HTML, а затем ставит страницу в очередь на рендеринг. Если ваш контент зависит от JavaScript для загрузки, инструмент подсвечивает расхождения между тем, что отправляет сервер, и тем, что на самом деле видит пользователь.
Для многих современных веб-сайтов сервер предоставляет минимальный шаблон, который заполняется контентом с помощью клиентских скриптов. Если эти скрипты не выполняются или заблокированы, Googlebot может проиндексировать пустую страницу или неполную версию вашего контента. Изолировав точную точку, где останавливается рендеринг, вы можете определить, вызвана ли ошибка ошибками кода, тайм-аутами сети или конфигурационными блоками в вашем файле robots.txt.
Почему Googlebot не рендерит ваш контент?
Ошибки рендеринга часто возникают из-за проблем в очереди Web Rendering Service или заблокированных ресурсов. Googlebot должен выполнять клиентские скрипты для построения Document Object Model, и если критические активы, такие как файлы CSS или JavaScript, заблокированы вашим файлом robots.txt, рендерер не может правильно построить страницу. Это приводит к неполному профилю индекса, где важный контент остается невидимым.
Еще одна распространенная причина связана с тайм-аутами на стороне сервера. Если ваш сервер слишком долго отвечает рендереру или если ваш JavaScript-бандл чрезмерно велик, движок рендеринга может выдать тайм-аут. Это мешает среде, подобной браузеру, завершить выполнение ваших скриптов. В типичном аккаунте мы часто видим, что разработчики используют устаревшие полифиллы, которые не поддерживаются движком рендеринга evergreen, что приводит к скрытым ошибкам скриптов во время сканирования.
- Заблокированные файлы JavaScript в robots.txt мешают рендереру выполнять логику.
- Тайм-ауты на стороне сервера заставляют рендерер покинуть страницу до завершения.
- Чрезмерное количество полифиллов или устаревший код, который не поддерживается текущей версией движка рендеринга.
- Критические метаданные, внедряемые через клиентские скрипты, которые не загружаются при проходе рендеринга.
Как эффективно использовать инструмент проверки URL
Начните с ввода вашего конкретного URL в верхнюю строку поиска Google Search Console. Как только инструмент получит данные, нажмите «Проверить текущую страницу», чтобы получить самый свежий снимок вашей страницы. Эта функция имитирует то, как Googlebot в настоящее время воспринимает ваш сайт, позволяя вам увидеть отрендеренный HTML и скриншоты страницы в том виде, в котором они появляются для краулера.
При проверке результатов обратите пристальное внимание на раздел «Посмотреть просканированную страницу». Это позволяет переключаться между необработанным HTML, который сервер отправил изначально, и DOM, который рендерер создал после выполнения ваших скриптов. Если вы видите текст на вкладке «Отрендерено», которого нет на вкладке «HTML», это подтверждает, что ваш контент генерируется динамически. Если вкладка «Отрендерено» пуста, у вас критическая ошибка рендеринга, требующая немедленного исправления.
Googlebot идентифицирует сгенерированные JavaScript канонические теги и мета-роботы, выполняя код страницы через свой Web Rendering Service после первоначальной загрузки HTML.
Google Search Central
Как Alien Road применяет это
В Alien Road мы следуем строгому протоколу при аудите сайтов клиентов на наличие проблем с рендерингом. В типичном проекте мы сначала проводим масштабное сканирование для выявления приоритетных страниц, а затем используем инструмент проверки, чтобы убедиться, что основной контент присутствует в отрендеренном DOM. Мы проверяем вкладку «Посмотреть просканированную страницу», чтобы убедиться, что текст, изображения и внутренние ссылки отображаются именно так, как задумано для пользователя.
Мы часто сталкиваемся с проблемами, когда интерактивные элементы, такие как цены на товары или значки наличия, не рендерятся. Наша команда систематически сравнивает текущее отрендеренное состояние с ожидаемой структурой DOM, чтобы точно определить, где скрипт дает сбой. Предоставляя нашим разработчикам конкретные ошибки консоли, найденные в инструменте проверки, мы ускоряем цикл исправления, гарантируя, что поисковые системы могут точно считывать данные об инвентаре наших клиентов.
Шаги для технических аудитов
- Проверьте вкладку «Дополнительная информация» на наличие ошибок консоли JavaScript, о которых сообщает рендерер.
- Убедитесь, что ваш файл robots.txt не блокирует внутренние библиотеки скриптов.
- Сравните «Исходный» HTML с «Отрендеренным» кодом, чтобы обнаружить отсутствующие динамические элементы.
- Протестируйте мобильные и десктопные пользовательские агенты, чтобы обеспечить согласованность между устройствами.
Каковы общие признаки проблем с рендерингом?
Вы можете заметить, что страницы проиндексированы, но показывают «пустые» сниппеты в результатах поиска. Еще одним индикатором является значительное падение органического трафика для страниц, которые сильно зависят от динамической загрузки. Если инструмент проверки URL показывает пустой экран или отсутствующий текст, краулер, вероятно, испытывает трудности с выполнением скриптов, необходимых для заполнения макета вашей страницы.
Кроме того, проверьте наличие несоответствующих мета-тегов. Если ваши теги заголовков или описания меняются в зависимости от взаимодействия с пользователем, Googlebot должен отрендерить страницу, чтобы увидеть эти изменения. Если ваша проверка показывает, что «Источник» содержит стандартные теги заголовков, в то время как вкладка «Отрендерено» показывает правильные, убедитесь, что ваша скорость рендеринга оптимизирована, чтобы краулер их не пропустил.
Как предотвратить будущие сбои?
Предотвращение начинается с внедрения подхода рендеринга на стороне сервера для вашего самого важного контента. Подавая полностью сформированный HTML с вашего сервера, вы устраняете зависимость от очереди рендеринга Googlebot. Это делает ваш контент немедленно доступным для индексатора, независимо от того, успешно ли выполнено выполнение JavaScript или оно задерживается.
Если рендеринг на стороне сервера невозможен для вашей платформы, следите за использованием ресурсов. Убедитесь, что ваши JavaScript-бандлы минимизированы, и избегайте использования современных функций браузера, которые еще не совместимы с движком рендеринга. Регулярно проверяйте отчеты Search Console на наличие всплесков ошибок рендеринга, так как они часто коррелируют с новыми развертываниями кода.
С чего начать на этой неделе
Определите свои 20 самых важных страниц, содержащих динамический контент. Запустите каждую из них через живой тест в Search Console, чтобы подтвердить статус рендеринга. Если вы видите ошибки, просмотрите журналы сервера и раздел «Ресурсы страницы» инструмента, чтобы увидеть, какие файлы заблокированы. Исправление этих ошибок поможет Googlebot индексировать ваши страницы более точно и надежно.