Как исправить ошибки Soft 404 на крупных сайтах электронной коммерции

Ошибки soft 404 на сайтах электронной коммерции возникают, когда веб-сервер отправляет код состояния 200 OK для страницы, которая на самом деле не существует или не содержит контента. Чтобы исправить это, вы должны настроить свой сервер так, чтобы он возвращал код 404 Not Found или 410 Gone для отсутствующих страниц. Исправление этих проблем помогает Google сосредоточиться на ваших живых товарах, что повышает общую эффективность сканирования и ваши позиции в поисковой выдаче.

Что именно представляет собой ошибка soft 404 в крупном интернет-магазине?

Soft 404 — это не официальный код состояния HTTP. Вместо этого это метка, которую Google использует для описания страницы, которая выглядит как ошибка для посетителя, но сообщает поисковой системе, что все в порядке. Для крупного онлайн-ритейлера это часто происходит на страницах результатов поиска без товаров или на страницах товаров, которых больше нет в наличии. Сервер выдает страницу с надписью «Товар не найден», но технически сообщает сканеру, что страница является допустимым пунктом назначения.

Это несоответствие создает серьезные проблемы для архитектуры сайта. Когда Googlebot видит статус 200 OK, он предполагает, что страница содержит ценную информацию. Он проиндексирует страницу и вернется, чтобы просканировать ее позже. Если на вашем сайте тысячи таких пустых страниц, сканер тратит свое время на бесполезные URL-адреса. Эта трата ресурсов мешает поисковой системе находить ваши новинки или обновленные цены.

Почему Google определяет эти страницы как ошибки?

Цель Google — обеспечить лучший пользовательский опыт. Если пользователь кликает по результату поиска и попадает на страницу с надписью «К сожалению, эта категория пуста», он испытывает разочарование. Google обнаруживает эти «тощие» страницы, ища определенные шаблоны, такие как отсутствие основного контента или заголовков, указывающих на то, что товар отсутствует. Когда алгоритмы находят страницу с очень небольшим количеством уникального текста, которая все еще использует успешный код состояния, они помечают ее как soft 404.

Хорошая структура проектирования URL помогает Google сканировать и индексировать ваш сайт, в то время как плохая структура URL может привести к следующим проблемам.

Google Search Central

Одной из основных проблем является размытие сигналов ранжирования. Если у вас есть десять разных URL-адресов, которые ведут к пустым результатам поиска или сообщениям «нет в наличии», ваш сайт выглядит так, будто на нем много некачественного контента. Это может снизить воспринимаемую ценность всего домена. Крупные сайты электронной коммерции особенно уязвимы, потому что их внутренние системы поиска и фильтрации могут генерировать миллионы уникальных, но пустых комбинаций URL.

Как найти ошибки soft 404 в Search Console?

Основной способ обнаружения этих проблем — отчет «Indexing» (Индексирование) в Google Search Console. Найдите категорию с меткой «Excluded» (Исключено) и найдите конкретный статус «Soft 404». Этот отчет предоставляет список URL-адресов, которые Google определил как проблемные. Вы должны изучить эти URL-адреса, чтобы узнать, есть ли у них общий путь или параметр. Например, вы можете обнаружить, что все ваши истекшие промо-страницы появляются в этом списке.

• Перейдите в раздел «Индексирование» в Search Console.
• Выберите отчет «Страницы», чтобы просмотреть статус URL-адресов вашего сайта.
• Отфильтруйте по запросу «Soft 404», чтобы увидеть точные ссылки, отмеченные Google.
• Экспортируйте список в электронную таблицу для пакетного анализа.
• Проверьте, действительно ли эти страницы пусты или они содержат релевантный контент, который Google неправильно интерпретирует.

Как Alien Road применяет исправления soft 404

Когда мы управляем крупными каталогами для наших клиентов, наша команда начинает с обхода всего сайта, чтобы сопоставить коды состояния с содержимым страниц. Мы ищем шаблоны, где пустые результаты поиска или устаревшие страницы товаров все еще возвращают сигнал 200 OK. Например, типичная задача включает в себя сканирование страниц, содержащих такие фразы, как «найдено 0 элементов» или «нет в наличии», с одновременной проверкой заголовка ответа сервера. Если мы находим тысячи таких страниц, мы знаем, что бюджет сканирования расходуется впустую.

Мы работаем с командой разработки клиента для реализации логики на стороне сервера. Для магазина на Shopify, продающего товары для дома, мы можем настроить правило, которое автоматически меняет код состояния на 404, когда товар удаляется из базы данных. Если товар отсутствует на складе только временно, мы сохраняем статус 200 OK, но следим за тем, чтобы на странице все еще был полезный контент, например сопутствующие товары. Затем мы следим за Search Console в течение нескольких недель, чтобы убедиться, что количество исключенных страниц уменьшается по мере того, как Google пересканирует сайт.

Лучшие практики управления страницами товаров, которых нет в наличии

Управление изменениями запасов — постоянная проблема для онлайн-ритейлеров. У вас есть три основных варианта, когда товар больше недоступен. Первый — оставить страницу активной со статусом 200 OK. Это рекомендуется только в том случае, если товар скоро вернется. Вы должны предоставить четкое уведомление «снова в наличии» или предложить похожие товары, чтобы вовлечь пользователя. Если страница полностью пуста, Google, скорее всего, все равно пометит ее.

Второй вариант — перенаправление 301. Это полезно, если у вас есть более новая версия продукта. Перенаправление старого URL на новый передает ценность ранжирования и удерживает пользователя на релевантной странице. Тем не менее, вы не должны перенаправлять каждую неработающую ссылку на свою домашнюю страницу. Google часто рассматривает массовые перенаправления на домашнюю страницу как soft 404, потому что домашняя страница не является прямой заменой конкретной страницы продукта.

• Используйте коды 404 или 410 для продуктов, которые никогда не вернутся и не имеют прямой замены.
• Используйте перенаправления 301 только тогда, когда существует высокорелевантный заменитель.
• Убедитесь, что пустые страницы категорий возвращают код 404 до тех пор, пока не будут добавлены новые продукты.
• Оставляйте страницы «нет в наличии» активными только в том случае, если они представляют ценность, например подписку по электронной почте на оповещения.
• Убедитесь, что ваша пользовательская страница 404 не возвращает статус 200 OK.

Может ли фасетная навигация вызывать проблемы с soft 404?

Фасетная навигация является основным источником «тощего» контента. Когда покупатели комбинируют несколько фильтров, таких как размер, цвет и цена, платформа генерирует уникальный URL. Если конкретная комбинация, например «Синие шелковые носки экстра-большого размера», дает ноль результатов, получившаяся страница является главным кандидатом на soft 404. Googlebot может найти эти ссылки через внутреннюю навигацию вашего сайта и попытаться их проиндексировать.

Чтобы предотвратить это, вы должны использовать теги «noindex» на страницах фильтров, которые, скорее всего, будут пустыми. В качестве альтернативы вы можете использовать robots.txt, чтобы заблокировать сканирование Google определенных комбинаций параметров. Это сохраняет ваш индекс чистым и гарантирует, что поисковая система видит только те страницы, которые действительно содержат товары. Управление этими фильтрами является ключевой частью поддержания здоровой архитектуры сайта электронной коммерции.

Контент может быть упущен, если Googlebot ошибочно посчитает, что два URL-адреса вернут один и тот же контент, так как скалер может получить только один URL-адрес.

Google Search Central

С чего начать на этой неделе

Начните с открытия Search Console и проверки отчета об индексировании на наличие предупреждений о soft 404. Если вы видите большое количество ошибок, перейдите в отчет, чтобы посмотреть, какие URL-адреса затронуты. Определите, являются ли это устаревшими продуктами, пустыми категориями или результатами фильтрации. Выберите десять лучших URL-адресов и вручную проверьте их коды состояния с помощью расширения браузера или инструмента проверки заголовков.

Как только вы определили причину, поговорите со своей технической командой об изменении ответа сервера для этих конкретных шаблонов. Если вы используете такую платформу, как BigCommerce или Magento, проверьте настройки для «снятых с производства продуктов», чтобы узнать, можно ли автоматизировать процесс 404 или 301. Устранение этих ошибок — надежный способ улучшить видимость вашего сайта и убедиться, что Google сосредоточен на страницах, которые приносят продажи.