Пятница, 12 сентября 2008 г.
Дублированный контент. В нем есть что-то особенное. Мы
продолжаем
писать
об
этом, и люди продолжают задавать вопросы. В частности, я все еще часто слышу, как веб-мастера беспокоятся о том, не наложены ли на их сайт «санкции за дублированный контент».
Давайте закроем этот вопрос раз и навсегда, друзья: не существует такого понятия, как «санкции за дублированный контент». По крайней мере, не в том смысле, который большинство людей вкладывает в эти слова.
Существуют определенные санкции, связанные с идеей наличия такого же контента, как на другом сайте, — например, если вы копируете (парсите) контент с других сайтов и публикуете его заново или если вы републикуете контент, не добавляя никакой дополнительной ценности. Эти тактики четко описаны (и не приветствуются) в наших
Рекомендациях для веб-мастеров:
- Не создавайте множество страниц, поддоменов или доменов со значительным
дублированием контента. - Избегайте… шаблонных подходов, таких как партнерские программы с
небольшим количеством оригинального контента или вовсе без него. - Если ваш сайт участвует в
партнерской программе, убедитесь, что ваш сайт несет в себе ценность. Предоставляйте уникальный и релевантный контент, который дает пользователям причину посетить ваш сайт в первую очередь.
(Обратите внимание, что хотя парсинг чужого контента не приветствуется, ситуация, когда другие парсят ваш сайт, — это совсем другое дело;
ознакомьтесь с этой статьей
, если вы беспокоитесь о том, что вас скопируют.)
Но большинство владельцев сайтов, чьи опасения по поводу дублированного контента доходят до меня, говорят вовсе не о парсинге или доменных фермах; они говорят о таких вещах, как наличие нескольких URL-адресов на одном домене, которые ведут на один и тот же контент. Например:
www.example.com/skates.asp?color=black&brand=riedell
и www.example.com/skates.asp?brand=riedell&color=black. Наличие такого дублированного контента на вашем сайте может потенциально повлиять на его производительность, но оно не приводит к санкциям. Из нашей статьи о
дублированном контенте:
Наличие дублированного контента на сайте само по себе не является основанием для принятия мер против этого сайта, если только не очевидно, что целью дублирования является введение в заблуждение и манипулирование результатами поиска. Если на вашем сайте есть проблемы с дублированным контентом и вы не следуете приведенным выше советам, мы отлично справляемся с выбором наиболее подходящей версии контента для показа в результатах поиска.
Такое незлонамеренное дублирование встречается довольно часто, особенно учитывая, что многие CMS по умолчанию плохо с этим справляются. Поэтому, когда люди говорят, что наличие такого дублированного контента может повлиять на ваш сайт, дело вовсе не в том, что вы попадете под санкции; это просто особенность работы веб-сайтов и поисковых систем.
Большинство поисковых систем стремятся к определенному уровню разнообразия; они хотят показать вам десять разных результатов на странице поисковой выдачи, а не десять разных URL-адресов с абсолютно одинаковым контентом. С этой целью Google старается отсеивать дубликаты документов, чтобы пользователи сталкивались с меньшим количеством повторов. Подробности вы можете найти в
этой записи в блоге, где говорится:
- Когда мы обнаруживаем дублированный контент, например, в результате вариаций, вызванных параметрами URL, мы объединяем такие дублирующиеся URL в один кластер.
- Мы выбираем то, что считаем «лучшим» URL-адресом для представления этого кластера в результатах поиска.
- Затем мы переносим свойства URL-адресов из кластера (например, ссылочную популярность) на выбранный репрезентативный URL.
Вот как это может отразиться на вас как на веб-мастере:
- На этапе 2 представление Google о том, какой URL является «лучшим», может не совпадать с вашим. Если вы хотите контролировать, какой именно адрес —
www.example.com/skates.asp?color=black&brand=riedellили
www.example.com/skates.asp?brand=riedell&color=black— показывается в результатах поиска, вы можете принять меры для устранения дублирования. Один из способов сообщить нам, какому URL вы отдаете предпочтение, — указать его в файле
Sitemap. - На этапе 3, если мы не сможем обнаружить все дубликаты конкретной страницы, мы не сможем объединить все их свойства. Это может ослабить силу сигналов ранжирования данного контента, разделив их между несколькими URL-адресами.
В большинстве случаев Google успешно справляется с такого рода дублированием. Тем не менее, вам также стоит подумать о контенте, который дублируется между разными доменами. В частности, если ваша бизнес-модель зависит от поискового трафика, вам стоит дважды подумать, прежде чем создавать сайт, сама суть которого подразумевает дублирование контента, если только вы не можете предложить пользователям значительную дополнительную ценность. Например, мы иногда слышим от партнеров Amazon.com, что им сложно добиться высоких позиций по контенту, который полностью заимствован у Amazon. Связано ли это с тем, что Google хочет помешать им продавать
Everyone Poops? Нет; дело в том, как, черт возьми, они собираются обойти Amazon , если они предоставляют абсолютно то же самое описание? У Amazon мощный авторитет в сфере онлайн-бизнеса (вероятно, больший, чем у типичного сайта партнера Amazon), и средний пользователь поиска Google, скорее всего, предпочтет исходную информацию на Amazon, если только партнерский сайт не добавил значительный объем
дополнительной ценности.
Наконец, подумайте о том, как дублирование может повлиять на пропускную способность (трафик сканирования) вашего сайта. Дублированный контент может привести к неэффективному сканированию: когда Googlebot обнаруживает десять URL-адресов на вашем сайте, он вынужден сканировать каждый из них, прежде чем поймет, содержат ли они одинаковый контент (и, соответственно, прежде чем мы сможем сгруппировать их, как описано выше). Чем больше времени и ресурсов Googlebot тратит на сканирование дублирующегося контента по разным URL, тем меньше времени у него остается на остальной ваш контент.
Краткий итог: наличие дублированного контента может повлиять на ваш сайт самыми разными способами; однако, если вы не занимались дублированием намеренно, вряд ли это приведет к санкциям. Это означает следующее:
- Обычно вам не нужно отправлять запрос на пересмотр (reconsideration request), когда вы очищаете сайт от случайно созданных дубликатов.
- Если вы веб-мастер от начального до среднего уровня, вам, вероятно, не стоит тратить слишком много энергии на беспокойство о дублированном контенте, так как у большинства поисковых систем есть инструменты для работы с ним.
- Вы можете помочь своим коллегам-веб-мастерам, не поддерживая миф о санкциях за дублированный контент! Способы решения проблем с дубликатами полностью находятся под вашим контролем. Вот несколько хороших отправных точек:
Как мы это применяем
Google announcements age. We keep this post here for the record, and we note for clients whether the behaviour it describes still applies today or has since been superseded.
Связанные услуги