SMX Advanced'te duplicate content zirvesi

13 Haziran 2007, Çarşamba

Geçtiğimiz hafta SMX Advanced‘de düzenlenen kopya içerik zirvesine katıldım.
Buffy’nin günlük arama pazarlaması dünyasına nasıl uygulanabileceğini gösterme fırsatını kaçıramazdım; ancak oradaki temel amacım, karşılaştığınız kopya içerik sorunları hakkında sizden geri bildirim almak ve arama motorlarının bu konuda nasıl yardımcı olabileceğine dair beyin fırtınası yapmaktı.

Birkaç ay önce Adam, kopya içerikle başa çıkma konusunda harika bir yazı kaleme almıştı. Kopya içerik hakkında bilinmesi gereken en önemli noktalar şunlardır:

• Google, özgün sonuçlar sunmak ister ve sitenizde kopya içerik varsa, gösterilecek sürümü seçme konusunda oldukça başarılıdır. Sitenizdeki kopya içerikleri ayıklamakla uğraşmak istemiyorsanız, bu işi bize bırakabilirsiniz.
• Kopya içerik sitenizin ceza almasına neden olmaz. Kopya sayfalar tespit edildiğinde, kullanıcılara çeşitlilik sunmak adına arama sonuçlarında yalnızca bir sürüm gösterilir.
• Kopya içerik, sitenizin tamamlayıcı dizine (supplemental index) alınmasına neden olmaz. Ancak, sayfalarınıza gelen bağlantılar farklı sürümler arasında bölündüğünde ve bu durum sayfa başına PageRank değerinin düşmesine yol açtığında, kopya içerik bunu dolaylı olarak etkileyebilir.

SMX Advanced zirvesinde, en çok hangi kopya içerik sorunlarının endişe verici olduğunu sorduk. Katılımcılar özellikle içerik hırsızlığı (scraper) siteleri, içerik dağıtımı (syndication) ve site içi kopya içerik konularından endişeliydi. Bu sorunlara yönelik birçok potansiyel çözüm üzerinde konuştuk ve araç setimizi geliştirmeye devam ederken bu seçenekleri mutlaka değerlendireceğiz. Katılamayanların da sohbete dahil olabilmesi için tartıştığımız potansiyel çözümlerin listesini aşağıda paylaşıyorum.

Sitenin Sitemap dosyasında tercih edilen URL sürümünü belirtme

Tartıştığımız konulardan biri, bir Sitemap dosyasında tercih edilen URL sürümünü belirtme olasılığıydı. Aynı içeriğe işaret eden birden fazla URL ile karşılaştığımızda, bu sayfaya gelen bağlantıları birleştirebileceğimiz ve tercih edilen sürümü dizine ekleyebileceğimiz önerildi.

Dizine ekleme sırasında URL’den çıkarılması gereken parametreleri belirtmek için bir yöntem sağlama

Bunu, Web Yöneticisi Araçları gibi bir arayüzde veya sitenin robots.txt dosyasında nasıl sunabileceğimizi tartıştık. Örneğin, bir URL oturum kimlikleri (session ID) içeriyorsa, web yöneticisi oturum kimliği değişkenini belirtebilir; bu da arama motorlarının URL’nin temiz sürümünü dizine eklemesine ve bağlantıları bu sürümde birleştirmesine yardımcı olur. Katılımcılar, bunun için robots.txt dosyasına bir ekleme yapılması fikrine daha sıcak baktı.

İçerik sahipliğini doğrulamanın bir yolunu sağlama

Bu, arama motorlarına, içeriğin kopyalanmış veya dağıtılmış bir sürümü yerine orijinal sürümünü dizine eklediğimizden emin olmamıza yardımcı olacak ekstra bilgiler sağlayacaktır. Şu anda bu konuda oldukça iyi bir iş çıkardığımızı ve katılımcıların pek çoğunun bunu birincil sorun olarak görmediğini belirtmek isterim. Yine de katılımcılar, ekstra bir koruma olarak içeriği doğrulamanın bir yoluna ilgi duydular. Bazıları en eski tarihli sayfayı kullanmayı önerdi, ancak oluşturulma tarihleri her zaman güvenilir olmayabilir. Ayrıca, site sahiplerinin içeriği kaydettirmesine izin verilmesi de önerildi; ancak bu durum, teknik bilgisi olmayan site sahiplerinin içeriği kaydettirmeyi bilmemesi ve başkalarının içeriği alıp kendi adlarına kaydettirmesi gibi sorunlar yaratabilir. Şu anda sitenin otoritesi ve sayfaya gelen bağlantı sayısı gibi bir dizi faktöre güveniyoruz. İçerik dağıtımı yapıyorsanız, içeriğinizi kullanan sitelerden, dağıtım anlaşmasının bir parçası olarak kendi sürümlerini bir robots.txt dosyasıyla engellemelerini istemenizi öneririz; bu, sizin sürümünüzün sonuçlarda gösterilmesini sağlamaya yardımcı olacaktır.

Site sahipleri için kopya içerik raporu sunma

Arama motorlarının kopya olarak gördüğü site içi sayfaların yanı sıra, diğer sitelerdeki sayfaların kopyası olarak görülen sayfaları da listeleyecek bir kopya içerik raporu fikrine büyük destek geldi. Ayrıca, site sahiplerinin yeni kopya içerik sorunlarından (özellikle harici kopya içerik) e-posta veya RSS yoluyla haberdar olabilmeleri için bu rapora bir uyarı sistemi ekleme olasılığını da tartıştık.

Kopya içerik sorunlarını çözmek için blog yazılımları ve içerik yönetim sistemleriyle çalışma

Site içindeki bazı kopya içerik sorunları, siteyi çalıştıran yazılımın URL’leri yapılandırma biçiminden kaynaklanır. Örneğin, bir blog; ana sayfada, kalıcı bağlantı sayfasında, kategori sayfasında ve arşiv sayfasında aynı içeriğe sahip olabilir. İçerik üreticileri için kolay çözümler sunmanın en iyi yolu konusunda yazılım geliştiricileriyle görüşmeye kesinlikle açığız.

Kopya içerik sorunlarına yönelik potansiyel çözümleri tartışmanın yanı sıra, katılımcıların birkaç sorusu da oldu.

Kopya içerik sorunlarını azaltmak için dahili bağlantılarımın önemli bir kısmına nofollow verirsem, bu arama motorlarında bir uyarı işareti oluşturur mu? Sitedeki nofollow bağlantıların sayısı herhangi bir uyarı işareti oluşturmaz, ancak diğer siteler bu sayfalara bağlantı verebileceği için arama motorlarının kopya sayfaları taramasını engellemenin en iyi yöntemi bu olmayabilir. Taranmasını istemediğiniz sayfaları bir robots.txt dosyasıyla engellemek daha iyi bir yöntem olabilir.

Arama motorları Sitemaps ittifakını sürdürüyor mu? Geçen yılın Kasım ayında sitemaps.org‘u başlattık ve o zamandan beri düzenli olarak toplanmaya devam ediyoruz. Nisan ayında, Sitemap dosyanızı robots.txt dosyanız aracılığıyla bize bildirme özelliğini ekledik. Web yöneticilerinin hayatını kolaylaştırmak için bu gibi girişimlerde birlikte çalışmaya devam etmeyi planlıyoruz.

Sitemdeki birçok sayfa temel olarak grafiklerden oluşuyor. Grafikler her sayfada farklı olsa da, arama motorları görselleri okuyamadığı için bu sayfaların kopya olarak görülmemesini nasıl sağlayabilirim? Arama motorlarının bu sayfaları özgün olarak görmesini sağlamak için her sayfaya özgün metinler ekleyin (örneğin, her grafik için farklı bir başlık, açıklama ve alt yazı) ve her görsel için özgün alt metinler kullanın. (Örneğin, alt="grafik" kullanmak yerine alt="Willow'un kötülük eğiliminin zaman içindeki değişimini gösteren grafik" gibi bir ifade kullanın.)

İçeriğimi birçok iştirakçiye dağıttım ve şimdi bazı siteler benim sitem yerine bu içerik için sıralamaya giriyor. Ne yapabilirim? İçeriğinizi ödeme almadan erişime açtıysanız, içeriği özgün hale getirmek için sitenizdeki içeriği geliştirmeniz ve genişletmeniz gerekebilir.

Bir arama kullanıcısı olarak, arama sonuçlarında kopyaları görmek istiyorum. Bunu bir seçenek olarak ekleyebilir misiniz? Çoğu kullanıcının kopya sonuçları görmeyi tercih etmediğini tespit ettik. Özellikle bir katılımcı, bilgiyi tek bir siteden almak istemeyebileceğini ve başka seçenekler görmek isteyebileceğini belirtti; ancak bu durumda, diğer siteler muhtemelen aynı bilgiye sahip olmayacak ve bu nedenle sonuçlarda görünecektir. Benzer olabilecek ek sonuçları görmek için bir Google arama URL’sinin sonuna “&filter;=0” parametresini ekleyebileceğinizi unutmayın.

Zirvede tartıştığımız tüm sorunları ve potansiyel çözümleri ekibime ve Google içindeki diğer birimlere ilettim. En iyi arama sonuçlarını sunmak ve siz web yöneticileriyle olan ortaklığımızı genişletmek için çalışmaya devam edeceğiz. Eklemek istediğiniz başka düşünceleriniz varsa, duymaktan memnuniyet duyarız!

Yazan: Vanessa Fox