Clean-param direktifi, sayfa içeriğini değiştirmeyen dinamik URL parametrelerini tanımlayarak Yandex tarama bütçesini yönetir. Bu direktifi robots.txt dosyanıza dahil ederek, arama botunun aynı sayfanın gereksiz varyasyonlarını indekslemesini önlersiniz; bu da sunucu kaynaklarından tasarruf sağlar ve botu benzersiz içeriğe odaklar. Bu yaklaşım, karmaşık filtreleme sistemlerine sahip büyük web siteleri için indeksleme verimliliğini artırır.
Yandex’de tarama bütçesinin rolü nedir?
Tarama bütçesi, Yandex Bot’un belirli bir zaman dilimi içinde sitenizde işlediği toplam sayfa sayısını ifade eder. Bir site, oturum kimlikleri, sıralama filtreleri veya izleme kodları tarafından oluşturulan binlerce benzersiz URL içerdiğinde, bot zamanını temel sayfalar yerine kopya sürümlere harcayabilir. Bu etkinliği sınırlamak, botun yüksek değerli içeriğe odaklanmasını sağlar.
Büyük bir ürün kataloğuna sahip tipik bir hesapta, basit ön uç etkileşimleriyle binlerce URL permütasyonu oluşturulabilir. Eğer bot tüm kotasını bu kopya yollara harcarsa, yeni ürün eklemeleri veya önemli kategori güncellemeleri indekse girmek için günlerce bekleyebilir. Doğru bütçe yönetimi, botun organik performansı artıran temel sayfalara öncelik vermesini sağlar.
Önemsiz sayfalardaki yüksek tarama oranları altyapı sağlığını da etkiler. Bot her farklı parametreye sahip benzersiz bir URL istediğinde, sunucu isteği işlemeli, veritabanına vurmalı ve HTML oluşturmalıdır. Bunu yöneterek, sunucu CPU’su ve belleği üzerindeki yükü azaltır, siteyi gerçek insan ziyaretçiler için hızlı tutarsınız.
Clean-param teknik olarak nasıl çalışır?
Direktif, tarayıcı için belirli sorgu parametrelerine sahip URL’leri, bu parametreler olmadan orijinal sürümle aynı kabul etmesi için bir talimat işlevi görür. Tercih edilen bir sürümü öneren canonical etiketinden farklı olarak, clean-param botun tarama davranışı için kesin bir kural görevi görür. Bu direktifi site genelinde veya belirli yollar için uygulamak üzere doğrudan robots.txt dosyasına yerleştirirsiniz.
Bir parametreyi ‘clean’ (temiz) olarak beyan ettiğinizde, Yandex Bot sayfayı taramaya devam edecek ancak URL indeksini oluştururken parametreyi görmezden gelecektir. Bu, yalnızca kullanıcı davranışını izleyen veya kullanıcıya sunulan temel bilgileri değiştirmeden görsel düzeni değiştiren parametreler için son derece etkilidir. Sözdizimi basittir ve hem küresel uygulamaya hem de yola özgü kurallara izin verir.
- İçerik yinelemesine neden olan parametreleri tanımlayın, örneğin: ‘session_id’, ‘utm_source’ veya ‘sort_order’.
- Direktifi sözdizimine uygun olarak ekleyin: Clean-param: parameter_name /path/to/page.
- Botun kuralı tanıdığını doğrulamak için Yandex Webmaster araçlarını kullanarak uygulamayı test edin.
- Hariç tutulan URL kalıpları için isteklerde bir azalma olduğunu doğrulamak için sunucu günlüklerinizi izleyin.
Alien Road bunu nasıl uyguluyor
Alien Road’da, müşteri sitelerini tarama verimliliği açısından denetlemek için yapılandırılmış bir süreç izliyoruz. Hangi dinamik parametrelerin en yüksek gereksiz hit hacmini oluşturduğunu belirlemek için sunucu günlüklerini analiz ederek başlıyoruz. Kapsamlı filtrelemeye sahip bir e-ticaret müşterisi için, genellikle ‘renk’ veya ‘boyut’ gibi parametrelerin milyonlarca gereksiz URL oluşturduğunu görüyoruz. Ardından, Yandex Bot’un zamanını filtrelenmiş görünümler yerine kategori ve ürün sayfalarında geçirmesini sağlamak için clean-param direktifini stratejik olarak dağıtıyoruz.
Sürecimiz, Yandex Webmaster’daki ‘Tarama istatistikleri’ne baktığımız bir ilk keşif aşamasını içerir. Sayfa içeriğini etkilemeyen sorgu dizelerine sahip yüksek oranda URL görürsek, bir haritalama belgesi oluştururuz. Bu kuralları önce sitenin bir bölümünde test ederek hiçbir önemli SEO parametresinin filtreye takılmadığından emin olur, ardından bunları tüm alan adına yayarız.
Etkili tarama yönetimi, yararlı parametreler ile kopya gürültü yaratanlar arasında net bir ayrım gerektirir. Clean-param’ı bot davranışına doğrudan etkisi nedeniyle tercih ediyoruz, çünkü sunucu yükü sorunlarını indeks şişmesi olarak ortaya çıkmadan önce önler.
Alien Road SEO ekibi
Neden geniş kapsamlı parametre dışlamasından kaçınmalısınız?
Kritik parametreleri hariç tutarak aşırı optimize etmek indeksleme boşluklarına yol açabilir. Bir parametre, farklı dil sürümleri veya bölgeye özgü veriler gibi sayfa içeriğini önemli ölçüde değiştiriyorsa, onu clean-param aracılığıyla hariç tutmak botun bu içeriği görmesini engelleyecektir. Yalnızca teknik veya içeriği değiştirmeyen parametrelerin göz ardı edildiğinden emin olmak için URL yapınızı denetlemelisiniz.
Örneğin, farklı yerelleştirilmiş fiyatlandırmaları yüklemek için bir parametre kullanıyorsanız, onu hariç tutmak botun yalnızca varsayılan sürümü görmesine neden olacaktır. Bu, yanlış indeks verilerine veya yerel arama sıralamalarının kaybına yol açabilir. robots.txt dosyanıza eklemeden önce bir parametrenin işlevini her zaman arka uç kodunuzda veya bir hazırlık ortamında doğrulayın.
Parametreleri etkili bir şekilde nasıl denetleyebilirsiniz?
Sitenizin URL yapısını denetlemek, parametrelerin nasıl davrandığına dair net bir görüş gerektirir. Birçok CMS platformu izleme parametrelerini otomatik olarak enjekte eder. Tarama isteklerinde hangi parametrelerin en sık göründüğünü görmek için sunucu erişim günlüklerinizi kullanabilirsiniz. Tarama bütçenizi tüketen ‘gürültüyü’ tanımlamak için bunları sıklığa göre sıralayın.
- URL yapısında kullanılan tüm dinamik sorgu parametrelerini haritalamak için site mimarisini denetleyin.
- İzleme etiketleri veya oturum tanımlayıcıları gibi temel içeriği değiştirmeyen parametrelere öncelik verin.
- Gelecekteki sorun giderme işlemleri için robots.txt dosyasına eklenen tüm direktiflerin bir günlüğünü tutun.
- Botun bu talimatlara uyup uymadığını kontrol etmek için Yandex Webmaster raporlarını düzenli olarak gözden geçirin.
Clean-param gibi teknik ayarlar tek seferlik görevler değildir. Site mimarisi güncellemesi gerçekleştiğinde bu yapılandırmaları yeniden gözden geçiriyor ve yeni dinamik URL yapılarının yanlışlıkla aşırı tarama etkinliğini tetiklemediğinden emin oluyoruz.
Alien Road SEO ekibi
Bu hafta nereden başlamalı
Kullanıcılara benzersiz bir değer sağlamayan en sık görülen URL kalıplarını bulmak için sunucu günlüklerinizi kontrol edin. Bu kalıplarla ilişkili sorgu parametrelerini tanımlayın ve clean-param direktifi için bir test aday listesi oluşturun. Net bir listeniz olduğunda, kuralları robots.txt dosyanızda uygulayın ve tarama oranının beklendiği gibi dengelenip dengelenmediğini görmek için Yandex Webmaster’daki değişiklikleri doğrulayın.