E-ticaret için Googlebot tarama bütçesi, bir arama motoru tarayıcısının belirli bir zaman dilimi içinde web sitenizde ziyaret edebileceği ve etmek istediği URL sayısını ifade eder. Büyük mağazalar için çok yönlü navigasyon, genellikle boyut, renk veya fiyat gibi filtreler aracılığıyla sonsuz sayıda URL varyasyonu oluşturur. Yönetilmezse, bu kombinasyonlar tarama bütçenizi tüketebilir ve Google’ın yüksek değerli ürün sayfalarınızı bulmasını engelleyebilir.
Googlebot tarafından yapılan her istek, sunucu kaynaklarını ve zamanı tüketir. Bir e-ticaret sitesi, ‘kırmızı ayakkabılar’ ile ’10 numara’ ve ’50 altı fiyat’ gibi filtre kombinasyonları nedeniyle milyonlarca URL oluşturduğunda, tarayıcı tüm tahsisatını bu düşük değerli sayfaları dizine eklemeye harcayabilir. Bu durum, ana ürün sayfalarınızın günler veya haftalarca gerçekleşmeyebilecek bir tarama isteğini beklemesine neden olur.
Çok yönlü navigasyonun tarama üzerindeki etkisi nedir?
Çok yönlü navigasyon, kullanıcıların sonuçları filtrelemesine olanak tanır ancak her permütasyon için benzersiz URL’ler oluşturur. Bir kategorinin her biri birden fazla seçeneğe sahip beş filtresi varsa, oluşturulan URL sayısı katlanarak artar. Googlebot bunları ayrı sayfalar olarak değerlendirir, bu da dizin şişmesine ve kaynakların tükenmesine yol açabilir.
Tarayıcılar sonsuz bir filtre permütasyon döngüsünde sıkıştığında, genellikle yeni ürünleri keşfetmeyi tamamen bırakırlar. Bu, dizin şişmesi sorunu olarak bilinir. Arama motoru zamanını kullanıcılara benzersiz bir değer sunmayan gereksiz sayfaları işleyerek harcar ve sitenizin geri kalanını etkili bir şekilde görmezden gelir. Bu, büyük ölçekli e-ticaret platformları için yaygın bir darboğazdır.
50.000 ürünü olan bir mağaza senaryosunu düşünün. Her ürün dört kategoriye aitse ve altı filtre kullanıyorsa, potansiyel URL alanı milyonlara ulaşabilir. Googlebot bu yolların her birini ziyaret edemez. Seçimler yapmak zorundadır ve site yapısı net değilse, yanlış içeriğe öncelik verecektir.
- Parametre varyasyonları nedeniyle yinelenen içerik sorunları.
- Düşük değerli sayfalarda sunucu kaynaklarının israfı.
- Yeni ürün listelerinin daha yavaş keşfedilmesi.
- Gereksiz URL’ler arasında sıralama sinyallerinin seyreltilmesi.
Tarama bütçesi sorunlarını nasıl tanımlarsınız?
Sunucu günlüklerinizi ve Search Console’daki Tarama İstatistikleri raporunu inceleyerek sitenizin tarama bütçesiyle mücadele edip etmediğini tespit edebilirsiniz. Filtre parametreleri içeren URL’ler için yüksek hacimli istekler net bir göstergedir. Sitenizde milyonlarca sayfa varsa ancak sadece bir kısmı dizine eklenmişse, bütçeniz düşük kaliteli filtre sayfaları arasında çok ince dağılmış olabilir.
Raporlarınızda ‘değiştirilmedi’ veya ‘tarandı – şu anda dizine eklenmedi’ durum kodlarının yüksek yüzdesine bakın. Bunlar, Googlebot’un sayfalarınızı bulduğunu ancak dizine ekleme çabasına değmeyeceğine karar verdiğini gösterir. Taranan sayfalar ile dizine eklenen sayfalar arasındaki oranı izlemek, arama motoru verimliliği açısından sitenizin sağlığı hakkında net bir sinyal sağlar.
Bir diğer gösterge ‘keşfedildi – şu anda dizine eklenmedi’ durumudur. Bu genellikle Google’ın sayfanın var olduğunu bildiğini ancak ona öncelik vermemeye karar verdiğini gösterir. Tipik bir hesapta bu durum, tarayıcının muhtemelen süreç sırasında karşılaştığı düşük faydalı URL’lerin hacmi nedeniyle bir duvara çarptığını doğrular.
Çok yönlü navigasyonun taranmasını yönetmek için en iyi uygulamalar
Etkili yönetim, Googlebot’u alakasız yollardan uzaklaştırmak için teknik direktiflerin bir kombinasyonunu gerektirir. Temel sayfalara öncelik vermek ve tarayıcının parametre döngülerinde sıkışmasını önlemek için aşağıdaki yöntemleri kullanın.
- Ana kategori sayfasına işaret etmek için kanonik etiketler uygulayın.
- Belirli filtre parametrelerini engellemek için robots.txt kullanın.
- Yüksek hacimli, düşük değerli filtre kombinasyonlarında noindex etiketleri kullanın.
- Site haritanızın yalnızca dizine eklenmesini istediğiniz URL’leri içerdiğinden emin olun.
Tutarlılık burada hayati önem taşır. Kanonik etiketlerinizin mutlak olduğundan ve hedeflenen URL’ye işaret ettiğinden emin olun. Belirli parametreleri robots.txt aracılığıyla engellemeye karar verirseniz, bu parametrelerin kullanıcının istenen içeriğe ulaşması için gerekli olmadığından emin olun. Yanlış engelleme, Google’ın arama sonuçlarında göstermek istediğiniz içeriğe ulaşmasını engelleyebilir.
Değişikliklerinizi test etmek de çok önemlidir. Bir robots.txt değişikliğini üretim ortamınıza dağıtmadan önce, organik trafik için kritik olan bir kategori sayfasını yanlışlıkla engellemediğinizden emin olmak için robots.txt test aracını kullanın. Sözdizimindeki küçük hatalar, tüm ürün kataloğunuzda görünürlüğün aniden düşmesine neden olabilir.
Alien Road bu teknolojiyi nasıl uyguluyor
Tipik bir müşteri etkileşiminde, çok yönlü navigasyon parametrelerinin nasıl ele alındığını haritalamak için mevcut URL yapısını denetleyerek başlıyoruz. Googlebot’un hangi kalıplara daha sık girdiğini belirlemek için sunucu günlüklerini analiz ediyoruz. Devasa bir ürün kataloğu olan bir mağaza için genellikle hibrit bir yaklaşım öneriyoruz. Benzersiz bir değer katmayan parametreleri birleştirirken, ‘en çok satanlar’ veya ‘yüksek puanlı’ varyantlar gibi SEO dostu filtrelerin erişilebilir kalmasını sağlıyoruz.
Ardından, Googlebot için yolu önceliklendirmek üzere dahili bağlantıları yapılandırıyoruz. URL yapısını temizleyerek, son kullanıcı için işlevselliği kaybetmeden taranabilir sayfa sayısını azaltıyoruz. Bu teknik temizliği, gereksiz sayfalar için istek oranının azaldığını doğrulamak amacıyla Tarama İstatistikleri raporunun izlenmesi takip eder, bu da tarayıcının ana ürün sayfalarını daha sık ziyaret etmesini sağlar.
Örneğin, genellikle bir sitenin dizine ekleme için tamamen gereksiz olan izleme parametreleri veya oturum kimlikleri içeren URL’ler oluşturduğunu görüyoruz. Ekibimiz bu dizeleri tanımlar ve URL parametreleri aracını kullanarak veya URL yapısını standartlaştırarak Googlebot’a bunları görmezden gelmesini söyler. Bu basit değişiklik genellikle temel ürün sayfalarının taranmasında önemli bir artışla sonuçlanır.
Tarama ile dizine eklemeyi neden ayırmalısınız?
Bu iki süreç arasındaki ayrımı anlamak çok önemlidir. Tarama, Googlebot’un URL’lerinizi bulduğu keşif eylemidir. Dizine ekleme, bu URL’leri Google arama veritabanına ekleme sürecidir. Çok fazla taranabilir sayfanız varsa, Googlebot’un sitenize harcadığı enerjiyi seyreltirsiniz.
Kullanıcıların görmesini istediğiniz ancak arama sonuçlarında görünmesi gerekmeyen sayfalarınız varsa, bunları taranabilir tutun ancak noindex kullanın. Bu, sayfanın kullanıcı için çalışmasını sağlarken Google’a arama sonuçlarına dahil edilmemesi gerektiğini bildirir. Bu yaklaşım, tarama bütçenizi işletme geliriniz için gerçekten önemli olan sayfalar için saklar.
Çok yönlü navigasyon URL’lerinin taranmasının yönetimi
Google Search Central
Bu hafta nereden başlamalı
Search Console’dan tarama istatistiklerinizi indirerek ve en yaygın parametre dizeleriniz için filtreleyerek başlayın. Hangi parametrelerin kullanıcı dönüşümü için kesinlikle gerekli olduğunu ve hangilerinin sadece gürültü olduğunu belirleyin. Belirlendikten sonra, tüm temel olmayan filtre kombinasyonları için ana kategoriye bir kanonik etiket uygulayın.
Tarayıcı davranışının bu yeni direktiflere nasıl uyum sağladığını gözlemlemek için siteyi iki hafta boyunca izleyin. Filtrelenmiş URL’ler için istek sayısının azalıp azalmadığını görmek için ‘Tarama İstatistikleri’ raporunu tekrar kontrol edin. Eğer azaldıysa, Googlebot’un öncelikli sayfalarınıza daha fazla zaman ayırması için başarıyla kapasite boşalttınız.
Alakasız sayfalar için tarama oranlarının hala yüksek olduğunu fark ederseniz, bu belirli URL kalıplarını engellemek için robots.txt kullanmayı düşünün. Değişikliklerinizi iyice test etmeyi unutmayın. Teknik SEO’ya yönelik istikrarlı, veriye dayalı bir yaklaşım, hızlı ve izlenmeyen değişikliklerden daha iyi sonuçlar verecektir.