Google tarama hızını düşürün

Google’ın tarayıcı altyapısı, bir site için en uygun tarama hızını belirlemek üzere gelişmiş algoritmalara sahiptir. Amacımız, sunucunuzu zorlamadan her ziyarette sitenizden mümkün olduğunca çok sayfa taramaktır. Bazı durumlarda, Google’ın sitenizi taraması altyapınızda kritik bir yüke neden olabilir veya bir kesinti sırasında istenmeyen maliyetlere yol açabilir. Bunu hafifletmek için, Google tarayıcıları tarafından yapılan istek sayısını azaltmaya karar verebilirsiniz.

Tarama hızındaki ani artışın nedenini anlayın

Tarama hızındaki ani artış, sitenizin yapısındaki verimsizliklerden veya sitenizle ilgili diğer sorunlardan kaynaklanıyor olabilir. Geçmişte aldığımız raporlara dayanarak, en yaygın nedenler şunlardır:

• Sitedeki URL’lerin verimsiz yapılandırılması; bu durum genellikle sitenin belirli bir işlevinden kaynaklanır:
  • Fasetli gezinme veya sitenin diğer sıralama ve filtreleme işlevleri
  • Belirli tarihler için çok sayıda URL içeren bir takvim
• Dinamik Arama Ağı Reklamı hedefi

Trafiğin kaynağını anlamak ve tarama hızındaki ani artışın yukarıda belirtilen yaygın nedenlerle örtüşüp örtüşmediğini görmek için barındırma şirketinizle görüşmenizi ve sunucunuzun son erişim günlüklerini incelemenizi şiddetle öneririz. Ardından, şu konulardaki rehberlerimize göz atın:
fasetli gezinme URL’lerinin taranmasını yönetme
ve
tarama verimliliğini optimize etme.

Tarayıcı trafiğini acilen azaltın (acil durumlar için)

Tarama hızını kısa bir süreliğine (örneğin birkaç saat veya 1-2 gün) acilen düşürmeniz gerekiyorsa, tarama isteklerine 500, 503yerine 429 HTTP yanıt durum kodu 200 döndürün. Google’ın tarama altyapısı, önemli sayıda 500, 503veya 429 HTTP yanıt durum koduyla karşılaştığında sitenizin tarama hızını düşürür (örneğin,
web sitenizi devre dışı bıraktıysanız). Düşürülen tarama hızı, sitenizin tüm ana bilgisayar adını (örneğin,
subdomain.example.com) etkiler; hem hata döndüren URL’lerin hem de içerik döndüren URL’lerin taranmasını kapsar. Bu hataların sayısı azaldığında, tarama hızı otomatik olarak tekrar artmaya başlayacaktır.

Tarama hızını düşürmek için istisnai talepler

Google’ın tarayıcılarına hata döndürmek altyapınızda mümkün değilse,
özel bir talep gönderin
ve alışılmadık derecede yüksek tarama hızıyla ilgili bir sorunu, talebinizde siteniz için en uygun hızı belirterek bildirin. Tarama hızında artış talep edemezsiniz ve talebin değerlendirilip sonuçlandırılması birkaç gün sürebilir.