Crawl frequency (tarama sıklığı), Baiduspider’ın sitenizi ne sıklıkla ziyaret ettiğini gösterir; platform bunu tarama teşhisi ve tarama istisnaları raporuyla birlikte sunar. Bu üçü bir arada değerlendirildiğinde, indeksleme ile ilgili soruların çoğuna yanıt verir.
Bunu ne belirler
Baidu, indeks hacmi kılavuzunda süreci açıkça belirtir: yayın hacmi ve sıklığı sitenin kotasını besler; bunlar düştüğünde önce tarama sıklığı, ardından indeks hacmi düşer. Dolayısıyla tarama sıklığı öncü bir göstergedir; raporlanan rakamlardan önce hareket eder.
Sunucu performansı ve erişilebilirlik de bunu etkiler. Yavaş veya kesintili erişilen bir site daha temkinli taranır; ucuz barındırma hizmetlerinin bir arama motoru sorununa dönüşme mekanizması budur.
Üç rapor
- Tarama sıklığı — trend. Yayın değişikliği olmadan yaşanan bir düşüş, erişilebilirlik veya güven sorununa işaret eder.
- Tarama teşhisi — belirli bir URL’yi Baiduspider olarak getirin ve ne gördüğünü inceleyin. “Örümcek bu sayfayı okuyabiliyor mu” sorusunun kesin cevabıdır.
- Tarama istisnaları — tarama sırasında karşılaşılan hatalar: DNS hataları, bağlantı zaman aşımları, engellenen istekler. Bot filtresi veya güvenlik duvarının Baiduspider’ı reddettiği yer burasıdır.
Teşhis sırası
- Tarama sıklığı indeks hacminden önce mi düştü? Evet ise, kota nedenleri üzerinde çalışın: yayın hızı, erişilebilirlik, güven.
- Tarama istisnaları var mı? Her şeyden önce erişim sorunlarını çözün; örümcek siteye ulaşamıyorsa sonraki adımların bir önemi yoktur.
- Tarama teşhisi sayfayı beklendiği gibi gösteriyor mu? Başarıyla getirilen ancak okunabilir içerik barındırmayan bir sayfa, tarama değil, bir işleme (rendering) sorunudur.
Gerçekten işe yarayan kaldıraç
Daha fazla tarama talep etmek değil, israfı kaldırmak ve mantık eklemek. Filtre kombinasyonlarını, site içi arama sonuçlarını ve parametre kopyalarını engelleyin ki kapasite gerçek sayfalara ayrılsın; tutarlı yayın yaparak kotayı büyütün; sunucuyu hızlı ve erişilebilir tutarak tarayıcının yavaşlamasını engelleyin. Bunların her biri sitenin kontrolündedir ve hepsi bir araya geldiğinde tarama bütçesi yönetimini oluşturur.
Biz bunu nasıl uyguluyoruz
Crawl frequency is the first number we look at when anything indexing-related is reported, because it moves before index volume and before traffic. The exceptions report is where we find bot filters rejecting Baiduspider — invisible everywhere else, and the single most common reason a technically sound site is barely crawled.
İlgili hizmetler