Sürünmə tezliyi (抓取频次) Baiduspider-in nə qədər tez-tez baş çəkdiyidir və platforma bunu sürünmə diaqnostikası və sürünmə istisnaları hesabatı ilə birlikdə təqdim edir. Birlikdə oxunduqda, üçü indeksləşdirmə suallarının əksəriyyətinə cavab verir.
Onu nə müəyyənləşdirir
Baidu indeks həcmi təlimatında zənciri açıq şəkildə qeyd edir: dərc həcmi və tezliyi saytın kvotasını qidalandırır; onlar azaldıqda, sürünmə tezliyi birinci düşür və indeks həcmi onu izləyir. Buna görə də sürünmə tezliyi öndə gedən göstəricidir — hər kəsin bildirdiyi rəqəmlərdən əvvəl hərəkət edir.
Serverin işləməsi və əlçatanlığı da onu qidalandırır. Yavaş və ya fasilələrlə əlçatmaz olan sayt daha ehtiyatla skan edilir ki, bu da ucuz hostinqin axtarış probleminə çevrilmə mexanizmidir.
Üç hesabat
- Sürünmə tezliyi — tendensiya. Dərc dəyişikliyi olmadan düşmə əlçatanlığa və ya etimada işarə edir.
- Sürünmə diaqnostikası — Baiduspider kimi müəyyən bir URL əldə edin və nə aldığını görün. “Hörməçək bu səhifəni oxuya bilərmi” sualına qəti cavab.
- Sürünmə istisnaları — skan zamanı qarşılaşılan xətalar: DNS xətaları, bağlantı vaxtaşırı, bloklanmış sorğular. Bot फिल्टरinin və ya Baiduspider-i rədd edən firewall-un göründüyü yer budur.
Diaqnostika sırası
- Sürünmə tezliyi indeks həcmindən əvvəl düşdümü? Əgər belədirsə, kvota səbəbləri üzərində işləyin: dərc etmə sürəti, əlçatanlıq, etibar.
- Sürünmə istisnaları varmı? Hər şeydən əvvəl girişi düzəldin — hörümçək sayta çata bilməsə, aşağı axındakı heç bir şey önəmli deyil.
- Sürünmə diaqnostikası səhifəni gözlənildiyi kimi göstərirmi? Uğurla əldə edilən, lakin oxunaqlı heç nə ehtiva etməyən səhifə skan etmə problemi deyil, render etmə problemidir.
Həqiqətən işləyən rıçaq
Daha çox skan tələb etmək deyil, tullantıları təmizləmək və səbəb əlavə etmək. Filtr kombinasiyalarını, daxili axtarış nəticələrini və parametr dublikatlarını bloklayın ki, tutum real səhifələrə getsin; ardıcıl olaraq dərc edin ki, kvota böyüsün; serveri sürətli və əlçatan saxlayın ki, skaner geri çəkilməsin. Bunların hər biri saytın nəzarəti altındadır və birlikdə onlar sürünmə büdcəsinin idarə edilməsindən ibarətdir.
Bunu necə tətbiq edirik
Crawl frequency is the first number we look at when anything indexing-related is reported, because it moves before index volume and before traffic. The exceptions report is where we find bot filters rejecting Baiduspider — invisible everywhere else, and the single most common reason a technically sound site is barely crawled.
Əlaqəli xidmətlər