Tarama statistikası

Ask AI about this page

4 views 3 dəq oxu

Tarama statistikası robotun əslində nə etdiyinin qeydidir: hansı səhifələri gətirdi, nə zaman gətirdi və server nə cavab verdi. İndeksləmə ilə bağlı hər hansı bir şey səhv görünəndə açılacaq ilk hesabatdır, çünki o, vəziyyətlərdən çox hadisələri təsvir edir. Məlumatlar hər gün, robotun ziyarətindən altı saat ərzində yenilənir və tarixçə gedib çıxır 20 fevral 2017.

İki görünüş

  • Son dəyişikliklər — ziyarətlər arasında HTTP cavab kodu dəyişən səhifələr, qədər 50,000 qeydlər. Məhdudiyyətə diqqətlə fikir verin: dəyişiklik yalnız o zaman qeydə alınır ki, cavab kodu dəyişsin. Sabit olan məzmun dəyişikliyi 200 OK burada ümumiyyətlə görünmür.
  • Bütün səhifələr — robotun taradığı hər şey, həmçinin 50,000 ilə məhdudlaşdırılıb, tarama tarixi, yolu və son cavab kodu ilə birlikdə.

Hər ikisi tarix, URL fraqmenti və ya cavab kodu üzrə filtrlənə bilər və XLS və ya CSV formatında ixrac edilə bilər.

Tarama statistikası

Was və Currently sütunlarını necə oxumalı

İlk dəfə tarama göstərir N/a burada Was və cavab Currentlysütununda; verilənlər bazasına yükləndikdən sonra, səhifə növbəti indeks yeniləməsində nəticələrdə görünə bilər. Yenidən tarama əvvəlki cavabı cari olanla müqayisə edir, faydalı nümunələr məhz buradadır: 200 olaraq 404 bir dəst URL-də baş verməsi nəsini qıran bir tətbiqdir və trafisdə görünmədən günlər əvvəl burada görünür.

Niyə silinmiş səhifələr taramağa davam edir

Yandex əksər sayt sahiblərini çaşdıran davranışı izah edir: axtarışdan kənarlaşdırılan səhifə robotun onun qayıdıb-qayıtmadığını yoxlamağa davam etdiyi müddətcə verilənlər bazasında qalır. Ona olan bağlantılar mövcud olduğu müddətcə və robots.txt buna mane olmadığı müddətcə onu istəməyə davam edir. Beləliklə, illər əvvəl silinmiş URL-lər bu hesabatda görünməyə davam edir — robot başqasının saytında bağlantı tapıb. Əgər tarama həqiqətən də istənilmirsə, Disallow qaydası çıxış yoludur; əgər URL-lər sadəcə köhnədirsə, onlar səs-küydən başqa heç nəyə başa gəlmir.

Bölmə səviyyəsində təhlil

Hesabat Yandex-in əldə etdiyi struktura əsaslanaraq sayt bölməsi ilə məhdudlaşdırıla bilər — bu özlüyündə məlumatvericidir, çünki konsolun bilmədiyi bölmə robotun tam araşdırmadığı bölməkdir. Siyahıdan tamamilə itən səhifələr yenidən indeksləmə aləti vasitəsilə təqdim edilməlidir.

Tarama statistikası — 2

İzləməyə dəyər rəqəm

Bölmə üzrə tarama tezliyi. Əgər robot bloqu gündəlik, kommersiya baxımından mühüm kateqoriyanı isə aylıq ziyarət edirsə, bu, tarama büdcəsi tapıntısıdır və o, həmin kateqoriyaya edilən yeniləmələrin nə üçün hər hansı təsir göstərməsinin həftələr çəkdiyini izah edir.

Alien Road

Bunu necə tətbiq edirik

This is the first report we open when a client says pages are “not being indexed”, because it separates two completely different problems: the robot never came, or the robot came and the server answered badly. Filtering by response code across a date range takes a minute and settles it. The behaviour we most often have to explain is the robot repeatedly requesting URLs deleted long ago — it is following links from other sites, not malfunctioning.

Əlaqəli xidmətlər

Paylaş