SEO üçün log faylı analizi, axtarış sisteminin krollerlərinin səhifələrinizlə necə qarşılıqlı əlaqədə olduğunu dəqiq izləmək üçün veb saytınız tərəfindən yaradılan xam server loglarını nəzərdən keçirmək prosesidir. Bu fayllar axtarış sistemi botunun veb saytınıza hər dəfə daxil olmasının qeydini təmin edir və infrastrukturunuzun avtomatlaşdırılmış sorğuları necə idarə etdiyinə dair birbaşa məlumat təqdim edir. Bu logları nəzərdən keçirməklə siz krollerlərin nə qədər tez-tez daxil olduğunu, hansı xüsusi səhifələrə üstünlük verdiklərini və seansları zamanı hansı texniki xətalarla qarşılaşdıqlarını müəyyən edən xam məlumatlara çıxış əldə edirsiniz.
Log faylı analizi nədir və niyə vacibdir?
Server logu veb serverinizə edilən hər bir sorğunu qeyd edən mətn faylıdır. İstifadəçi saytınıza daxis olduqda, onların brauzeri HTML, CSS və şəkillər kimi faylları tələb edir. Eynilə, Googlebot kimi axtarış sistemi botu gəldikdə, o, eyni faylları tələb edir. Bu qarşılıqlı əlaqələr server loglarınızda qeydə alınır. JavaScript icrasına əsaslanan analitika alətlərindən fərqli olaraq, log faylları server tərəfli sorğuların mütləq reallığını əks etdirir. Bu, log fayllarını axtarış sistemlərinin sayt strukturunuzu necə gördüyünü başa düşmək üçün ən dəqiq həqiqət mənbəyi edir.
Tipik bir hesabda axtarış sistemlərinin yüksək konversiya verən məntəqələrinizi nəzərə almayaraq, aşağı dəyərli səhifələrə resurs sərf etdiyini görə bilərsiniz. Bu, tarama büdcəsi dublikat səhifələr, axtarış filtrləri və ya ağır resurslar tərəfindən tükəndikdə baş verir. Bu logları təhlil etməklə siz tarama tezliyi nümunələrini müəyyən edə və botların harada sıxışdığını dəqiq görə bilərsiniz. Məsələn, heç bir axtarış dəyəri təmin etməyən səhifələnmiş axtarış filtrlərinə minlərlə sorğu görsəniz, robots.txt və ya kanonik teqlər vasitəsilə texniki optimizasiya üçün açıq hədəfiniz var.
Server log fayllarınıza necə daxil olmaq olar
Başlamaq üçün hostinq mühitinizdən xam logları əldə etməlisiniz. cPanel və ya Plesk kimi əksər hostinq idarəetmə panelləri xam giriş logları və ya xəta logları üçün bölmə təmin edir. Cloudflare kimi Məzmun Çatdırılma Şəbəkəsindən (CDN) istifadə edirsinizsə, tezliklə bu logları birbaşa onların idarə panelindən yükləyə bilərsiniz. Xüsusi serverlərdə və ya VPS-də olanlar üçün /var/log/apache2/ və ya /var/log/nginx/ kimi kataloqlarda yerləşən bu fayllara SSH və ya FTP vasitəsilə daxil olmaq lazım gələ bilər.
Faylları əldə etdikdən sonra onlar Genişləndirilmiş Log Formatı (Combined Log Format) kimi oxumaq çətin olan xam formatda olur. Sorğu edənin IP ünvanını, vaxt möhürünü, tələb olunan URL-i, HTTP status kodunu və istifadəçi agenti sətrini ehtiva edən ümumi log formatlarını axtarmalısınız. İstifadəçi agentinin müəyyən edilməsi çox vacibdir, ஏki bu, ziyarətçinin qanuni axtarış sistemi botu, yoxsa başqa cür avtomatlaşdırılmış skaner və ya insan istifadəçi olduğunu təsdiqləyir.
Loglarınızda hansı texniki xətaları axtarmalısınız?
Bu faylları yoxlayarkən əsas məqsədiniz axtarış sistemlərinin məzmununuzu uğurla indeksləşdirməsinə mane olan status kodlarını tapmaqdır. 5xx server xətalarının yüksək olması serverinizin bot sorğularına cavab verməkdə çətinlik çəkdiyini göstərir ki, bu da tarama tezliyinin azalmasına səbəb ola bilər. Axtarış sistemləri dəfələrlə server zaman aşımı ilə qarşılaşarsa, infrastrukturunuza daha çox yük qoymamaq üçün daha az tezliklə ziyarət edə bilərlər. Siz həmçinin botun saytınızda qırıq linklər tapdığını göstərən 404 xətalarını da yoxlamalısınız.
İzləmək üçün əsas status kodları
- 200 OK: Botun məzmununuza çatdığını göstərən uğurlu sorğular.
- 301/302 Yönləndirmələr: Tez-tez edilən yönləndirmələr botun vaxtını sərf edən səliqəsiz sayt strukturunu göstərə bilər.
- 404 Tapılmadı: Botun ölü səhifələrdə tarama büdcəsini sərf etməməsini təmin etmək üçün bunlar minimuma endirilməlidir.
- 5xx Server Xətaları: Bunlar sağlam tarama sürətini qorumaq üçün həll edilməli olan kritik infrastruktur problemlərini göstərir.
Bot davranışı nümunələrini necə müəyyən etmək olar?
Bot davranışının təhlili müəyyən axtarış sistemi krollerlərini təcrid etmək üçün log məlumatlarınızı filtrləməyi əhatə edir. Googlebot, Bingbot və ya YandexBot kimi sətirləri ehtiva edən istifadəçi agenti sətirlərini axtarmalısınız. Bu qeydləri təcrid etdikdən sonra botların səylərini veb saytınızın ən vacib hissələrinə cəmləşdirib-cəmləşdirmədiyini görə bilərsiniz. Taramanın böyük hissəsi əsas məzmunu ehtiva etməyən şəkillərə, CSS-ə və ya JavaScript fayllarına həsr olunubsa, keşləmə və ya resurs çatdırılma strategiyalarınızı tənzimləməli ola bilərsiniz.
Ev əşyaları satan bir Shopify mağazasını əhatə edən ssenari nəzərdən keçirin. Axtarış sisteminin vaxtının 60 faizini yan panel filtrləriniz tərəfindən yaradılan filtrlənmiş kolleksiya səhifələrini taramaqla keçirdiyini görə bilərsiniz. Bu səhifələr çox vaxt zəif məzmuna malik olduğundan və ya sonsuz kombinasiyaları təmsil etdiyindən, bot effektiv şəkildə məhsul səhifələrinizdən yayındırılır. Bu tezliyi təhlil etməklə siz robots.txt direktivlərinizin və ya noindex teqlərinizin krollerlər tərəfindən həqiqətən hörmətlə qarşılandığını yoxlaya bilərsiniz.
Log analizi apararkən ümumi səhvlər
Tez-tez edilən səhvlərdən biri botun şəxsiyyətini təsdiq edə bilməməkdir. Bir çox zərərli botlar və ya skreperlər təhlükəsizlik filtrlərini yan keçmək üçün istifadəçi agenti sətrini Googlebot kimi gizlədirlər. Sorğunun həqiqətən Google serverindən qaynaqlandığını təsdiqləmək üçün sorğunun IP ünvanı üzrə tərs DNS axtarışı həyata keçirməlisiniz. Bu təsdiq olmadan tarama tezliyinin təhlili aşağı keyfiyyətli skreperlərin və ya saytınızı yoxlayan rəqiblərin səs-küyü ilə təhrif oluna bilər.
Digər problem məlumat həcmidir. Daha böyük vebsaytlar üçün log faylları bir neçə gün ərzində giqabayt ölçüsünə qədər böyüyə bilər. Bu qədər məlumatı standart cədvəl tətbiqində emal etmək nadir hallarda mümkündür. Bunun əvəzinə, məlumatları təhlil platformasına idxal etməzdən əvvəl filtrləmək üçün xüsusi alətlərdən və ya əmr sətri utilitlərindən istifadə edin. Alien Road həcmli qeydlər arasında itib-batmadan trendləri müəyyən etmək üçün bir həftəlik loglar kimi nümayəndə məlumat nümunəsinə diqqət yetirməyi tövsiyə edir.
Tarama büdcənizi necə optimallaşdırmaq olar
Tarama büdcəsi axtarış sisteminin müəyyən müddət ərzində saytınızda taradığı səhifələrin sayını ifade edir. Böyük saytınız varsa, botun bu büdcəni zibil səhifələrə deyil, yüksək dəyərli səhifələrə sərf etməsini təmin etmək istəyirsiniz. Botun ən çox vaxt sərf etdiyi səhifələri müəyyən etdikdən sonra həmin səhifələrin həqiqətən lazımi olub-olmadığına qərar verin. Əgər belə deyilsə, botun həmin yerlərə yenidən baş çəkməsinin qarşısını almaq üçün onları robots.txt vasitəsilə bloklayın və ya meta robots noindex teqləri tətbiq edin.
- Botun yüksək keyfiyyətli məzmununuza baş çəkməsini təmin etmək üçün zəif səhifələri birləşdirin.
- Vacib olmayan kataloqlara və ya axtarış nəticələrinə girişin qarşısını almaq üçün robots.txt-dən istifadə edin.
- Botu səhifələrinizin üstünlük verilən versiyasına yönləndirmək üçün kanonik teqlər tətbiq edin.
- Server cavab müddətlərini izləyin, çünki daha sürətli səhifələr bota daha qısa müddətdə daha çox məzmun taramağa imkan verir.
Bu həftə haradan başlamalı
Hostinq təminatçınızdan tam olaraq yeddi günlük server loglarını yükləməklə log faylı analizinə başlayın. Googlebot üçün girişləri filtrləmək üçün mətn redaktorundan və ya log analizi alətindən istifadə edin. Bu sorğuları təcrid etdikdən sonra hər bir unikal URL-in neçə dəfə tarandığını saymaq üçün onları CSV formatına ixrac edin. Taranan ən yaxşı 50 səhifəni nəzərdən keçirin və özünüzdən soruşun ki, bunlar həqiqətən biznes gəlirinizi artıran səhifələrdirmi? Siyahı əlaqəsiz və ya dublikat URL-lərlə doludursa, siz texniki SEO təkmilləşdirməsi üçün ilk sahənizi tapmısınız.
Nəhayət, eyni dövr üçün server xəta loglarınızı nəzərdən keçirin. Hər hansı 5xx xətası aşkar etsəniz, tərtibatçınız və ya hostinq dəstək komandanızla dərhal onları araşdırın. Bu xətalar axtarış sistemi görünürlüğünə birbaşa maneə rolunu oynayır. Bu texniki maneələri aradan qaldırmaqla və taramanı yüksək dəyərli məzmununuza yönəltməklə siz saytınızın axtarış sistemləri üçün mümkün qədər əlçatan və səmərəli qalmasını təmin edirsiniz. Ardıcıllıq uzun müddətdə sağlam tarama profilini saxlamağın açarıdır.
Oxumağa davam et: SEO (Axtarış Sisteminin Optimallaşdırılması) · SEO