Screaming Frog crawl analizi SEO mütəxəssisləri üçün veb-sayt strukturunu yoxlamaq, texniki maneələri müəyyən etmək və axtarış sistemlərinin hər bir səhifəyə daxil ola bilməsini təmin etmək üçün əsas üsuldur. Axtarış sistemi botunu simulyasiya etməklə bu alət URL-lərin siyahısını, onların əlaqəli metadatalarını, HTTP status kodlarını və daxili link strukturlarını əldə etmək üçün domeninizdə crawl həyata keçirir. Bu proses axtarış görünürlüğünü qorumaq üçün vacib olan işləməyən linklər, yönləndirmə zəncirləri və ya əskik səhifə başlıqları kimi indeksləşmənin qarşısını alan problemləri aşkar etməyə imkan verir.
Sayt crawl-u üçün ilkin quraşdırma necə aparılır?
İlk layihənizə başlamaq botun saytınızın arxitekturasına uyğun olaraq düzgün işləməsini təmin etmək üçün əsas konfiqurasiya tələb edir. Proqramı açın və yuxarıdakı URL sətrinə domen daxil edin. Başlat düyməsini sıxmazdan əvvəl, crawl limitlərinizi təyin etmək üçün Konfiqurasiya menyusuna daxil olun. Daha böyük saytlar üçün proqram təminatının həddindən artıq yerli yaddaş sərf etməsinin və ya əsas olmayan alt domenlərə daxil olmasının qarşısını almaq üçün crawl dərinliyini məhdudlaşdırmağı nəzərdən keçirin. Siz həmçinin alətin botun keçid prosesi zamanı hansı qovluqları nəzərə almamalı olduğunu bildirən robots.txt faylınıza hörmət etmək üçün konfiqurasiya edildiyini yoxlamalısınız.

Konfiqurasiya təyin edildikdən sonra məlumat toplama mərhələsinə başlamaq üçün Başlat düyməsini basın. İnterfeysdə tərəqqi çubuğu və uğurlu səhifələr üçün 200, daimi yönləndirmələr üçün 301 və çatışmayan məzmun üçün 404 kimi rast gəlinən status kodlarını göstərən canlı idarəetmə paneli göstərilir. Sürətin serverinizin imkanları daxilində qalmasını təmin etmək üçün crawl pəncərəsini izləyin. Əgər yüksək xəta nisbətləri müşahidə etsəniz, botu bloklaya biləcək server tərəfindən sürət limitlərini və ya təhlükəsizlik divarlarını işə salmamaq üçün Konfiqurasiya menyusunda crawl sürətini tənzimləməli ola bilərsiniz.
Texniki SEO xətalarını necə müəyyən etmək olar?
Xətaların müəyyən edilməsi proqram təminatının Daxili sekmesinde təqdim olunan nəticələrin filtrlənməsini əhatə edir. Bütün 404 Tapılmadı səhifələrini və ya 5xx Server Xətalarını təcrid etməyi asanlaşdıran URL-lərinizi status koduna görə çeşidləmək üçün xüsusi sütunlara klikləyə bilərsiniz. Bu səhifələr həm istifadəçilər, həm də axtarış sistemi botları üçün dalanları təmsil edir. Bu siyahıları ixrac etməklə siz inkişaf qrupunuz üçün işləməyən daxili linkləri düzəltmək və ya köhnəlmiş URL strukturlarını yeniləmək üçün təmizlik tapşırıqları siyahısı yarada bilərsiniz.
İşləməyən linklərdən başqa, metadatanızı və məzmun keyfiyyətinizi yoxlamalısınız. Dublikat H1 teqləri, çatışmayan meta təsvirləri və ya həddindən artıq uzun səhifə başlıqları olan səhifələri axtarın. Alət sağ kənar çubuğundakı diaqramlar vasitəsilə bu problemlərin vizual təqdimatını təmin edir. Metadata və ya Başlıqlar sekmesini seçməklə siz bir çox səhifənin eyni identifikatorları paylaşdığı nümunələri tez bir zamanda aşkar edə bilərsiniz ki, bu da tez-tez axtarış nəticələrində zəif nəticələrə səbəb olur, çünki axtarış sistemləri oxşar məzmunu fərqləndirməkdə çətinlik çəkirlər.

Hansı konfiqurasiya parametrlərinə üstünlük verməlisiniz?
Botun düzgün konfiqurasiyası uğurlu auditlə qəzaya uğramış sessiya arasındakı fərqdir. Yalnız daxili linkləri izləməyə, yoxsa xarici linkləri də daxil etməyə qərar verməlisiniz. Əksər texniki auditlər üçün daxili linklərə diqqət yetirmək ən yaxşı başlanğıc nöqtəsidir. Bundan əlavə, saytınız məzmunu təqdim etmək üçün JavaScript-dən istifadə edirsə, Konfiqurasiya parametrlərində JavaScript təqdimetmə rejimini aktivləşdirin. Bu, bota DOM-u emal etməyə imkan verir və məhsul siyahıları və ya menyu elementləri kimi dinamik olaraq yüklənmiş elementlərin crawl zamanı düzgün şəkildə ələ keçirilməsini təmin edir.
- Crawl Dərinliyi: Botun əsas səhifədən nə qədər uzağa səyahət etdiyini məhdudlaşdırır.
- JavaScript Rendering: React və ya Vue kimi müasir çərçivələrlə qurulmuş saytlar üçün zəruridir.
- User-Agent: Saytın müxtəlif botlara necə xidmət etdiyini görmək üçün standart bot növləri arasında keçid edin.
- Daxil et/Xaric et Filtreləri: Auditi müəyyən qovluqlara və ya URL nümunələrinə daraltmaq üçün bunlardan istifadə edin.
Alien Road Screaming Frog crawl analizini necə tətbiq edir
Alien Road-da biz bütün yeni texniki SEO əlaqələri üçün baza xətti yaratmaq üçün bu alətdən istifadə edirik. Prosesimiz cari arxitekturanı xəritələşdirmək və məzmunun reytinqinə mane olan kritik xətaları müəyyən etmək üçün tam sayt crawl-u ilə başlayır. Daha sonra müştərilərimiz üçün təsirli fikirlər təqdim etmək üçün məlumatları qovluğa və ya səhifə növünə görə seqmentləşdiririk. Məsələn, tipik e-ticarət auditində biz verilənlər bazasında mövcud olan, lakin daxili linkləri olmayan yetim səhifələrin müəyyən edilməsinə üstünlük veririk, çünki bunlar sərf olunan crawl büdcəsini və buraxılmış reytinq imkanlarını təmsil edir.
Biz həmçinin tövsiyə olunan dəyişiklikləri həyata keçirdikdən sonra tərəqqini izləmək üçün alətdən istifadə edirik. Təkrarlanan aylıq crawl-lar həyata keçirməklə biz tərtibatçıların kanonik teqləri tətbiq etdiyini, yönləndirmə dövrlərini düzəltdiyini və tələb olunduğu kimi şəkil ölçülərini optimallaşdırdığını yoxlaya bilərik. Bu iterativ yanaşma saytın sağlam qalmasını və yeni məzmun əlavələrinin texniki borc gətirməməsini təmin edir. Biz bu tapıntıları aydın, prioritetə əsaslanan formatda təqdim edərək, maraqlı tərəflərə hansı tapşırıqların orqanik performans üzərində ən böyük təsirə malik olacağını başa düşməyə imkan veririk.
Fərqli sayt növləri üçün crawl parametrlərinin müqayisəsi
| Sayt Növü | Crawl Dərinliyi | Əsas Diqqət Sahələri |
|---|---|---|
| Kiçik Biznes | Varsayılan (hamısı) | İşləməyən linklər və meta məlumatlar |
| E-ticarət | Dərin (10+) | Yönləndirmə dövrləri və daxili linklər |
| Böyük Müəssisə | Məhdud | Crawl büdcəsi və qovluq strukturu |
Qaçınılmalı olan ümumi tələlər hansılardır?
Tez-tez edilən səhvlərdən biri yeni analizə başlamazdan əvvəl crawl məlumatlarını təmizləməməkdir. Bu, müxtəlif sayt versiyalarından və ya mühitlərdən gələn nəticələri qarışdıra bilər. Hesabatlarınızın dəqiq olmasını və canlı veb-saytın cari vəziyyətini əks etdirməsini təmin etmək üçün həmişə yeni sessiyaya başlayın. Bundan əlavə, crawl sürəti parametrlərinə məhəl qoymamaq müvəqqəti sayt qeyri-sabitliyinə səbəb ola bilər. Zəif hostinq infrastrukturu olan saytı yoxlayırsınızsa, proses zamanı istifadəçi təcrübəsinə mənfi təsir göstərməməyinizi təmin etmək üçün sorğu sürətini məhdudlaşdırmaq daha təhlükəsizdir.
Digər problem robots.txt fayl parametrlərinə məhəl qoymamaqdır. Əgər təsadüfən xaricetmə qaydalarına məhəl qoymasanız, crawl-unuz heç vaxt ictimai olmamalı olan daxili səhnələşdirmə sahələrini, admin panellərini və ya müvəqqəti faylları ehtiva edə bilər. Bu, məlumatlarınızda səs-küy yaradır və ictimaiyyətə baxan səhifələrinizə təsir edən faktiki problemləri tapmağı çətinləşdirir. Botun yalnız axtarış sistemləri üçün optimallaşdırmaq istədiyiniz sahələrə baxmasını təmin etmək üçün başlanğıc düyməsini sıxmazdan əvvəl konfiqurasiya parametrlərinizi iki dəfə yoxlayın.
Tapıntılarınızı maraqlı tərəflər üçün necə təşkil etməli?
Hesabat prosesin həyati vacib hissəsidir və aydınlıq açardır. Komandanıza böyük xam ixrac göndərmək əvəzinə, tapıntıları Kritik, Orta və Aşağı təsir kimi kateqoriyalara ümumiləşdirin. Kritik elementlərə sayt miqyasında 404 xətaları və ya işləməyən kanonik teqlər daxil olmalıdır. Orta elementlər şəkillərdəki əskik alt mətnini və ya zəif məzmun səhifələrini əhatə edə bilər. Bu struktur texniki olmayan komanda üzvlərinə hansı tapşırıqların təcili diqqət tələb etdiyini və hansıların gələcək inkişaf sprintlərində həll oluna biləcəyini başa düşməyə kömək edir.
- Trafik təsirinə görə prioritetləşdirin: Hazırda axtarış həcmini cəlb edən səhifələrə diqqət yetirin.
- Vizualizasiyalardan istifadə edin: Sayt dərinliyi problemlərini göstərmək üçün crawl ağacı strukturunun skrinşotlarını daxil edin.
- Xüsusi tapşırıq biletləri yaradın: Hər bir problemi həll etmək üçün aydın addımlarla müvafiq komanda üzvünə təyin edin.
- İzləmə planlaşdırın: Sonrakı crawl vasitəsilə düzəlişləri yenidən yoxlamaq üçün tarix təyin edin.
Tez-tez Verilən Suallar
Crawl analizini nə qədər tez-tez həyata keçirməliyəm?
Əksər saytlar hərtərəfli aylıq crawl-dan faydalanır. Bununla belə, sayt miqrasiyası həyata keçirirsinizsə və ya əsas yeniləməyə başlayırsınızsa, dəyişikliklər sabitləşənə qədər gündəlik crawl həyata keçirməlisiniz. Bu, indeksləşdirmə problemlərini axtarış reytinqlərinizə təsir etmədən dərhal aşkar etməyə kömək edir.
Parolla qorunan saytı crawl edə bilərəmmi?
Bəli, konfiqurasiya menyusu vasitəsilə identifikasiya edə bilərsiniz. Botun məhdud məzmuna daxil ola bilməsi üçün giriş səhifəsi üçün istifadə olunan etimadnamələri təqdim etməlisiniz. İdentifikasiya metodunun işlədiyini təsdiqləmək üçün bunu əvvəlcə kiçik URL dəstində yoxlayın.
Niyə crawl-um 0 nəticə göstərir?
Bu adətən botu bloklayan robots.txt faylı və ya səhv konfiqurasiya edilmiş User-Agent səbəbindən baş verir. Botun icazə verildiyini təmin etmək üçün robots.txt faylınızı yoxlayın və ya bunun giriş problemini həll edib-etmədiyini görmək üçün User-Agent parametrini Chrome kimi standart brauzeri təqlid etmək üçün dəyişməyə çalışın.
SEO tapşırıqlarım üçün bu alətdən istifadə etməyə necə başlayım?
Proqramı endirin və 500-ə qədər URL-i yoxlamaq üçün pulsuz versiya ilə başlayın. Bu, interfeyslə tanış olmaq üçün kifayətdir. Əsas sekmələri və filtrləri başa düşdükdən sonra daha böyük saytları və daha mürəkkəb texniki analizi idarə etmək üçün ödənişli versiyaya keçə bilərsiniz.
Oxumağa davam edin: SEO (axtarış sistemi optimallaşdırması) · SEO