Yandex botunun tarama problemləri axtarış motoru robotu veb sayt səhifələrinizi uğurla yükləyə və ya şərh edə bilmədikdə baş verir. Bu uğursuzluqlar adətən server əlaqə problemləri, DNS xətaları və ya 10 MB sənəd ölçüsü həddi kimi texniki limitlərin aşılması nəticəsində yaranır. Bu problemləri həll etmək üçün robots.txt faylınızı yoxlamalı, serverinizin etibarlı 200 OK statusu qaytardığından əmin olmalı və sayt xəritəsi fayllarınızı 50 MB ölçü limitində saxlamalısınız.
Niyə Yandex Bot səhifələrimə daxil ola bilmir?
Giriş problemlərini həll etmək üçün ilk addım uğursuzluğun yükləmə mərhələsində baş verib-vermədiyini müəyyən etməkdir. Yükləmə xətası robotun sənədi heç vaxt almadığı deməkdir. Bu, çox vaxt server tərəfində olan bir problemdir. Məsələn, DNS parametrləriniz səhvdirsə, robot serverinizi ümumiyyətlə tapa bilmir. Eynilə, əlaqə kəsilərsə və ya heç qurulmazsa, bot URL-i əlçatmaz kimi qeyd edəcək.
Yükləmə uğursuzluqlarının digər ümumi səbəbi robots.txt faylıdır. Müəyyən qovluqları bloklamısınızsa, bot bu qaydalara hörmət edəcək və səhifələri ötürəcək. Serverin səhv HTTP cavabı və ya boş cavab qaytarması da mümkündür. Bəzi hallarda, firewall Yandex IP diapazonunu bloklaya bilər ki, bu da hesabatlarınızda server qəzası kimi görünən əlaqə uğursuzluğuna səbəb olur.
Ümumi sayt xəritəsi xətaları və onların həlli yolları
Sayt xəritələri robotun məzmununuzu tapmasına kömək etmək üçün vacibdir, lakin onların ciddi qaydaları var. Sayt xəritəsi yüklənə bilmirsə, bu server problemidir. Əgər yüklənir, lakin təhlil edilə bilmirsə, bu generator problemidir. Sayt xəritənizin 50 MB fayl ölçüsü limitini aşıb-aşmadığını və ya 50.000-dən çox URL ehtiva edib-etmədiyini yoxlamalısınız. Saytınız bundan böyükdürsə, faylı bölməli və sayt xəritəsi indeks faylından istifadə etməlisiniz.
- HTTP xətası: Server 200-dən başqa bir status qaytardı.
- Əlaqə kəsildi və ya uğursuz oldu: Robot yükləməni tamamlaya bilmədi.
- DNS xətası: Domen adı IP ünvanına çevrilə bilmədi.
- Gzip çıxarış xətası: Sıxılmış sayt xəritəsi faylı zədələnib.
- URL robots.txt-də qadağandır: Sayt xəritəsinin özü qaydalarınız tərəfindən bloklanıb.
Avtomatlaşdırılmış plaginlər tərəfindən tez-tez nəzərdən qaçırılan xüsusi bir qayda qovluq uyğunluğu qaydasıdır. Alt qovluqda yerləşən sayt xəritəsi yalnız həmin qovluqdan və ya onun alt qovluqlarından olan URL-ləri sadalaya bilər. Məsələn, /sitemaps/products.xml ünvanındakı fayl example.com/blog/article kimi URL-i sadalaya bilməz. Bu, sayt xəritələrini kök qovluqdan çıxararkən edilən ümumi bir səhvdir. Həmçinin, fayl UTF-8 kodlaşdırmasından istifadə etməli və xəbərdarlıqların qarşısını almaq üçün standart XML bəyannaməsi ilə başlamalıdır.
Gördüyümüz ən tez-tez rast gəlinən problemlərdən biri sayt xəritəsi qovluq məhdudiyyətidir. Bir çox CMS plaginləri sayt xəritələrini xüsusi bir qovluğa yerləşdirir, lakin bütün saytı indeksləşdirməyə çalışır. Yandex bu məsələdə çox sərtdir; sayt xəritəsi kök qovluqda deyilsə, o, daha yüksək səviyyəli qovluqlardakı URL-ləri təsdiqləyə bilməz.
Alien Road SEO komandası
Alien Road Yandex problemlərinin aradan qaldırılmasını necə tətbiq edir
Tipik bir iş prosesində komandamız ‘Tarama Statistikası’ hesabatına daxil olmaq üçün saytı Yandex Webmaster-də təsdiqləməklə başlayır. Biz 200 olmayan status kodlarının yüksək tezliyini axtarırıq. Shopify kimi platformada böyük bir e-ticarət mağazası idarə edən müştəri üçün biz tez-tez daxili axtarış nəticələri səhifələrinin lazımsız yerə tarandığını və bunun tarama büdcəsini israf etdiyini görürük. Biz robotu yüksək dəyərli məhsul səhifələrinə yönəltmək üçün robots.txt-də ciddi Disallow qaydaları tətbiq edirik.
Prosesimiz sənəd ölçülərinin hərtərəfli yoxlanılmasını əhatə edir. Yandex-in fərdi səhifələr üçün 10 MB limiti olduğu üçün biz indeksləşdirmə zamanı kəsilə biləcək ağır səhifələri müəyyən edirik. Biz həmçinin ‘Sayt xəritəsi faylları’ bölməsini təhlil xətaları üçün izləyirik. Qovluq uyğunsuzluğu aşkar etsək, sayt xəritəsini kök qovluğa köçürürük və ya indeks fayl strukturunu tənzimləyirik. Bu praktiki yanaşma robotun vaxtını texniki maneələrə çırpılmaq əvəzinə etibarlı, indekslənə bilən məzmuna sərf etməsini təmin edir.
HTTP başlıqlarınız Yandex üçün çox uzundurmu?
Tarama problemlərinin qeyri-adi, lakin tez-tez rast gəlinən səbəbi HTTP başlıqlarının uzunluğudur. Yandex açıq şəkildə bildirir ki, çoxlu kukilər səhifənin yüklənə bilməməsinə səbəb ola bilər. Müasir brauzerlər böyük başlıq bloklarını idarə edə bilsə də, axtarış robotunun maksimum HTTP başlıq uzunluğu var. Saytınız bir neçə izləmə pikseli, razılıq platformaları və yığılan sessiya kukilərindən istifadə edirsə, başlıq bu limiti aşa bilər.
Bunu düzəltmək üçün hər sorğu ilə göndərilən kukiləri yoxlamalısınız. Müəyyən kukilər ilkin səhifə yüklənməsi üçün tələb olunmursa, onların əhatə dairəsini məhdudlaşdırmağı və ya server tərəfində saxlamağı düşünün. Bu, robotun təmiz cavab almasını təmin edir. Bundan əlavə, Content-Length başlığını yoxlamalısınız. Bəyan edilmiş ölçü ötürülən faktiki məlumatdan böyükdürsə, robot etibarsız mesaj uzunluğu xətası bildirəcək.
Kuki şişməsi axtarış görünürlüğü üçün səssiz bir qatildir. Etiket meneceri bir sorğuya onlarla kuki əlavə etdikdə, HTTP başlığı bir neçə kilobayta qədər böyüyə bilər. Yandex bot yükləməni dayandıra bilər, çünki səhifə sizə yaxşı görünsə belə, bunu etibarsız başlıq kimi qəbul edir.
Alien Road SEO komandası
Əsas sənəd emalı xətaları hansılardır?
Emal xətaları robot səhifəni uğurla yüklədikdən sonra baş verir. Səhifə 10 MB-dan böyükdürsə, robot oxumağı dayandıracaq ki, bu da natamam indeksləşdirməyə səbəb ola bilər. Digər bir problem 1.024 bayt olan maksimum URL uzunluğudur. Buraya həm domen, həm də yol daxildir. Saytınız çox uzun izləmə parametrlərindən və ya dərindən iç-içə yerləşmiş qovluqlardan istifadə edirsə, bot bu URL-ləri tamamilə görməzdən gələ bilər.
- Noindex meta etiketi: Robot səhifəni indeksləşdirməməyi bildirən etiket tapdı.
- Səhv kodlaşdırma: Səhifədəki simvollar bəyan edilmiş charset ilə uyğun gəlmir.
- Server jurnalı tanınması: Səhifə strukturu çoxlu xam jurnal faylına bənzəyir.
- Dəstəklənməyən sənəd formatı: Fayl növü Yandex-in indeksləşdirə biləcəyi formatlar arasında deyil.
- Etibarsız məlumat miqdarı: Köçürmə tam sənəd göndərilməmişdən əvvəl bitdi.
Məzmununuz server jurnalı kimi tanınırsa, düzeni dəyişməlisiniz. Zaman damğaları və ya IP ünvanları olan sadə mətn siyahılarından ibarət səhifələr yüksək risklidir. Məzmun olmayan fayllar kimi yanlış tanınmamaq üçün səhifələrinizin standart etiketlərlə aydın HTML strukturuna malik olduğundan əmin olun.
Bu həftə haradan başlamaq lazımdır
Yandex ilə mövqeyinizi yaxşılaşdırmaq üçün veb ustası panelinizdəki ‘İndeksləşdirmə’ bölməsini yoxlamaqla başlayın. ‘HTTP xətası’ və ya ‘Əlaqə uğursuzluğu’ ilə işarələnmiş URL-ləri axtarın. Sayt xəritəsi xətaları tapsanız, heç bir faylın 50 MB-ı keçmədiyini və sadalanan bütün URL-lərin düzgün qovluğa aid olduğunu yoxlayın. Nəhayət, kukilərinizin girişi bloklamadığından əmin olmaq üçün bir neçə səhifəni başlıq ölçüsü üçün sınaqdan keçirin. Bu möhkəm, praktiki addımlar saytınızın robota tam əlçatan olmasını təmin etməyə kömək edəcək.