Sitemap validatoru axtarış sistemlərinin skan edən proqramları (crawlers) onları emal etməzdən əvvəl XML fayllarını rəsmi protokol sxemlərinə qarşı yoxlamaq və struktur və ya sintaksis xətalarını aşkar etmək üçün nəzərdə tutulmuş vacib diaqnostika utilitidir. Sitemap faylında qaçırılmamış (unescaped) simvollar, səhv ad sahəsi bəyannamələri və ya indekslənməyən hədəf keçidləri olduqda, avtomatlaşdırılmış axtarış indeksləmə prosesləri dayanır. Bu sənədlərin yoxlanılması skanbotların məhdud səfər büdcələrini qırıq ünvanlara və ya oxunmayan məlumat cədvəllərinə sərf etmək əvəzinə, əlçatan, kanonik URL-lərə sərf etməsini təmin edir.
Ümumi sitemap səhvlərinə nə səbəb olur?
Sitemap yaratma sistemləri avtomatlaşdırılmış yeniləmələr, məzmun idarəetmə dəyişiklikləri və ya xüsusi skрыпт icraatları zamanı tez-tez səhvlərə səbəb olur. XML sitemap sadəcə mətn keçidləri siyahısı deyil; o, standart XML sxemlərinə tabe olan sərt bir formatdır. Tək bir səhv yerləşdirilmiş teq, bağlanmamış element və ya kodlaşdırılmamış simvol XML təhlilçisinin (parser) faylı tamamilə tərk etməsinə səbəb ola bilər. Əgər təhlilçi iyirminci sətirdə uğursuz olarsa, həmin sənəddəki qalan qırx min keçid oxunmamış qalacaq.
Tez-tez rast gəlinən əməliyyat xətalarından biri xüsusi simvol kodlaşdırma ilə bağlıdır. Veb URL-ləri mütəmadi olaraq sorğu parametrləri daxilində ampersandlar, dırnaq işarələri, apostroflar vəbucaq mötərizələr ehtiva edir. Standart veb brauzer ünvan sətrində bu simvollar rəvan işləyə bilər, lakin XML təhlilçisi ciddi obyekt qaçışını (entity escaping) tələb edir. Məsələn, ampersand həmişə sadə simvol kimi deyil, & kimi görünməlidir. Məzmun idarəetmə plaginləri izləmə parametrlərini və ya çox atributlu məhsul URL-lərini qaçış etmədən çıxardıqda, bütün sənəd təsdiqdən keçə bilmir.
Sitemap deqradasiyasının digər əsas mənbəyi non-kanonik və ya qırıq cavab kodlarının mövcudluğudur. Sitemap-lər müstəsna olaraq təmiz 200 HTTP status kodu qaytaran canlı, yekun təyinat URL-lərini ehtiva etməlidir. Avtomatlaşdırılmış sistemlər tez-tez səhvən yönləndirilmiş keçidləri, soft-404 səhvlərini və ya icazə başlığı ilə qorunan səhvləri əlavə edirlər. Axtarış botuna müvəqqəti 302 yönləndirmələri və ya daimi 301 yönləndirmələri ötürmək skaneri çaşdırır və köhnə URL-lərin axtarış bazalarından silinməsini gecikdirir.
- Qaçırılmamış XML obyekt simvolları, xüsusilə sorğu sətri URL-lərindəki çılpaq ampersandlar və bucaq mötərizələri.
- 404 itirilmiş səhvlər, 301/302 yönləndirmələri və ya server direktivləri tərəfindən bloklanmış səhvlər kimi indekslənməyən nöqtələrin daxil edilməsi.
- Standart fayl sərhədlərinin pozulması, sıxılmamış fayl başına 50,000 sadalanan məkanın və ya 50 meqabaytın aşılması.
- lastmod xassəsi üçün W3C ISO 8601 standartına əməl etməyən yanlış vaxt damğaları (timestamps).
- Avtomatlaşdırılmış təhlilçilərin sitemap sxemini düzgün müəyyən etməsinə mane olan səhv XML ad sahəsi bəyannamələri.
Sitemap validatoru sintaksis və sxem problemlərini necə aşkar edir?
Sitemap validatoru kodunuzu sitemap protokolu tərəfindən təmin edilən rəsmi XML sxem tərifi ilə müqayisə edərək fayllarınızı qiymətləndirir. Validator faylınızı emal edərkən kök elementləri təhlil edir və valideyn urlset və ya sitemapindex teqinin tələb olunan ad sahəsi atributlarını ehtiva etdiyini təsdiqləyir. Əgər mühəndis təsadüfən atribut adını səhv yazarsa və ya axtarış sistemləri tərəfindən tanınmayan xüsusi teq daxil edərsə, validator dərhal sintaksis pozuntusunun dəqiq sətrini və simvol mövqeyini qeyd edir.
Əsas XML düzgünlüyündən başqa, qabaqcıl təsdiq utilitləri semantik ardıcıllığı yoxlayır. Onlar loc elementinin protokol və domen daxil olmaqla tam, mütləq veb ünvanı ehtiva edib-etmədiyini yoxlayırlar. /products/item-one kimi nisbi yollar rədd edilir, ஏki indeksləmə botları regional domen əlaqələrini və server host adlarını yoxlamaq üçün tam ixtisas tələb edir. Validatorlar həmçinin əlavə elementlərin formatını yoxlayır, changefreq-in qəbul edilmiş dəyərləri ehtiva etdiyini və priority-nin 0.0 ilə 1.0 arasında onluq rəqəm olaraq qaldığını təsdiqləyir.
Multimedia və ya çoxdilli məzmun təqdim edən saytlar üçün validatorlar ixtisaslaşdırılmış şəkil, video və alternativ dil ad sahələrini yoxlayır. Məsələn, XML sitemap daxilində alternativ hreflang teqləri əlavə edərkən, hər bir tək dil bəyannaməsi qarşılıqlı URL-lər və etibarlı ISO dil kodları ilə uyğunlaşmalıdır. Validator axtarış skanerləri onları indeksləmə münaqişələri kimi şərh etməzdən əvvəl əskik bağlanış teqlərini və ya qırıq qarşılıqlı tərifləri vurğulayır. Bu problemlərin erkən aşkarlanması axtarış sistemlərinin məlumat qeyri-müəyyənliyi səbəbindən qanuni səhvləri buraxmasının qarşısını alır.
Xam XML sxeminin yoxlanılması yerləşdirmə boru kəmərinizdə (pipeline) buraxılış qapısı kimi qəbul edilməlidir. Staging mühitində qaçırılmamış sorğu sətirlərinin tutulması məhsul indeksləmənizi təmiz və fasiləsiz saxlayır.
Alien Road SEO komandası
Sitemap-inizi addım-addım necə yoxlamaq olar
Sitemap xəbərdarlıqlarının həlli sənəd sintaksisinin yoxlanılmasını URL cavab yoxlamasından ayıran nizamlı, sistemli iş axını tələb edir. Vizual veb brauzerdə səhvsiz göründüyü üçün sitemap-in sağlam olduğunu güman etmək təhlükəlidir; müasir brauzerlər tez-tez avtomatlaşdırılmış bot təhlilçilərini qıran kiçik XML parse xətalarını avtomatik olaraq gizlədir. Strukturlaşdırılmış addım-addım auditi izləməklə texniki qruplar xətaları tez təcrid edir və normal indeksləmə əməliyyatlarını bərpa edirlər.
- Addım 1: Xam başlığı və render olunmamış gövdəni yoxlamaq üçün curl kimi terminal əmri və ya avtomatlaşdırılmış HTTP müştərisi vasitəsilə canlı XML faylını birbaşa əldə edin.
- Addım 2: Sxemə uyğunluğu, teq balansını və ad sahəsinin bütövlüyünü təsdiqləmək üçün xam payload-u XML sitemap validatoruna təqdim edin.
- Addım 3: Sitemap-dən bütün URL-ləri çıxarın və hər bir təyinat yerinin 200 OK başlıq qaytardığını təsdiqləmək üçün avtomatlaşdırılmış status kodu skanını işə salın.
- Addım 4: Səhvlərin cari kanonik teqlərə uyğun gəldiyini və noindex direktivləri və ya robots disallow bəyanatları ehtiva etmədiyini yoxlayın.
- Addım 5: Sadalanan səhvlərdəki əsas semantik məzmunun müştəri tərəfi icra xətalarından asılı olmadan yükləndiyini yoxlayın, lazım gəldikdə bot render alətinin çıxışlarını yoxlayın.
- Addım 6: Təmizlənmiş sitemap-i birbaşa veb-ustah panelinə yenidən təqdim edin və sonrakı skan dövrü ərzində istisna səbəblərini yoxlayın.
Yoxlama mərhələsində sitemap özü yüklənərkən qaytarılan server cavab başlıklarına xüsusi diqqət yetirin. Veb server sitemap-i application/xml və ya text/xml əvəzinə ümumi text/html Content-Type başlığı ilə ötürürsə, bəzi axtarış botları faylı strukturlaşdırılmış sənəd kimi təhlil etməkdən imtina edəcək. Nginx və ya Apache-də server konfiqurasiyalarınızı düzgün MIME növünə uyğunlaşdırmaq XML mətninin özündə görünməyən incə təsdiq rədd edilmələrini həll edir.
Niyə skan status kodları sitemap bəyannamələri ilə ziddiyyət təşkil edir?
Sitemap axtarış sistemlərinə açıq tövsiyə bəyanatıdır: o, axtarış botlarına daxil edilmiş keçidlərin yüksək keyfiyyətli, daimi və indekslənə bilən olduğunu bildirir. Bot HTTP 404 Not Found, 403 Forbidden və ya yönləndirmə zənciri ilə qarşılaşmaq üçün sitemap URL-ni skan etdikdə ciddi ziddiyyət yaranır. Sitemap köhnəlmiş keçidlər ehtiva etdikdə, axtarış botları sitemap faylına inamını itirir və saytın skan tezliyini azalda bilər.
Bu uyğunsuzluqlar tez-tez əsas sayt miqrasiyaları və ya kataloq yenidən dizaynları zamanı yaranır. Məsələn, onlayn pərakəndə satıcı mövsümi məhsulları sildikdə, sitemap generatoru əvvəlki ayın keşlənmiş verilənlər bazası qeydlərini çəkməyə davam edərkən onların məzmun sistemi mağazada dərhal 404 səhvləri qaytara bilər. Bot hər keçiddə çatışmayan səhvlərlə qarşılaşaraq sitemap siyahısını emal etməyə defərlə cəhd edir. url operatorundan istifadə etmək və server istisna loqlarını nəzərdən keçirmək yenilənmiş sitemap olmadan yoxa çıxdıqları üçün hansı səhvlərin axtarışı tərk etdiyini aydınlaşdırır.
Bundan əlavə, texniki SEO qrupları sitemap-də sadalanan məzmunun mənalı dəyər göstərdiyini yoxlamalıdırlar. Standart keyfiyyət göstəricilərində göstərildiyi kimi, axtarış sistemləri sayt keyfiyyətini, xidmət bütövlüyünü və səhifənin yararlılığını qiymətləndirir. Sitemap URL-ləri lazımsız skript şişməsi, əskik başlıq teqləri və ya əskik meta təsvirləri olan nazik səhifələrə aparırsa, axtarış sistemləri həmin URL-ləri zəif kimi qeyd edəcək. Təmiz sitemap yoxlamasını səhifə səviyyəsində layout auditləri ilə birləşdirmək indekslənmiş səhifələrin görünən birinci ekran mətni ilə düzgün başlıq hiyerarxiyasını saxlamasını təmin edir.
Alien Road sitemap validator iş axınlarını necə tətbiq edir
Alien Road-da texniki təsdiq beynəlxalq müştərilər üçün sayt memarlığı xidmətlərimizin əsasını təşkil edir. Kompleks e-ticarət və ya B2B kataloqlarını idarə edərkən mühəndislik komandamız yalnız standart məzmun idarəetmə sistemi çıxışlarına etibar etmir. Qırx mindən çox SKU səhifəsini idarə edən müəssisə pərakəndə satış portalının auditi kimi tipik müştəri nişanında biz axtarış sistemi son nöqtələrini xəbərdar etməzdən əvvəl XML sintaksisini təsdiq edən xüsusi avtomatlaşdırılmış boru kəmərləri qururuq.
Prosesimiz bütün domen üzrə hərtərəfli texniki skan həyata keçirdiyimiz kəşfiyyat mərhələsində başlayır. Biz sitemap məzmununu real skan loq məlumatları ilə çarpaz şəkildə yoxlayır, vebsaytda mövcud olan, lakin XML bəyannaməsində çatışmayan hər hansı yetim URL-ləri, eləcə də XML-də mövcud olan, lakin saytda çatışmayan ölü keçidləri müəyyən edirik. Biz regional axtarış mühitlərində ümumi aydınlığı qoruyaraq mobil versiyaların və təyin edilmiş regional domenlərin sitemap strukturuna uyğun gəldiyini yoxlayırıq.
Loq auditlərinin və render yoxlamasının inteqrasiyası
Biz sitemap gigiyenası ilə yanaşı maşın oxunaqlılığını yoxlamaqla təsdiqi bir addım irəli aparırıq. Müştəri tərəfi skriptləri ilə zəngin səhifələr üçün komandamız əsas məhsul məlumatlarının, başlıq teqlərinin və semantik bölmələrin əllə qarşılıqlı əlaqə olmadan düzgün görünməsini təsdiqləmək üçün bot render çıxışını yoxlayır. İndeks istisnasına səbəb ola biləcək zəif səhifələri aşkar etmək üçün Metrica vasitəsilə istifadəçi qarşılıqlı əlaqəsini izləyirik. Davamlı hesabat və iki həftədən bir sitemap sağlamlıq auditləri vasitəsilə biz müştəri mülklərinin köhnəlmiş verilənlər bazası axınları və ya qırıq XML strukturları səbəbindən gözlənilməz reytinq düşmələrindən qaçmasını təmin edirik.
Sitemap axtarış sistemləri ilə texniki etibarlılığınızın birbaşa əksidir. Xəstəlikləri aradan qaldırdıqda və URL-ləri təmiz saxladıqda, bütün domeninizdə indeksləmə sürətini qoruyursunuz.
Alien Road SEO komandası
Böyük sitemap indeksləri və səhifələnmə (pagination) ilə necə davranmalı
Veb platforması əlli mindən çox fərdi URL-ləri aşdıqda və ya fayl ölçüsündə əlli meqabaytı ötdükdə, məzmunu strukturlaşdırılmış sitemap indeksi üzrə bölmək məcburi olur. Sitemap indeks faylı kateqoriya sitemapləri, məhsul sitemapləri və redaksiya məqalə siyahıları kimi bir çox tabe olan XML sitemaplərinə istinadları ehtiva edən hərtərəfli kataloq rolunu oynayır. Sitemap indeksinin yoxlanılması həm ana indeks sənədini, həm də hər bir fərdi alt faylı yoxlamağı tələb edir.
Geniş miqyaslı arxitekturalarda ümumi səhv dairəvi istinad və ya sitemap indeks sənədlərini digər sitemap indeks faylları daxilində yerləşdirməkdir. XML sitemap protokolu qəti şəkildə daxil edilmiş indeks hiyerarxiyalarını qadağan edir; indeks faylı yalnız standart alt sitemaplərə istinad edə bilər, heç vaxt başqa indekse deyil. Validatorlar bu improper yerləşdirmə səhvlərini tez bir zamanda üzə çıxarır, texniki rəhbərlərə hiyerarxiyanı fərdi sitemap fayllarının mütəşəkkil kolleksiyasına endirməyə imkan verir.
Səhifələnmə (pagination) qaydaları da böyük sitemaplər daxilində diqqətli baxım tələb edir. Bir çox veb-ustalar kataloq kateqoriyaları üçün ikinci, üçüncü və ondan sonrakı səhifə kimi səhifələnmiş seriyalar üçün sonsuz sitemap keçidləri yaradırlar. Əgər bu səhifələnmiş səhifələrin birinci kök kateqoriya səhifəsinə geri işarə edən rel=canonical teqləri varsa, onları sitemap-ə daxil etmək ziddiyyət yaradır. Sitemap validatoru hər bir sadalanan səhifənin mütləq öz-özünə kanonik (self-canonical) URL olmasını təsdiqləmək üçün konfiqurasiya edilməlidir, bu da axtarış botlarının non-kanonik qeydləri ləğv etməsinin qarşısını alır.
Bu həftə haradan başlamaq lazımdır
Əsas sitemap URL-nizi çəkərək və onu nüfuzlu XML validatorundan keçirərək bu həftə texniki baxımınıza başlayın. Qaçırılmamış simvollar, çatışmayan XML teqləri və ya dəstəklənməyən atributlar kimi sintaksis problemlərini aradan qaldırmaq üçün yaradılmış səhv hesabatını nəzərdən keçirin. Aşağı səviyyəli fayl xətalarının düzəldilməsi dərhal axtarış botlarının sayt taksonomiyanıza daha dərindən oxumasına maneəni aradan qaldırır.
Sonra, yoxlanılmış fayldan çıxarılan bütün URL-lərdə tam status kodu auditi keçirin. 404 səhvləri, 301 yönləndirmələri və ya qadağan direktivləri (disallow) qaytaran hər hansı hədəfi ləğv edin. Sənəddə qalan səhifələrin ciddi render xətaları olmadan təmiz HTML, aydın başlıq və təsvir teqləri və strukturlaşdırılmış başlıq hiyerarxiyaları ehtiva etdiyini yoxlayın. Ardıcıl sitemap auditləri veb arxitekturanızı axtarış sistemi standartları ilə uyğunlaşdırır və zamanla orqanik performansınızı qoruyur.