Sayt strukturu

Robot səhifələri linkləri izləyərək tapır. Yandex nəticəni yumşaltmadan bəyan edir: ona işarə edən heç bir linki olmayan sənəd heç vaxt aşkar edilməyəcək və axtarışda nəzərə alınmayacaq. Buna görə də struktur estetik məsələ deyil.

Altı qayda

1. Aydın link strukturunu qoruyun. Hər bir sənəd bir bölməyə aiddir və real <a href> link vasitəsilə əlçatan olmalıdır. Yandex planlaşdırmağa dəyər bir fakt əlavə edir: indeksləmə müddəti qismən yerləşmə dərinliyindən asılıdır — səhifə nə qədər dərində yerləşərsə, onun daxil edilməsi bir o qədər uzun çəkə bilər. Əksər ziyarətçilər də ana səhifədən daxil olurlar, çünki domen adını daxili URL-dən xatırlamaq daha asandır.
2. Sayt xəritəsindən istifadə edin böyük layihələrdə robotun sənədləri tapmasına və təhlil etməsinə kömək etmək üçün.
3. Texniki səhifələrin indekslənməsini məhdudlaşdırın. Dublikatlar, daxili axtarış nəticələri, statistika səhifələri — Yandex bunun niyə vacib olduğunu dəqiq izah edir: belə səhifələr daim əlavə edilir və yenilənir, buna görə də onlar tez-tez taranır, vacib məlumatları olan səhifələr isə diqqətdən kənarda qalır. Bu, mühərrikin öz sözləri ilə ifadə edilmiş tarama büdcəsi arqumentidir.
4. Hər səhifəyə unikal, təsviri URL verin. Transliterasiya robotun mövzunu müəyyən etməsinə kömək edir; verilən nümunə yaxşı formalaşdırılmış URL-in səhifə yüklənməmişdən əvvəl nə qədər məlumat ötürdüyünü göstərir.
5. Bölmələrə mətn linkləri təqdim edin, beləliklə robot onların nə ehtiva etdiyini öyrənir.
6. Simvolik linkləri (symlinks) yoxlayın URL-lərin sonsuz böyüməməsi üçün. Təkrarlanan tokenləri olan səhifələr — example.com/vasya/vasya/vasya/ — ümumiyyətlə indekslənməyə bilər. Bu, səhv idarə olunan şablondakı nisbi linklərin yaratdığı klassik sonsuz boşluq tələsidir.

Kodlaşdırma detalı

Səhifələr və kiril URL-ləri üçün eyni kodlaşdırmadan istifadə edin. Robot href="/корзина" tapdıqda, UTF-8 səhifəsində o, linki həmin kodlaşdırmada saxlayır, ona görə də səhifə faizlə kodlaşdırılmış ekvivalentində əlçatan olmalıdır. Burada uyğunsuzluq brauzerdə işləyən, lakin robot üçün 404 xətası verən linklər yaradır.

Bununla nə etməli

Hər hansı bir saytda üç şeyi yoxlayın: indekslənməyə layiq hər bir səhifənin sadə linklə əlçatan olması, heç bir vacib məlumatın üç-dörd səviyyədən dərində olmaması və filtr və axtarış URL-lərinin istisna edilməsi. Bu üçü bu səhifədə təsvir olunanların və səhv gedən məsələlərin çoxunu əhatə edir.