Sitemap dosyaları

Bir site haritası, Yandex’e sitenin güncel yapısını bildirir. robots.txt içinde tanımlanabilir veya Site haritası dosyaları sayfasından eklenebilir; her iki durumda da robot dosyayı iki hafta içinde indirir ve dizin dosyasında listelenen her bir dosya dahil olmak üzere tüm dosyalar ayrı ayrı işlenir.

Dört durum

• OK — ayrıştırıldı ve yüklendi; dizine eklenen sayfalar iki hafta içinde sonuçlarda görünür.
• Redirect — site haritası URL’si yönlendirme yapıyor. Yönlendirmeyi kaldırın.
• Error — hatalı biçimlendirilmiş; bağlantı detayları gösterir.
• Not indexed — sunucu 200 dışında bir yanıt verdi veya robots.txt dosyaya erişimi engelliyor. Tam yolu kullanarak sunucu yanıt aracıyla kontrol edin.

Güncelleme: bilinmesi gereken bir kota

Güncellenen bir dosyanın kaldırılıp tekrar eklenmesine gerek yoktur; robot düzenli olarak kontrol eder. İşleme süreci yenileme kontrolü ile tetiklenebilir ve dizin dosyasındaki her bir dosya ayrı ayrı işleme alınabilir. Ancak bu, ana makine başına 10 kullanım ile sınırlıdır; bu sınır aşıldığında, konsolda gösterilen kesin tarihe göre ilk denemeden itibaren 30 gün beklemeniz gerekir. On hakkın tamamını tek bir öğleden sonra sabırsızlıkla tüketmek, iki hafta sonraki geçiş süreci için hiçbir şey bırakmaz.

Büyük siteler için strateji

Yandex’in kendi tavsiyesi sezgisel olmasa da doğrudur: site haritasının her şeyi içermesi gerekmez. Yandex’in zaten bildiği sayfalar çıkarılabilir; böylece yeni ve sık güncellenen sayfalara odaklanılır. Dizin dosyası ile birlikte, lastmod ile işaretlenmiş değişken dosyalar kullanılabilir. Tarama istatistikleri, Yandex’in halihazırda ne bildiğini gösterir. Bu, site haritasını statik bir envanterden, robotun aslında kullandığı bir değişim akışına dönüştürür.

Kafa karıştıran iki davranışın açıklaması

• Site haritası, “geçersiz belge biçimi” ile hariç tutulan bir sayfa olarak görünüyor. Sadece bilgilendirme amaçlıdır. Robot, XML’i normal bir sayfa olarak dizine eklemeye çalışmıştır; bu durum işlemeyi etkilemez ve dosya aramaya katılmaz.
• “Bilinmeyen etiket” hatası. Dosya, Yandex’in desteklemediği öğeler içeriyordur (örneğin mobil sürüme referans). Desteklenmeyen öğeler göz ardı edilir ve desteklenenler işlenir, bu nedenle dosyayı değiştirmenize gerek yoktur.

Kaldırma

Dosyayı konsoldan silin ve robots.txt içindeki Sitemap yönergesini kaldırın, aksi takdirde robot dosyayı bulmaya devam eder. Veritabanından birkaç hafta içinde temizlenir.