Yandex Webmaster’daki Crawl Statistics verileri, arama motorunun sitenizle nasıl etkileşime girdiğini ortaya koyar ve özellikle başarılı indekslemeyi engelleyen 404 ve 5xx durum kodlarını vurgular. Bu hatalar göründüğünde, Yandex botunun ya istenen kaynakları bulamadığını ya da dahili arızalar nedeniyle sunucuya erişemediğini belirtir. Bu hataları gidermek, sitenizin indeksleme robotu için erişilebilir kalmasını sağlar ve arama görünürlüğünde olası düşüşleri önler.
Bu veri noktalarını yönetmek iş akışımızın standart bir parçasıdır. Yandex tarafından sağlanan yanıt kodlarını izleyerek, sunucunuzun istekleri doğru şekilde işleyip işlemediğini veya botu taramasını durdurmaya zorlayıp zorlamadığını belirleyebiliriz. Bu kılavuz, sitenizi denetlemek, belirli durum kodlarının etkisini anlamak ve indeksleme potansiyelinizi geri kazanmak için gereken adımları özetlemektedir.
Crawl Statistics verilerinizde neden 404 hataları görünüyor?
404 hatası, sunucunun istenen URL’yi bulamadığını gösterir. Ara sıra 404 hataları her sitede yaygın olsa da, Crawl Statistics verilerinizdeki bu hataların yüksek hacmi, bozuk dahili bağlantıları veya güncel olmayan site haritalarını önerir. Robot çok sayıda var olmayan sayfa bulursa, yüksek değerli içeriğinize harcanması gereken tarama bütçesini boşa harcar.
Bir bot 404 sayfasıyla karşılaştığında, o belirli yolu işlemeyi durdurur. Sitenizde binlerce bozuk bağlantı varsa, bot site yapınızın güvenilmez olduğu sonucuna varabilir. Bu, oturum başına taranan sayfa sayısının azalmasına yol açar ve bu da sonuçta taze, yüksek kaliteli içeriğinizin arama motoru tarafından daha uzun süre keşfedilmemesine neden olur.
Bunu yönetmek için geçici olarak eksik sayfalar ile kalıcı silmeler arasında ayrım yapmalısınız. Bir sayfa taşındıysa, 301 yönlendirmesi doğru düzeltmedir. İçerik yoksa, sunucunun 404 veya 410 kodu döndürmesine izin vermek kabul edilebilirdir, ancak hiçbir dahili bağlantının hala bu ölü URL’lere işaret etmediğinden emin olmalısınız.
- Bozuk referansları kaldırmak veya güncellemek için dahili bağlantı yapınızı kontrol edin.
- Artık var olmayan URL’leri hariç tutmak için sitemap.xml dosyanızı güncelleyin.
- Harici sitelerin silinmiş sayfalara bağlantı verip vermediğini görmek için sunucu günlüklerini inceleyin.
- Robotun hangi sayfaları ziyaret etmeye çalıştığını görmek için ‘Crawl statistics’ bölümünü analiz edin.
5xx sunucu hatalarını nasıl çözebilirsiniz?
404 hatalarının aksine, 5xx durum kodları, sunucunun bir isteği yerine getiremediği sunucu tarafı sorunlarına işaret eder. Robot 500 seviyesinde bir hata aldığında, genellikle altyapınızdaki yükü artırmamak için taramayı durdurur. Bu hatalar genellikle geçicidir, ancak devam ederlerse, hatalı bir sunucu yapılandırmasını veya veritabanı bağlantısı sorunlarını gösterirler.
Yaygın nedenler arasında zaman aşımına uğrayan aşırı veritabanı sorguları, sunucu belleğinin tükenmesi veya sunucunun statik dosyaları sunmasını engelleyen yanlış izinler bulunur. Crawl Statistics verilerinde 5xx artışları gördüğümüzde, sunucunun bir sayfa yanıtı oluşturmaya çalışırken zaman aşımına uğrayıp uğramadığını kontrol ederiz. Sunucu yanıt vermek için birkaç saniyeden fazla zaman harcarsa, robot bağlantıyı kesebilir.
Bunları düzeltmek sunucu günlüklerinize bakmayı gerektirir. Modelleri arayın: 5xx hataları yüksek trafik sırasında mı oluyor, yoksa bot belirli, kaynak yoğun sayfaları taramaya çalışırken mi oluyor? Bu sorunları çözmek genellikle veritabanı sorgularını optimize etmeyi veya hem kullanıcılardan hem de botlardan gelen eşzamanlı istekleri işlemek için sunucu belleği sınırını artırmayı içerir.
Sunucu hataları SEO için sessiz katillerdir. Siteniz tarama sırasında 5xx kodu döndürürse, robot sayfayı hemen erişilemez olarak işaretler ve tekrarlanan başarısızlıklar o dizin için tüm indeksleme faaliyetini durdurur.
Alien Road SEO ekibi
Tarama bütçesi ile sunucu durumu arasındaki ilişki nedir?
Arama motoru, sitenizin teknik sağlığına ve sunucu yanıt verebilirliğine dayalı olarak belirli bir tarama bütçesi ayırır. Sunucunuz yavaşsa veya sürekli hata döndürüyorsa, bot ziyaretlerinin sıklığını azaltacaktır. Bu, yeni içerik güncellemelerinin arama sonuçlarında görünmesinin daha uzun sürdüğü ve büyümenizi etkili bir şekilde durdurduğu anlamına gelir.
Botun yaptığı her istek sunucu kaynaklarını tüketir. Bu kaynaklar hata sayfalarına harcanırsa, botun yeni ve alakalı içeriği indekslemek için daha az kapasitesi olur. Geçerli sayfalar için 200 OK durumları döndüren sağlıklı bir sunucu, arama motorunu sitenizi daha sık ziyaret etmeye teşvik eder. Bu denge, aktif bir dizini korumak için merkezidir.
Tutarlı sunucu performansına sahip sitelerin daha verimli bir şekilde tarandığını gözlemliyoruz. Sunucu yanıt süresi düşük olduğunda, bot aynı zaman diliminde daha fazla sayfa ziyaret edebilir. Tersine, sunucunuz yavaşsa, bot kendi hızını ayarlayacaktır, bu da site yapınız mükemmel olsa bile yeni sayfaların indekslenmesinde gecikmeye yol açabilir.
Alien Road bu bilgiyi nasıl uyguluyor
Alien Road’da, Yandex Webmaster panelinin günlük incelemesini yaparak müşteriler için Crawl Statistics verilerini yönetiyoruz. 5xx hatalarına yüksek öncelikli görevler olarak yaklaşıyoruz ve bellek sızıntılarını veya veritabanı zaman aşımlarını belirlemek için genellikle müşterinin geliştirme ekibiyle koordinasyon sağlıyoruz. 404 hataları için, otoriteyi korumak adına 301 yönlendirmesinin gerekli olup olmadığına karar vermek için bunları ‘kasıtlı’ ve ‘kazara’ olarak kategorize ediyoruz.
Örneğin, tipik bir hesapta, yoğun saatlerde 5xx hatalarında bir artış fark edebiliriz. Sürecimiz, sunucunun yük altında zorlanıp zorlanmadığını belirlemek için sunucu yanıt süresi günlüklerini incelemeyi içerir. Ardından, sunucu üzerindeki baskıyı azaltan önbelleğe alma stratejileri uygulamak için müşteriyle birlikte çalışıyoruz, bu da botun hataları tetiklemeden içeriğe erişmesini sağlıyor.
- Hata sayısındaki artışları belirlemek için tarama istatistiklerini haftalık olarak denetleyin.
- Bot yapmadan önce 5xx hatalarını yakalamak için sunucu tarafı izlemeyi uygulayın.
- Kurtarmayı hızlandırmak için teknik düzeltmeler onaylandıktan sonra Reindex pages aracını kullanın.
- Yüksek geçmiş trafiğe sahip sayfalara öncelik vermek için hata listelerini düzenli olarak dışa aktarın.
Teknik erişilebilirlik her kampanyanın temelidir. Sadece hatalara bakmıyoruz; sunucu ortamının tutarlı robot trafiğini destekleyecek kadar kararlı olduğundan emin oluyoruz.
Alien Road SEO ekibi
Robotun site indekslemesindeki rolü nedir?
Yandex arama robotu, içeriği bağlantılar aracılığıyla keşfeden otomatik bir ziyaretçi olarak hareket eder. Sunucunuzun sınırlarına saygı duyan bir programa uyar. Sitenize ulaştığında, sınırlarını anlamak için robots.txt dosyasını kontrol eder. Sunucunuz düzgün yapılandırılmışsa, robot sayfalarınızı ayrıştırmaya ve bunları dizine eklemeye devam edecektir.
İndeksleme hızıyla ilgili sorunlar yaşıyorsanız, sayfalarınızın ana sayfanızdan veya bir site haritasından düzgün bir şekilde bağlantı verildiğinden emin olun. Robot içeriğinizi bulmak için bu yollara güvenir. Yeni bir sayfa yayınladığınızda, yeni içeriğin mevcut olduğunu açıkça belirtmek için Yandex Webmaster’daki Reindex pages aracını kullanmadığınız sürece robotun onu keşfetmesi zaman alabilir.
Bu hafta nereden başlamalı
Yandex Webmaster hesabınıza giriş yapın ve Crawl Statistics bölümüne gidin. Son 30 günün verilerini dışa aktarın ve 4xx ve 5xx yanıt kodları için filtreleyin. Bu hatalara neden olan ilk 10 sayfayı belirleyin ve temel yapılandırma veya bağlantı sorununu düzeltin. Bitirdikten sonra, sunucunun bu belirli URL’ler için 200 OK durumu döndürdüğünü doğrulamak için site denetim aracını kullanın.