Tarama istatistikleri, Yandex arama robotunun web sitenizin sayfalarına nasıl eriştiğine dair doğrudan bilgi sağlar. Yandex Webmaster’daki raporu inceleyerek ziyaret sıklığını, tanımlanan HTTP durum kodlarını ve içeriğinizin arama sonuçlarında görünmesini engelleyen potansiyel teknik engelleri görebilirsiniz. Bu veriler, site sağlığını ve indeksleme verimliliğini korumak için bir teşhis aracı görevi görür.
Robot sunucu yanıtlarınızı nasıl yorumlar?
Robot, bir sayfanın indekslemeye hazır olup olmadığını belirlemek için standart HTTP durum kodlarına güvenir. 200 OK durumu, sayfanın erişilebilir olduğunu ve işlenmeye hazır olduğunu doğrular. Sunucu hatalar döndürürse, robot sayfayı geçici veya kalıcı olarak indeksinden çıkarabilir, bu da genel görünürlüğünüzü etkiler.
200 OK durumunun ötesinde, robot belirli başlık bilgilerini kontrol eder. Bir sayfa 404 Not Found döndürürse, arama indeksinden kaldırılır. Sunucu 5xx hataları döndürürse, robot bunu geçici bir hata olarak yorumlar ve daha sonra geri dönebilir, ancak tutarlı 5xx hataları sonunda bu sayfaların hariç tutulmasına yol açacaktır. 3 saniyeden uzun süren bir yanıt olarak tanımlanan zaman aşımı (timeout), bağlantı hatasına benzer şekilde ele alınır.
- 200 OK: Sayfaya başarıyla erişildi ve indekslemeye hazır.
- 404 Not Found: Sayfa mevcut değil veya kaldırılmış.
- 5xx Sunucu Hataları: Sunucu yanıt vermekte başarısız oluyor, genellikle yüksek trafik veya yanlış yapılandırma nedeniyle.
- Zaman aşımı hataları: Sunucunun bir yanıt başlatması 3 saniyeden uzun sürdüğünde meydana gelir.
Tarama bütçesini ve sıklığını neden izlemelisiniz?
Tarama bütçesi, robotun belirli bir zaman dilimi içinde ziyaret ettiği sayfa sayısını ifade eder. Siteniz yüksek hacimli düşük değerli sayfalar veya bozuk bağlantılar içeriyorsa, robot zamanını önemli içeriğiniz yerine bu alanlarda tüketebilir. Bu istatistikleri izlemek, robotun yönlendirme döngülerinde takılıp kalıp kalmadığını veya gereksiz dosyaları işleyip işlemediğini belirlemenize yardımcı olur.
Sıklığı analiz ederken günlük grafikteki anomalilere bakın. Tarama etkinliğindeki ani, açıklanamayan bir düşüş, sunucunun robotu reddettiğini veya yeni bir robots.txt yönergesinin çok kısıtlayıcı olduğunu gösterebilir. Tersine, tarama etkinliğinde büyük bir artış görürseniz, yanlışlıkla çok sayıda dinamik URL oluşturup oluşturmadığınızı kontrol edin, çünkü bu, herhangi bir SEO faydası sağlamadan tarama bütçenizi tüketebilir.
Alien Road bunu nasıl uygular
Alien Road’da, her müşteri etkileşimi için tarama istatistiklerini standart denetim sürecimize entegre ediyoruz. Yandex Webmaster konsolundaki günlük trendleri analiz ederek 5xx hatalarındaki artışları veya taranan sayfalardaki ani düşüşleri tespit ederek başlıyoruz. Bir sorun tespit edersek, robotun bir hatayla karşılaştığı tam anı belirlemek için bu bulguları sunucu günlükleriyle çapraz referanslıyoruz.
Sürecimiz, site haritalarının temizlenmesini ve en alakalı sayfaların robot için önceliklendirilmesini içerir. Zaman aşımı hatalarını önlemek için sunucu yanıt sürelerinin kabul edilebilir sınırlar içinde kalmasını sağlıyoruz. Temiz bir altyapı sürdürerek, yeni içeriğin mümkün olduğunca hızlı indekslenmesini sağlıyoruz. Örneğin, tipik bir hesapta, 10 saniyelik indirme sınırından kaçınmak için site haritasının önceden güncellenmesini sağlıyoruz, çünkü bu, robotun yeni içeriği verimli bir şekilde işlemesini sağlar.
Teknik SEO sadece anahtar kelimelerle ilgili değildir; arama motorunun inşa ettiğiniz şeyi gerçekten okuyabildiğinden emin olmakla ilgilidir. Robot sunucunuza güvenilir bir şekilde bağlanamazsa, içeriğinizin kalitesi ikincil hale gelir.
Alien Road SEO ekibi
İndeksleme için yaygın teknik engeller nelerdir?
Birkaç teknik faktör tarama raporunuzda hataları tetikleyebilir. Bunlar genellikle barındırma yapılandırması, SSL sertifikaları veya dosya boyutu sınırlarıyla ilgilidir. Bunları proaktif olarak ele almak, robotun bir tarama döngüsü sırasında sayfalarınızı atmasını önler.
SSL sorunları sık karşılaşılan bir suçludur. Bir sertifika kendinden imzalıysa, süresi dolmuşsa veya geçersiz bir zincire sahipse, robot genellikle sitenizin güvenli sürümünü taramayı tamamen durduracaktır. Ayrıca, 10 MB üzerindeki büyük dosyalar otomatik olarak reddedilir. Bu sınırın altında kalmak için içerik yönetim sisteminizin görsellerin veya belgelerin sıkıştırılmış sürümlerini sunup sunmadığını her zaman kontrol edin.
- SSL sertifikası sorunları: Geçersiz, süresi dolmuş veya kendinden imzalı sertifikalar güvenli indekslemeyi engeller.
- Büyük belge boyutları: 10 MB eşiğini aşan dosyalar atlanır.
- Robots.txt kısıtlamaları: Temel sayfaların yanlışlıkla disallow yönergeleriyle engellenmediğinden emin olun.
- DNS yapılandırması: Bağlantı hatalarını önlemek için tutarlı DNS çözünürlüğü gereklidir.
Genellikle tek bir yanlış yapılandırılmış SSL zincirinin tüm indeksleme sürecini durdurduğu siteler görüyoruz. Konsolda sunucu yanıtınızı kontrol etmek, güvenlik kurulumunuzun Yandex robotuyla uyumlu olup olmadığını doğrulamanın en hızlı yoludur.
Alien Road SEO ekibi
DNS ve bağlantı hataları nasıl ele alınır?
Bağlantı hataları genellikle DNS çözünürlüğü sorunlarından veya sunucu tarafındaki IP engellemelerinden kaynaklanır. Robot sunucunuzu bulamadığında, tarama raporu bir bağlantı hatası gösterir. Bu her zaman sitenin kendisiyle ilgili bir sorun değil, daha çok sunucunun arama robotu tarafından kullanılan belirli IP aralıklarına nasıl yanıt verdiğiyle ilgilidir.
Kalıcı bağlantı hataları fark ederseniz, DNS ayarlarınızı doğrulayın. Sunucunuzun yaygın arama motoru tarayıcılarını bir güvenlik duvarı aracılığıyla engellemediğinden emin olun. Bir İçerik Dağıtım Ağı (CDN) kullanıyorsanız, CDN’in kaynak sunucunuza ulaşmadan önce zaman aşımına uğrayıp uğramadığını kontrol edin. Tutarlı bir 3 saniyelik yanıt penceresi ölçüttür; sunucunuz daha uzun sürerse, robot beklemeyi durduracaktır.
Bu hafta nereden başlamalı
Yandex Webmaster hesabınıza giriş yaparak ve İndeksleme bölümüne giderek başlayın. Hata kodlarındaki herhangi bir artış eğilimini belirlemek için son 30 günün Tarama istatistikleri raporunu inceleyin. Kalıcı 5xx hataları görürseniz, sunucu performansını görüşmek için barındırma sağlayıcınızla iletişime geçin. Altyapı kararlı hale geldiğinde, robotun site yapınızın en doğru haritasına sahip olduğundan emin olmak için güncellenmiş bir site haritası gönderin.