Soft 404 indeksleme hataları, web sunucunuz aslında içerikten yoksun olan veya mevcut olmayan sayfalar için başarılı bir 200 OK durum kodu döndürdüğünde meydana gelir. Bu teknik uyumsuzluk Baidu’nun tarayıcısını yanıltır ve sitenizin tarama bütçesini boşa harcayan boş veya alakasız sayfaların indekslenmesine neden olur. Bu hataları önlemek için site mimarinizi uygun HTTP yanıt başlıklarıyla hizalamalı ve her geçersiz URL’nin doğru bir şekilde 404 veya 410 durum kodu döndürmesini sağlamalısınız.
Baidu’da soft 404 indeksleme hatalarına ne sebep olur?
Soft 404 resmi bir HTTP durum kodu değil, arama motorlarının başarılı bir sunucu yanıtına rağmen hata gibi davranan sayfalara uyguladığı bir etikettir. Bu durum genellikle bir site özel bir ‘Sayfa Bulunamadı’ mesajı gösterdiğinde ancak sunucuyu gerçek 404 kodunu gönderecek şekilde yapılandırmadığında gerçekleşir. Baidu örümceği için 200 OK sinyali, içeriğin geçerli olduğu ve indeks için değerlendirilmesi gerektiği anlamına gelir.
Yaygın tetikleyiciler arasında zayıf içerikli sayfalar, boş arama sonuçları veya ana sayfaya otomatik yönlendirmeler bulunur. Bir kullanıcı elektronik ürünler satan bir Shopify mağazasında artık mevcut olmayan bir ürünü aradığında, site ‘ürün bulunamadı’ mesajı gösterebilir. Eğer bu sayfa hala 200 OK kodu döndürüyorsa, Baidu onu indekslemeye çalışabilir. Zamanla, bu tür binlerce boş sayfa indekste birikerek alan adınızın genel kalitesini düşürebilir.
- Tüm istekler için varsayılan olarak 200 OK döndüren sunucu yapılandırmaları.
- İlk başlık yanıtından sonra içerik yükleyen JavaScript ağırlıklı sayfalar.
- WordPress gibi CMS platformlarındaki boş kategori veya etiket sayfaları.
- Silinmiş URL’leri 404 veya 410 kodları yerine ana sayfaya yönlendirmek.
- Hata mesajlarını engelleyen uygulama yığınındaki bozuk ara yazılım (middleware).
Site mimarisi hata önleme için neden önemlidir?
Site mimarisi, arama motoru tarayıcıları için harita görevi görür. Mantıksal, hiyerarşik bir yapı, tarayıcının hangi sayfaların ana, hangilerinin ikincil olduğunu anlamasına yardımcı olur. Mimari düzensiz olduğunda, tarayıcının çıkmaz sokaklarla veya soft 404’ler oluşturan özyinelemeli döngülerle karşılaşma olasılığı daha yüksektir. Temiz bir dizin yapısı, küresel sunucu kurallarını daha etkili bir şekilde uygulamanıza olanak tanır.
Benzer içeriği tanımlanmış alt dizinler altında gruplandırarak, her bölüm için belirli başlık kuralları belirleyebilirsiniz. Örneğin, özel bir /products/ klasörü, veritabanında bulunmayan herhangi bir URL için kesinlikle 404 kodları döndürecek şekilde yapılandırılabilir. Bu, sistemin eksik bir sayfanın geçici bir aksaklık mı yoksa kalıcı bir silme mi olduğunu tahmin etmesini önler.
Soft 404’ler genellikle arama sıralamalarının sessiz katilleridir çünkü kullanıcıya veya arama motoruna değer sağlamadan tarama bütçesini tüketirler.
Alien Road SEO ekibi
Baidu Search Resource Platform’da soft 404’leri tanımlamak için teknik adımlar
Baidu Search Resource Platform, tarayıcının sitenizi nasıl algıladığını izlemek için gereken verileri sağlar. Başlamak için hesabınıza giriş yapın ve ‘Link Submission’ bölümüne gidin. Burada günlük API gönderim kotanızı izleyebilir ve gönderdiğiniz URL’lerden kaçının gerçekten işlendiğini görebilirsiniz. Raporlarınızda çok sayıda ‘anormal URL’ fark ederseniz, bu genellikle soft 404 sorunlarına işaret eder.
‘Quota Status’ sekmesini düzenli olarak kontrol edin. Baidu, günlük gönderim limitlerinizi alan adınızın geçmiş performansına ve otoritesine göre ayarlar. Sistem, gönderdiğiniz URL’lerin 404 hatalarına yol açtığını veya zayıf içerik içerdiğini tespit ederse, günlük ödeneğiniz düşürülebilir. Bu, API aracılığıyla gönderilen her URL’nin yüksek kaliteli, geçerli bir sayfa olduğundan emin olmayı zorunlu kılar. Bu metriği izlemek, teknik kapasitelerini koruması gereken teknik ekipler için temel bir görevdir.
Daha iyi indeksleme için sunucu yanıtları nasıl yapılandırılır?
Soft 404’leri düzeltmek, sunucunuzun istekleri nasıl işlediğinde doğrudan bir değişiklik gerektirir. Bir Nginx sunucusunda, konum bloklarınızın yanlışlıkla mevcut olmayan dosyaları yakalamadığından ve bunları 200 durumuyla sunmadığından emin olmalısınız. Örneğin, index.php ile biten bir try_files yönergesi kullanmak, PHP betiğinin kendisi doğru başlığı göndermediğinde bazen hataları maskeleyebilir.
Apache sunucuları için, .htaccess dosyanızı çok geniş olabilecek herhangi bir RewriteCond veya RewriteRule için kontrol edin. Yaygın bir hata, tüm 404 hatalarını yanıt kodunu değiştirmeden index.html’e yönlendirmektir. Bunun yerine, ErrorDocument 404 /404.php yönergesini kullanın ve 404.php’nin başlığının açıkça HTTP/1.1 404 Not Found durumunu belirttiğinden emin olun.
- cURL gibi komut satırı araçlarını kullanarak başlık yanıtlarını doğrulayın.
- Özel hata sayfalarının minimum dosya boyutuna sahip olduğundan emin olun (Baidu bazen çok küçük hata sayfalarını görmezden gelir).
- Kalıcı olarak kaldırılan ve geri dönmeyecek sayfalar için 410 Gone kullanın.
- Hiçbir sonuç bulunamadığında 404 döndürmesi için arama sonuçları sayfalarını denetleyin.
- CDN’inizin kaynak sunucunuzun hata kodlarını geçersiz kılmadığını kontrol edin.
Alien Road site mimarisi optimizasyonunu nasıl uygular
Ekibimiz site mimarisine ayrıntılı üç aşamalı bir süreçle yaklaşır. İlk olarak, keşif aşamasında, gönderilen URL’ler ile indekslenen sayfalar arasındaki boşlukları belirlemek için Baidu Search Resource Platform’u denetliyoruz. Hangi alt dizinlerin en çok soft 404 hatası ürettiğini görmek için ‘Anormal URL’ler’ raporundaki kalıpları arıyoruz.
İkinci olarak, sağlam bir durum kodu eşleme sistemi uyguluyoruz. B2B müşterisiyle yapılan tipik bir çalışmada, hala 200 OK döndüren binlerce süresi dolmuş iş ilanı veya ürün sayfası bulabiliriz. Bu URL’lerin ilgili bir kategoriye doğru şekilde yönlendirilmesini veya sert bir 404 koduyla sunulmasını sağlamak için geliştirme ekibiyle birlikte çalışıyoruz. Bu temizlik, arama motoru sitenin içerik kalitesine olan güvenini yeniden kazandığı için API gönderim kotasını stabilize etmeye yardımcı olur.
Son olarak, ölçüm ve raporlamaya odaklanıyoruz. Limitlerin arttığından veya sabit kaldığından emin olmak için ‘Quota Status’u birkaç hafta boyunca takip ediyoruz. Soft 404’lerin gürültüsünü ortadan kaldırarak, Baidu örümceğinin yüksek değerli sayfalara odaklanmasını sağlıyoruz, bu da yeni içeriğin daha hızlı indekslenmesine ve Çin pazarında organik görünürlüğün artmasına yol açıyor.
Temiz bir mimari, Baidu örümceğinin en önemli sayfalarınız arasında verimli bir şekilde hareket etmesini sağlar ve boş kabukların yanlışlıkla indekslenme riskini azaltır.
Alien Road SEO ekibi
URL yapısı ve iç bağlantı için en iyi uygulamalar
İç bağlantı, Baidu için güçlü bir sinyaldir. Site mimariniz soft 404 döndüren sayfalara bağlantılar içeriyorsa, aslında tarayıcıyı bir tuzağa düşürüyorsunuz demektir. Mümkün olduğunda düz bir URL yapısı kullanın ve anahtar sayfaların ana sayfadan üç tıklamadan daha uzak olmadığından emin olun. Bu, tarayıcının gezinmesi gereken karmaşıklığı azaltır.
Aynı sayfanın yinelenen sürümlerini oluşturan oturum kimlikleri veya dinamik parametreler kullanmaktan kaçının. Bunlar genellikle Baidu’nun soft 404 olarak işaretleyebileceği zayıf içerik sorunlarına yol açar. Bunun yerine, kanonik etiketler ve net bir klasör tabanlı hiyerarşi kullanın. Bu, arama motorunun farklı içerik parçaları arasındaki ilişkiyi anlamasına yardımcı olur ve enerjisini düşük öncelikli öğelere harcamasını önler.
Bu hafta nereden başlamalı
Baidu Search Resource Platform’da mevcut indekslenmiş sayfalarınızı denetleyerek başlayın. Boş arama sorguları veya süresi dolmuş listelemeler gibi orada olmaması gereken tüm URL’leri belirleyin. Belirlendikten sonra, 200 OK durumu döndürüp döndürmediklerini görmek için HTTP başlıklarını test edin. Eğer döndürüyorlarsa, bunları 404 veya 410 durumuna geçirmek için teknik ekibinizle koordinasyon sağlayın.
Ardından, bu hatalara katkıda bulunabilecek kırık bağlantılar için dahili bağlantı yapınızı gözden geçirin. Bağlantı profilinizin düzenli bakımı, tarama bütçenizin dönüşüm sağlayan sayfalara harcanmasını sağlar. Alien Road, sitenizin sağlıklı ve görünür kalmasını sağlamak için bu izleme sistemlerinin kurulmasında yardımcı olabilir.