Sayfa kontrolü, tek bir URL için robotun ne aldığını ve Yandex’in bu konuda neye karar verdiğini yanıtlar. “Sayfa düzgün görünüyor” ifadesini gerçek yanıtla değiştirdiği için çoğu tartışmayı sonlandıran araçtır.
Neleri raporlar
- Botun aldığı yanıt kodu.
200 OKdışındaki her şey sayfanın hariç tutulmasına neden olabilir. - İçeriğin bota nasıl göründüğü — istemci tarafında oluşturulan her şey için belirleyici kontrol.
- Sayfa durumu: aramaya dahil edildi mi, hariç mi tutuldu ve nedenleri.
- O sayfa için mobil uyumluluk.
Bot seçimi
Kontrol, alanın altında seçilen kullanıcı aracısı (user agent) ile farklı Yandex robotları olarak çalıştırılabilir. Bu, kulağa geldiğinden daha önemlidir: ana indeksleme robotuna izin verip mobil olanı engelleyen bir bot filtresi veya CDN kuralı, normal şekilde indekslenen ancak tüm mobil değerlendirmelerde başarısız olan bir site yaratır. Tek bir aracı test edip diğerlerinin de aynı olduğunu varsaymak, bu durumun aylarca fark edilmemesine neden olur.
If-Modified-Since testi
Az kişinin kullandığı ancak büyük sitelerin kullanması gereken bir alan. Bir tarih girin ve sunucunun koşullu istekleri nasıl ele aldığını kontrol edin:
- Sayfanın gerçek son değiştirilme tarihini verin — yanıt
200 OKolmalıdır. - Farklı bir tarih verin — yanıt
304 Not Modifiedolmalıdır.
Her koşullu isteğe tam gövde ile 200 yanıtı veren bir sunucu, robotu değişmemiş sayfaları tekrar indirmeye zorlar; bu da yeni ve güncellenmiş sayfaların ihtiyaç duyduğu tarama kapasitesini harcar. Büyük bir katalogda bu, tamamen sizin kontrolünüzde olan az sayıdaki gerçek tarama bütçesi kaldıraçlarından biridir.
JavaScript oluşturma
Ayrı bir beta aracı olan İndeksleme → JavaScript sayfa oluşturma, içeriği scriptlere bağlı olan sayfaları kontrol eder. Sıradan sayfa kontrolü robotun ne aldığını gösterirken, bu araç oluşturma sürecinden geriye ne kaldığını gösterir; ikisi arasındaki fark, tam olarak “içerik tarayıcımda zaten görünüyor” tartışmalarının yaşandığı yerdir.
Çalışma alışkanlığı
Bunu ana sayfada değil, tartışmalı olan tam URL üzerinde çalıştırın ve site teşhisinde herhangi bir şeyi düzeltilmiş ilan etmeden önce yapın; erken bir düzeltme iddiası 30 günlük bir bekleme süresine mal olur.
Biz bunu nasıl uyguluyoruz
This is the tool we open first on almost every technical question, and the If-Modified-Since test is the one clients have never run. On one catalogue site the server answered 200 to every conditional request; fixing that returned a large share of the crawl budget to pages that had been waiting weeks to be re-read. The bot selector is the other habit worth forming — always repeat the check as the mobile robot.
İlgili hizmetler