Taranabilirlik ve dizinlenebilirlik rehberi

Bir web sayfasının taranabilirliği, arama motorlarının (Google gibi) sayfayı ne kadar kolay keşfedebildiği ile ilgilidir.

Google, web sayfalarını tarama adı verilen bir süreçle keşfeder. Bu süreçte web tarayıcıları (botlar veya örümcekler olarak da bilinir) adı verilen bilgisayar programlarını kullanır. Bu programlar, yeni veya güncellenmiş sayfaları keşfetmek için sayfalar arasındaki bağlantıları takip eder.

Dizinleme genellikle taramayı takip eder.

Bir web sayfasının dizinlenebilirliği, arama motorlarının (Google gibi) sayfayı kendi dizinlerine ekleyebilmesi anlamına gelir.

Bir web sayfasını dizine ekleme sürecine dizinleme denir. Bu, Google’ın sayfayı ve içeriğini analiz edip milyarlarca sayfadan oluşan bir veritabanına (Google dizini olarak adlandırılır) eklemesi demektir.

Hem taranabilirlik hem de dizinlenebilirlik SEO için kritik öneme sahiptir.

İşte Google’ın nasıl çalıştığını gösteren basit bir örnek:

Önce Google sayfayı tarar. Ardından dizine ekler. Ancak o zaman sayfayı ilgili arama sorguları için sıralayabilir.

Başka bir deyişle: Taranıp dizine eklenmeyen bir sayfa, Google tarafından sıralamaya alınmaz. Sıralama yoksa, arama trafiği de yoktur.

Google’ın eski web spam başkanı Matt Cutts, bu süreci videoda şöyle açıklıyor:

SEO’nun önemli bir parçasının web sitenizin sayfalarının taranabilir ve dizinlenebilir olduğundan emin olmak olması şaşırtıcı değildir.

Peki bunu nasıl yaparsınız?

Web sitenizde bir teknik SEO denetimi yaparak başlayın.

Taranabilirlik ve dizinlenebilirlik sorunlarını keşfetmenize yardımcı olması için Semrush’ın Site Audit aracını kullanın. (Bunu yazının ilerleyen kısımlarında detaylıca ele alacağız.)

İç Bağlantılar

İç bağlantılar, web sitenizin taranabilirliği ve dizinlenebilirliği üzerinde doğrudan bir etkiye sahiptir.

Unutmayın, arama motorları web sayfalarını taramak ve keşfetmek için botlar kullanır. İç bağlantılar, botları web sitenizdeki bir sayfadan diğerine yönlendiren bir yol haritası görevi görür.

İyi yerleştirilmiş iç bağlantılar, arama motoru botlarının web sitenizdeki tüm sayfaları bulmasını kolaylaştırır.

Bu nedenle, sitenizdeki her sayfanın web sitenizdeki başka bir yerden bağlantı aldığından emin olun.

Bir navigasyon menüsü, alt bilgi (footer) bağlantıları ve içeriğinizdeki bağlamsal bağlantıları ekleyerek başlayın.

Web sitesi geliştirme sürecinin başındaysanız, mantıklı bir site yapısı oluşturmak da güçlü bir iç bağlantı temeli kurmanıza yardımcı olabilir.

Mantıklı bir site yapısı, web sitenizi kategorilere ayırır. Ardından bu kategoriler sitenizdeki bireysel sayfalara bağlanır.

Şöyle ki:

Ana sayfa, her kategori için sayfalara bağlanır. Ardından, her kategori için sayfalar, sitedeki belirli alt sayfalara bağlanır.

Bu yapıyı benimseyerek, arama motorlarının içeriğinizi kolayca gezinmesi ve dizine eklemesi için sağlam bir temel oluşturursunuz.

Robots.txt

Robots.txt, bir partinin girişindeki güvenlik görevlisi gibidir.

Web sitenizde bulunan ve arama motoru botlarına hangi sayfalara erişebileceklerini söyleyen bir dosyadır.

İşte örnek bir robots.txt dosyası:

User-agent: *

Allow:/blog/

Disallow:/blog/admin/

Bu dosyanın her bir bileşenini anlayalım.

• User-agent: *: Bu satır, kuralların tüm arama motoru botları için geçerli olduğunu belirtir
• Allow: /blog/: Bu yönerge, arama motoru botlarının “/blog/” dizinindeki sayfaları taramasına izin verir. Başka bir deyişle, tüm blog yazılarının taranmasına izin verilir
• Disallow: /blog/admin/: Bu yönerge, arama motoru botlarına blogun yönetim alanını taramamalarını söyler

Arama motorları botlarını web sitenizi keşfetmeleri için gönderdiğinde, kısıtlamaları kontrol etmek için önce robots.txt dosyasına bakarlar.

Blog yazılarınız ve normal web sayfalarınız gibi arama motorlarının bulmasını istediğiniz önemli sayfaları yanlışlıkla engellememeye dikkat edin.

Ayrıca, robots.txt tarama erişilebilirliğini kontrol etse de, web sitenizin dizinlenebilirliğini doğrudan etkilemez.

Arama motorları, robots.txt dosyasında engellenmiş olsalar bile, diğer web sitelerinden bağlantı verilen sayfaları keşfedebilir ve dizine ekleyebilir.

Tıklama başına ödeme (PPC) açılış sayfaları ve “teşekkür ederim” sayfaları gibi belirli sayfaların dizine eklenmemesini sağlamak için bir “noindex” etiketi uygulayın.

Bu etiket hakkında bilgi edinmek ve nasıl uygulayacağınızı öğrenmek için meta robots etiketi rehberimizi okuyun.

XML Site Haritası

XML site haritanız, web sitenizin taranabilirliğini ve dizinlenebilirliğini iyileştirmede çok önemli bir rol oynar.

Arama motoru botlarına web sitenizde taranmasını ve dizine eklenmesini istediğiniz tüm önemli sayfaları gösterir.

Bu, onlara içeriğinizi daha kolay keşfetmeleri için bir hazine haritası vermek gibidir.

Bu nedenle, tüm temel sayfalarınızı site haritanıza dahil edin. Normal navigasyon yoluyla bulunması zor olabilecek sayfalar da dahil.

Bu, arama motoru botlarının sitenizi verimli bir şekilde taramasını ve dizine eklemesini sağlar.

İçerik Kalitesi

İçerik kalitesi, arama motorlarının web sitenizi nasıl taradığını ve dizine eklediğini etkiler.

Arama motoru botları yüksek kaliteli içeriği sever. İçeriğiniz iyi yazılmış, bilgilendirici ve kullanıcılar için alakalı olduğunda, arama motorlarından daha fazla dikkat çekebilir.

Arama motorları kullanıcılarına en iyi sonuçları sunmak ister. Bu nedenle, üstün kaliteli içeriğe sahip sayfaları taramaya ve dizine eklemeye öncelik verirler.

Özgün, değerli ve iyi yazılmış içerik oluşturmaya odaklanın.

Arama motoru botlarının içeriğinizi kolayca taramasını ve anlamasını sağlamak için uygun biçimlendirme, net başlıklar ve düzenli bir yapı kullanın.

Üstün kaliteli içerik oluşturma konusunda daha fazla tavsiye için kaliteli içerik rehberimize göz atın.

Teknik Sorunlar

Teknik sorunlar, arama motoru botlarının web sitenizi etkili bir şekilde taramasını ve dizine eklemesini engelleyebilir.

Web siteniz yavaş sayfa yükleme sürelerine, bozuk bağlantılara veya yönlendirme döngülerine sahipse, botların web sitenizde gezinme yeteneğini engelleyebilir.

Teknik sorunlar ayrıca arama motorlarının web sayfalarınızı düzgün bir şekilde dizine eklemesini de engelleyebilir.

Örneğin, web sitenizde kopya içerik sorunları varsa veya canonical etiketleri yanlış kullanılıyorsa, arama motorları hangi sayfa sürümünün dizine ekleneceğini ve sıralanacağını anlamakta zorlanabilir.

Bunun gibi sorunlar web sitenizin arama motoru görünürlüğüne zarar verir. Bu sorunları mümkün olan en kısa sürede tanımlayın ve düzeltin.

Web sitenizin taranabilirliğini ve dizinlenebilirliğini etkileyen teknik sorunları bulmak için Semrush’ın Site Audit aracını kullanın.

Araç, aşağıdakiler gibi sorunları bulmanıza ve düzeltmenize yardımcı olabilir:

• Kopya içerik
• Yönlendirme döngüleri
• Bozuk iç bağlantılar
• Sunucu tarafı hataları

Ve daha fazlası.

Başlamak için web sitenizin URL’sini girin ve “Start Audit” (Denetimi Başlat) düğmesine tıklayın.

Ardından, denetim ayarlarınızı yapılandırın. İşlem tamamlandığında “Start Site Audit” (Site Denetimini Başlat) düğmesine tıklayın.

Araç, web sitenizi teknik sorunlar açısından denetlemeye başlayacaktır. Tamamlandıktan sonra, “Site Health” (Site Sağlığı) metriği ile web sitenizin teknik sağlığına dair bir genel bakış sunacaktır.

Bu, web sitenizin genel teknik sağlığını 0 ile 100 arasında bir ölçekte ölçer.

Taranabilirlik ve dizinlenebilirlik ile ilgili sorunları görmek için “Crawlability” (Taranabilirlik) bölümüne gidin ve “View details” (Detayları görüntüle) düğmesine tıklayın.

Bu, web sitenizin taranabilirliğini ve dizinlenebilirliğini etkileyen sorunları vurgulayan ayrıntılı bir rapor açacaktır.

Her bir sorun öğesinin yanındaki yatay çubuk grafiğe tıklayın. Araç size etkilenen tüm sayfaları gösterecektir.

Belirli bir sorunu nasıl çözeceğinizden emin değilseniz, “Why and how to fix it” (Neden ve nasıl düzeltilir) bağlantısına tıklayın.

Sorunun kısa bir açıklamasını ve nasıl düzeltileceğine dair tavsiyeleri göreceksiniz.

Her sorunu derhal ele alarak ve teknik açıdan sağlam bir web sitesi sürdürerek, taranabilirliği iyileştirecek, düzgün dizinlemeyi sağlamaya yardımcı olacak ve daha üst sıralarda yer alma şansınızı artıracaksınız.

Site Haritasını Google’a Gönderin

Site haritası dosyanızı Google’a göndermek, sayfalarınızın taranmasına ve dizine eklenmesine yardımcı olur.

Henüz bir site haritanız yoksa, XML Sitemaps gibi bir site haritası oluşturucu aracı kullanarak bir tane oluşturun.

Aracı açın, web sitenizin URL’sini girin ve “Start” (Başlat) düğmesine tıklayın.

Araç sizin için otomatik olarak bir site haritası oluşturacaktır.

Site haritanızı indirin ve sitenizin kök dizinine yükleyin.

Örneğin, siteniz www.example.com ise, site haritanız www.example.com/sitemap.xml adresinde bulunmalıdır.

Site haritanız yayına girdiğinde, Google Search Console (GSC) hesabınız aracılığıyla Google’a gönderin.

GSC kurulumunuz yok mu? Başlamak için Google Search Console rehberimizi okuyun.

Aktivasyondan sonra, kenar çubuğundan “Sitemaps” (Site Haritaları) bölümüne gidin. Site haritası URL’nizi girin ve “Submit” (Gönder) düğmesine tıklayın.

Bu, web sitenizin taranabilirliğini ve dizinlenmesini iyileştirir.

İç Bağlantıları Güçlendirin

Bir web sitesinin taranabilirliği ve dizinlenebilirliği, iç bağlantı yapısında da yatar.

Bozuk iç bağlantılar ve yetim sayfalar (yani iç bağlantısı olmayan sayfalar) gibi iç bağlantılarla ilgili sorunları düzeltin ve iç bağlantı yapınızı güçlendirin.

Bu amaçla Semrush’ın Site Audit aracını kullanın.

“Issues” (Sorunlar) sekmesine gidin ve “broken” (bozuk) araması yapın. Araç, sitenizdeki tüm bozuk iç bağlantıları görüntüleyecektir.

Bozuk iç bağlantıların listesini görmek için “XXX internal links are broken” (XXX iç bağlantı bozuk) seçeneğine tıklayın.

Bozuk bağlantıları gidermek için bozuk sayfayı geri yükleyebilirsiniz. Veya web sitenizdeki ilgili, alternatif bir sayfaya 301 yönlendirmesi uygulayabilirsiniz.

Şimdi yetim sayfaları bulmak için sorunlar sekmesine geri dönün ve “orphan” (yetim) araması yapın.

Araç, sitenizde yetim sayfa olup olmadığını gösterecektir. Bu sorunu, bu sayfalara işaret eden iç bağlantılar oluşturarak giderin.

Düzenli Olarak Yeni İçerik Güncelleyin ve Ekleyin

Düzenli olarak yeni içerik güncellemek ve eklemek, web sitenizin taranabilirliği ve dizinlenebilirliği için oldukça faydalıdır.

Arama motorları taze içeriği sever. Düzenli olarak içerik güncellediğinizde ve yeni içerik eklediğinizde, bu web sitenizin aktif olduğunun sinyalini verir.

Bu, arama motoru botlarını sitenizi daha sık taramaya teşvik edebilir ve en son güncellemeleri yakalamalarını sağlayabilir.

Mümkünse, web sitenizi düzenli aralıklarla yeni içeriklerle güncellemeyi hedefleyin.

İster yeni blog yazıları yayınlayın ister mevcut olanları güncelleyin, bu arama motoru botlarının sitenizle etkileşimde kalmasına ve içeriğinizi dizinlerinde taze tutmasına yardımcı olur.

Kopya İçerikten Kaçının

Kopya içerikten kaçınmak, web sitenizin taranabilirliğini ve dizinlenebilirliğini iyileştirmek için şarttır.

Kopya içerik, arama motoru botlarının kafasını karıştırabilir ve tarama kaynaklarını boşa harcayabilir.

Sitenizin birden fazla sayfasında aynı veya çok benzer içerik olduğunda, arama motorları hangisinin taranacağını ve dizine ekleneceğini belirlemekte zorlanabilir.

Bu nedenle, web sitenizdeki her sayfanın özgün içeriğe sahip olduğundan emin olun. Diğer kaynaklardan içerik kopyalayıp yapıştırmaktan kaçının ve kendi içeriğinizi birden fazla sayfada kopyalamayın.

Sitenizi kopya içerik açısından kontrol etmek için Semrush’ın Site Audit aracını kullanın.

“Issues” (Sorunlar) sekmesinde “duplicate content” (kopya içerik) araması yapın.

Kopya sayfalar bulursanız, bunları tek bir sayfada birleştirmeyi düşünün. Ve kopya sayfaları birleştirilmiş olana yönlendirin.

Veya canonical etiketleri kullanabilirsiniz. Canonical etiketi, arama motorlarının dizinleme için dikkate alması gereken tercih edilen sayfayı belirtir.