Sitemaps.org üzerinde robots.txt aracılığıyla çapraz gönderimler

28 Şubat 2008, Perşembe

Geçtiğimiz bahar, Sitemaps protokolü, bizim ve protokolü destekleyen diğer arama motorlarının Sitemaps dosyalarınızdan haberdar olmasını sağlamak amacıyla robots.txt kullanarak Sitemaps otomatik keşfini içerecek şekilde genişletildi. Ardından, birden fazla ana bilgisayar (host) için tek bir özel ana bilgisayar üzerinden Sitemaps gönderimine olanak tanıyan Google Webmaster Tools ile Sitemaps çapraz gönderim desteğini duyurduk. Dolayısıyla, bu ikisini birleştirip robots.txt üzerinden Sitemaps çapraz gönderimine izin vermemiz sadece bir zaman meselesiydi. Bugün tam olarak bunu yapıyoruz.

Web yöneticilerinin birden fazla ana bilgisayar için Sitemaps dosyalarını tek bir ana bilgisayarda barındırmasını ve bu Sitemaps dosyalarının konumunu ilgili robots.txt dosyalarına ekleyerek bizi bilgilendirmesini kolaylaştırıyoruz.

Bu nasıl çalışır? Örneğin, sahip olduğunuz www.example.com ve host2.google.com adlı iki ana bilgisayarın her biri için bir Sitemaps göndermek istediğinizi varsayalım. Kolaylık olması açısından, Sitemaps dosyalarını bu ana bilgisayarlardan birinde, yani www.example.com üzerinde barındırmak isteyebilirsiniz. Örneğin, bir İçerik Yönetim Sisteminiz (CMS) varsa, bir dizindeki içeriği değiştirmek yerine robots.txt dosyalarınızı değiştirmek sizin için daha kolay olabilir.

Artık (Sitemaps dosyalarının konumunu bize bildirerek) robots.txt aracılığıyla çapraz gönderim desteğini kullanabilirsiniz:

1. www.example.com için robots.txt dosyası şunları içerecektir:
2. Benzer şekilde, host2.google.com için robots.txt dosyası şunları içerecektir:

Her bir ana bilgisayarın robots.txt dosyasında o ana bilgisayarın Sitemaps dosyasının nerede bulunduğunu belirterek, aslında Sitemaps dosyasını belirttiğiniz ana bilgisayarın sahibi olduğunuzu kanıtlamış olursunuz. Tüm Sitemaps dosyalarını tek bir ana bilgisayarda barındırmayı seçerek, Sitemaps yönetiminizi basitleştirmiş olursunuz.

Bu duyuruyu bugün ortak bir çaba olarak Sitemaps.org üzerinde yapıyoruz. Meslektaşlarımızın neler söylediğini görmek için Yahoo! ve Microsoft tarafından yayınlanan blog yazılarına da göz atabilirsiniz.

Yazan: Prashanth Koppula, Ürün Müdürü