llms.txt, bir web sitesinin kök dizinine yerleştirilen ve büyük dil modellerine sitenin en yararlı içeriği için kısa, küratörlü bir rehber sunan, önerilen düz metin Markdown dosyasıdır. robots.txt, XML site haritaları veya yapılandırılmış verilerin yerini almaz ve hiçbir büyük arama motoru dosyayı sıralama için kullandığını belirtmemiştir. Sitenizde AI araçlarının okuduğu dokümantasyon veya referans içeriği olduğunda eklemeye değerdir; aksi takdirde geleneksel araçlar hala daha önemlidir.
llms.txt tam olarak nedir?
llms.txt formatı 2024 yılında Answer.AI’den Jeremy Howard tarafından önerilmiştir. Fikir basittir: web siteleri, sınırlı bir bağlam penceresinde dil modelinin okumasını zorlaştıran navigasyon, betikler ve düzenlerle doludur. Tek bir Markdown dosyası, önemli sayfaları her biri için bir satırlık açıklama ile listeleyebilir, böylece bir AI aracı doğru içeriği hızlıca bulabilir.
Tipik bir dosya bir başlık, blok alıntıda kısa bir özet ve bağlantı bölümleri içerir. Teklif ayrıca tam içerikli isteğe bağlı bir llms-full.txt ve ana sayfaların Markdown sürümlerini önerir. Birçok dokümantasyon platformu ve geliştirici aracı şirketi dosyayı eklemiştir ve yaygın CMS platformları için oluşturucular mevcuttur.
llms.txt geleneksel araçlarla nasıl karşılaştırılır?
Geleneksel SEO araç setindeki her dosyanın belirli bir işi ve bilinen bir okuyucusu vardır. llms.txt’nin farklı bir işi ve şu ana kadar daha az kesin bir kitlesi vardır.
- robots.txt: tarayıcılara neye erişebileceklerini söyler. Uzun süredir var olan bir standarttır (RFC 9309 olarak resmileştirilmiştir) ve Googlebot, GPTBot ve ClaudeBot gibi büyük arama ve AI tarayıcıları tarafından saygı görür. llms.txt erişim vermez veya engellemez.
- XML site haritası: indekslenmesini istediğiniz her URL’yi güncelleme tarihleriyle listeler. Arama motorları bunu keşif için kullanır. llms.txt ise insan tarafından okunabilir açıklamalarla küçük, seçilmiş bir alt kümeyi listeler.
- Yapılandırılmış veriler (Schema.org): ürünler, fiyatlar, SSS’ler ve yazarlar gibi her sayfadaki gerçekleri işaretler. Google bunu zengin sonuçlar için kullanır. llms.txt sayfa başına hiçbir gerçek taşımaz.
- Temiz HTML ve iyi içerik: herhangi bir sistemin, AI veya arama, bir sayfayı anlamasının ana yolu olmaya devam eder.
Kısa versiyon: robots.txt erişimi kontrol eder, site haritaları keşfi destekler, yapılandırılmış veriler gerçekleri tanımlar ve llms.txt okuma rehberi sunar. Birbiriyle rekabet etmezler.
llms.txt’yi aslında kim okur?
Bu dürüst zayıf noktadır. Yazının yazıldığı sırada Google, Arama veya AI Özetleri için llms.txt’yi kullanmadığını ve normal SEO uygulamalarının geçerli olduğunu belirtmiştir. Diğer büyük AI sağlayıcıları, tarama sırasında onu okumak için net taahhütler yayınlamamıştır.
Dosyanın kullanıldığı yer geliştirici araçlarıdır. Kodlama asistanları ve dokümantasyon araçları, modelin tahmin etmek yerine güncel belgeleri okuması için bir kütüphanenin llms.txt’sine yönlendirilebilir. Bazı AI ajanları ve tarayıcı araçları, bir site hakkında soru sorulduğunda onu kontrol eder. Bu, onu yazılım şirketleri için değerli, yerel bir restoran için ise daha az değerli kılar.
llms.txt’yi ne zaman eklemelisiniz?
- Geliştiricilerin AI araçlarıyla sorguladığı teknik dokümantasyon, API referansları veya bir bilgi tabanı yayınlıyorsunuz.
- Siteniz büyük ve en iyi cevaplar birkaç tıklama derinliğinde gömülü.
- Zaten temiz robots.txt, site haritaları ve yapılandırılmış verileriniz var ve düşük maliyetli bir ekstra istiyorsunuz.
- Onu koruyabilirsiniz; eski sayfalara işaret eden güncel olmayan bir llms.txt, hiç olmamasından daha kötüdür.
Ne zaman çabaya değmez?
Teknik SEO temelleriniz bozuksa, önce onları düzeltin. Engellenmiş CSS, eksik canonical’lar veya yavaş sayfaları olan bir site, ekstra bir metin dosyasından hiçbir şey kazanmayacaktır. Aynı şey on sayfalık küçük broşür siteleri için de geçerlidir; bir model bunları doğrudan okuyabilir.
Bu aynı zamanda AI eğitimini kontrol etmenin bir yolu değildir. AI şirketlerinin içeriğinizi nasıl kullanacağını sınırlamak istiyorsanız, ilgili kontroller GPTBot veya Google-Extended gibi belirli kullanıcı ajanları için robots.txt kuralları ve sağlayıcıların sunduğu herhangi bir devre dışı bırakma mekanizmasıdır.
İyi bir llms.txt nasıl yazılır?
Kısa ve editoryal tutun. Dosya bir rehberdir, her URL’nin dökümü değildir.
- Site adını H1 olarak ve organizasyonun ne yaptığına dair iki cümlelik bir özetle başlayın.
- Bağlantıları net H2 bölümleri altında gruplayın: Hizmetler, Rehberler, Dokümantasyon, Politikalar.
- Her bağlantı için sayfanın neye cevap verdiğini açıklayan düz bir satır yazın.
- Yalnızca canonical URL’lere bağlantı verin ve sabit adresleri olan sayfaları tercih edin.
- Dosyanın güncel kalması için içerik takviminize bir inceleme tarihi ekleyin.
WordPress, Shopify veya başsız bir CMS çalıştırıyorsanız, dosyanın nerede yaşadığına ve kimin güncellediğine karar verin. Bazı SEO eklentileri onu otomatik olarak oluşturabilir, bu da onu senkronize tutar ancak çok fazla sayfa içerme eğilimindedir. Üç aylık incelemeyle elle düzenlenmiş bir dosya genellikle daha temizdir ve neyin dahil edileceğine dair editoryal seçim, ona değer katan kısımdır.
Alien Road, llms.txt’yi GEO çalışmalarında nasıl uygular
Tipik bir üretken motor optimizasyonu angajmanında, llms.txt manşet değil, daha uzun bir kontrol listesindeki bir maddedir. Keşif, tarama erişimiyle başlar: AI kullanıcı ajanları için robots.txt kurallarını müşterinin isteklerine göre kontrol ederiz, ardından hangi AI tarayıcılarının gerçekten ziyaret ettiğini görmek için sunucu günlüklerini inceleriz.
Kurulum, AI sistemlerinin alıntı yaptığı içeriğe odaklanır: ana sayfaların üst kısmına yakın net cevaplar, yazar ve organizasyon işaretlemesi ve kullanıcılara yardımcı oldukları yerlerde SSS bölümleri. Bu yerleştirildikten sonra, müşterinin ekibiyle bir llms.txt taslağı hazırlarız ve uzmanlıklarını en iyi temsil eden 20 ila 50 sayfayı seçeriz.
Ölçüm, günlüklerdeki AI tarayıcı hitlerini, analitikte AI asistanlarından gelen yönlendirme trafiğini ve markanın her ay test edilen sabit bir istem listesi için cevaplarda görünüp görünmediğini izler. llms.txt’yi belirsiz bir etkiye sahip bir deney olarak rapor ederiz, ki bu da budur.
Bu hafta nereden başlamalı
yoursite.com/robots.txt dosyasını açın ve AI tarayıcıları hakkında ne dediğini kontrol edin. Ardından, sayfalarınızı kimin okuduğunu görmek için sunucu günlüklerinizde veya CDN analitiğinizde GPTBot, ClaudeBot, PerplexityBot ve Google-Extended araması yapın.
Temeller sağlıklı görünüyorsa ve okuyucuları yönlendirmeye değer referans içeriğiniz varsa, 20 bağlantılı ilk llms.txt’yi yazın. Bir öğleden sonra sürer, barındırmak için hiçbir maliyeti yoktur ve size en önemli sayfalarınızın temiz bir listesini verir, bu da kendi başına yararlıdır. Değişikliklerin izlenmesi için deponuzda veya CMS’nizde bir kopya saklayın.
Okumaya devam edin: GEO – AIO – AEO · GEO