llms.txt ist eine vorgeschlagene reine Text-Markdown-Datei, die im Stammverzeichnis einer Website platziert wird und großen Sprachmodellen einen kurzen, kuratierten Leitfaden zu den nützlichsten Inhalten der Website bietet. Sie ersetzt weder robots.txt, XML-Sitemaps noch strukturierte Daten, und keine große Suchmaschine hat angegeben, dass sie die Datei für das Ranking verwendet. Es lohnt sich, sie hinzuzufügen, wenn Ihre Website Dokumentationen oder Referenzinhalte enthält, die von KI-Tools gelesen werden; andernfalls sind traditionelle Tools nach wie vor wichtiger.
Was genau ist llms.txt?
Das llms.txt-Format wurde 2024 von Jeremy Howard von Answer.AI vorgeschlagen. Die Idee ist einfach: Websites sind voll von Navigation, Skripten und Layouts, die es für ein Sprachmodell schwierig machen, sie innerhalb eines begrenzten Kontextfensters zu lesen. Eine einzelne Markdown-Datei kann die wichtigen Seiten mit einer einzeiligen Beschreibung auflisten, sodass ein KI-Tool die richtigen Inhalte schnell finden kann.
Eine typische Datei enthält einen Titel, eine kurze Zusammenfassung in einem Blockzitat und Abschnitte mit Links. Der Vorschlag schlägt außerdem eine optionale llms-full.txt mit vollständigen Inhalten sowie Markdown-Versionen der wichtigsten Seiten vor. Viele Dokumentationsplattformen und Unternehmen für Entwicklertools haben die Datei bereits hinzugefügt, und es gibt Generatoren für gängige CMS-Plattformen.
Wie schneidet llms.txt im Vergleich zu traditionellen Tools ab?
Jede Datei im traditionellen SEO-Toolkit hat eine spezifische Aufgabe und einen bekannten Leser. llms.txt hat eine andere Aufgabe und bisher ein weniger sicheres Publikum.
- robots.txt: teilt Crawlern mit, worauf sie zugreifen dürfen. Es ist ein langjähriger Standard (formalisiert als RFC 9309) und wird von großen Such- und KI-Crawlern wie Googlebot, GPTBot und ClaudeBot respektiert. llms.txt gewährt oder blockiert keinen Zugriff.
- XML-Sitemap: listet jede URL auf, die indexiert werden soll, zusammen mit Aktualisierungsdaten. Suchmaschinen verwenden sie zur Entdeckung. llms.txt listet eine kleine, ausgewählte Teilmenge mit menschenlesbaren Beschreibungen auf.
- Strukturierte Daten (Schema.org): zeichnen Fakten auf jeder Seite aus, wie Produkte, Preise, FAQs und Autoren. Google verwendet sie für Rich Results. llms.txt enthält keine seitenbezogenen Fakten.
- Sauberes HTML und gute Inhalte: bleiben der wichtigste Weg, wie jedes System, ob KI oder Suche, eine Seite versteht.
Die Kurzfassung: robots.txt steuert den Zugriff, Sitemaps unterstützen die Entdeckung, strukturierte Daten beschreiben Fakten und llms.txt bietet einen Leseleitfaden. Sie konkurrieren nicht miteinander.
Wer liest eigentlich llms.txt?
Dies ist der ehrliche Schwachpunkt. Zum Zeitpunkt der Erstellung dieses Artikels hat Google erklärt, dass es llms.txt nicht für die Suche oder KI-Überblicke verwendet und dass normale SEO-Praktiken gelten. Andere große KI-Anbieter haben keine klaren Verpflichtungen veröffentlicht, die Datei beim Crawlen zu lesen.
Wo die Datei tatsächlich verwendet wird, ist bei Entwicklertools. Coding-Assistenten und Dokumentationstools können auf die llms.txt einer Bibliothek verwiesen werden, damit das Modell aktuelle Dokumente liest, anstatt zu raten. Einige KI-Agenten und Browser-Tools suchen danach, wenn sie nach einer Website gefragt werden. Das macht sie wertvoll für Softwareunternehmen und weniger offensichtlich wertvoll für ein lokales Restaurant.
Wann sollten Sie llms.txt hinzufügen?
- Sie veröffentlichen technische Dokumentationen, API-Referenzen oder eine Wissensdatenbank, die Entwickler mit KI-Tools abfragen.
- Ihre Website ist groß und die besten Antworten sind mehrere Klicks tief vergraben.
- Sie haben bereits saubere robots.txt, Sitemaps und strukturierte Daten und möchten eine kostengünstige Ergänzung.
- Sie können sie pflegen; eine veraltete llms.txt, die auf alte Seiten verweist, ist schlimmer als gar keine.
Wann lohnt sich der Aufwand nicht?
Wenn Ihre technischen SEO-Grundlagen defekt sind, beheben Sie diese zuerst. Eine Website mit blockiertem CSS, fehlenden Canonicals oder langsamen Seiten wird von einer zusätzlichen Textdatei nicht profitieren. Dasselbe gilt für kleine Broschüren-Websites mit zehn Seiten; ein Modell kann diese direkt lesen.
Es ist auch kein Weg, um das KI-Training zu steuern. Wenn Sie einschränken möchten, wie KI-Unternehmen Ihre Inhalte verwenden, sind die relevanten Kontrollen robots.txt-Regeln für spezifische User-Agents wie GPTBot oder Google-Extended sowie alle Opt-out-Mechanismen, die die Anbieter anbieten.
Wie schreibt man eine gute llms.txt?
Halten Sie sie kurz und redaktionell. Die Datei ist ein Leitfaden, kein Dump jeder URL.
- Beginnen Sie mit dem Seitennamen als H1 und einer Zusammenfassung in zwei Sätzen, was die Organisation tut.
- Gruppieren Sie Links unter klaren H2-Abschnitten: Dienste, Leitfäden, Dokumentation, Richtlinien.
- Schreiben Sie eine einfache Zeile pro Link, die beschreibt, was die Seite beantwortet.
- Verlinken Sie nur auf kanonische URLs und bevorzugen Sie Seiten mit stabilen Adressen.
- Fügen Sie Ihrem Inhaltskalender ein Überprüfungsdatum hinzu, damit die Datei aktuell bleibt.
Wenn Sie WordPress, Shopify oder ein Headless-CMS betreiben, entscheiden Sie, wo die Datei liegt und wer sie aktualisiert. Einige SEO-Plugins können sie automatisch generieren, was sie synchron hält, aber dazu neigt, zu viele Seiten einzubeziehen. Eine manuell bearbeitete Datei mit einer vierteljährlichen Überprüfung ist normalerweise sauberer, und die redaktionelle Wahl dessen, was aufgenommen werden soll, ist der Teil, der ihr Wert verleiht.
Wie Alien Road llms.txt bei der GEO-Arbeit anwendet
Bei einem typischen Engagement zur Optimierung generativer Suchmaschinen (GEO) ist llms.txt ein Punkt auf einer längeren Checkliste, nicht die Schlagzeile. Die Entdeckung beginnt mit dem Crawl-Zugriff: Wir prüfen robots.txt-Regeln für KI-User-Agents gegen die Wünsche des Kunden und überprüfen dann die Serverprotokolle, um zu sehen, welche KI-Crawler tatsächlich besuchen.
Die Einrichtung konzentriert sich auf die Inhalte, die KI-Systeme zitieren: klare Antworten oben auf wichtigen Seiten, Autoren- und Organisations-Markup sowie FAQ-Abschnitte, wo sie Benutzern helfen. Sobald dies vorhanden ist, entwerfen wir mit dem Team des Kunden eine llms.txt und wählen die 20 bis 50 Seiten aus, die ihre Expertise am besten repräsentieren.
Die Messung verfolgt KI-Crawler-Zugriffe in Protokollen, Empfehlungsverkehr von KI-Assistenten in Analysen und ob die Marke in Antworten für eine feste Liste von Prompts erscheint, die jeden Monat getestet werden. Wir berichten über llms.txt als Experiment mit ungewisser Wirkung, was es auch ist.
Wo man diese Woche anfangen kann
Öffnen Sie yoursite.com/robots.txt und prüfen Sie, was dort über KI-Crawler steht. Durchsuchen Sie dann Ihre Serverprotokolle oder CDN-Analysen nach GPTBot, ClaudeBot, PerplexityBot und Google-Extended, um zu sehen, wer Ihre Seiten bereits liest.
Wenn die Grundlagen gesund aussehen und Sie Referenzinhalte haben, zu denen es sich lohnt, Leser zu führen, schreiben Sie eine erste llms.txt mit 20 Links. Es dauert einen Nachmittag, kostet nichts beim Hosten und gibt Ihnen eine saubere Liste Ihrer wichtigsten Seiten, was an sich schon nützlich ist. Bewahren Sie eine Kopie in Ihrem Repository oder CMS auf, damit Änderungen nachverfolgt werden.
Weiterlesen: GEO – AIO – AEO · GEO