llms.txt ist eine vorgeschlagene einfache Markdown-Datei, die im Root-Verzeichnis einer Website platziert wird und großen Sprachmodellen eine kurze, kuratierte Karte der nützlichsten Seiten der Website gibt. Ein guter Workflow entwirft sie aus Ihrer Sitemap und Ihren Analysedaten, bearbeitet sie manuell, veröffentlicht sie unter /llms.txt und aktualisiert sie nach einem Zeitplan. Sie ist kostengünstig zu erstellen, aber es handelt sich eher um eine Konvention als um einen Standard, zu dem sich Suchmaschinen verpflichtet haben.
Was genau ist llms.txt?
Die Idee wurde 2024 von Jeremy Howard von Answer.AI vorgeschlagen. Die Begründung ist einfach: Websites sind voll von Navigation, Skripten und Anzeigen, und Modelle haben begrenzte Kontextfenster. Eine kurze Markdown-Datei kann ein Modell direkt auf die Seiten verweisen, die erklären, was ein Unternehmen oder Projekt tut.
Das vorgeschlagene Format ist leicht. Es beginnt mit einer H1, die den Namen der Website oder des Projekts enthält, gefolgt von einer kurzen Blockzitat-Zusammenfassung, optionalen Kontextabsätzen und H2-Abschnitten mit Listen von Links, jeweils mit einer einzeiligen Beschreibung. Ein “Optional”-Abschnitt kann sekundäre Links auflisten, die ein Modell überspringen kann. Einige Websites veröffentlichen auch llms-full.txt, eine längere Datei mit vollständigem Seiteninhalt in Markdown.
Wer unterstützt es?
Die Akzeptanz war bei Entwickler-Dokumentationsseiten und Software-Tools am stärksten, und mehrere Dokumentationsplattformen können die Datei automatisch generieren. Zum Zeitpunkt der Erstellung dieses Artikels haben große Suchmaschinen nicht angegeben, dass sie llms.txt für das Ranking oder die Auswahl von Quellen in KI-Antworten verwenden, und Google-Vertreter haben es öffentlich heruntergespielt. Betrachten Sie es als kostengünstige Vorbereitung, nicht als Ranking-Hebel.