Die Datei llms.txt wurde im September 2024 von Jeremy Howard (Answer.AI) auf llmstxt.org vorgeschlagen. Sie liegt unter der Adresse /llms.txt einer Website und ist in Markdown geschrieben. Vorgesehen sind ein Titel als Überschrift erster Ebene, eine kurze Zusammenfassung als Zitatblock und Abschnitte mit Listen von Links zu den wichtigsten Seiten, jeweils mit kurzer Beschreibung. Ziel ist, dass KI-Systeme und Agenten schnell verstehen, worum es auf einer Website geht und wo sie Details finden.
Der Vorschlag sieht außerdem vor, dass wichtige Seiten zusätzlich als reine Markdown-Version erreichbar sind, etwa indem an die Adresse „.md“ angehängt wird. Manche Websites, vor allem technische Dokumentationen, stellen ergänzend eine Datei llms-full.txt mit dem vollständigen Text bereit. Solche Formate sind für Maschinen leichter zu lesen als HTML mit Navigation, Werbung und Skripten. Für einen Betrieb ist der Aufwand gering, weil die Datei aus vorhandenen Seiten erzeugt werden kann.
llms.txt ist ein offener Vorschlag, kein verbindlicher Standard. Google schreibt in seinem Leitfaden zur Optimierung für KI-Funktionen, dass die Google Suche solche Dateien ignoriert; sie schaden der Sichtbarkeit in der Google Suche nicht und nützen ihr auch nicht. Ob und wie stark andere KI-Anbieter die Datei auswerten, ist öffentlich kaum dokumentiert. Sie kann daher eine optionale Ergänzung für KI-Agenten sein, ersetzt aber weder gute Inhalte noch strukturierte Daten oder SEO-Grundlagen.
