Was ist llms.txt? Definition, Aufbau und Herkunft erklärt

llms.txt ist eine schlichte Markdown-Datei im Stammverzeichnis einer Website, die Sprachmodellen eine kuratierte Übersicht der wichtigsten Seiten liefert. Sie wurde im September 2024 vorgeschlagen, ist aber kein formaler Standard. Ihr Zweck ist Verständnis, nicht Zugriffskontrolle, und ihr Nutzen ist bislang nicht belegt.

Die Grundidee hinter der Datei

Sprachmodelle arbeiten mit begrenzten Kontextfenstern. Eine normale Webseite besteht aus Navigation, Skripten, Bannern und Fußzeilen, und nur ein Bruchteil ist der eigentliche Inhalt. Die Idee von Jeremy Howard (Answer.AI), dokumentiert auf llmstxt.org: Betreiber legen eine saubere, handgepflegte Übersicht ab, damit ein KI-System schneller findet, was wichtig ist.

Man kann sich die Datei als Visitenkarte mit Inhaltsverzeichnis vorstellen. Eine Sitemap listet alles auf, was crawlbar ist. Die llms.txt sagt: Das hier ist das Wesentliche, und so ist es einzuordnen.

Aufbau: Was in der Datei steht

Das vorgeschlagene Format wird von oben nach unten gelesen:

1. H1: Name der Website oder des Projekts. Als einziges Element zwingend.
2. Blockquote: Kurze Zusammenfassung mit dem Kontext, den man für den Rest braucht.
3. Freitext: Optional einige Absätze oder Listen ohne Überschriften.
4. H2-Abschnitte: Je eine Linkliste mit Titel, URL und optional einem erklärenden Satz.
5. Abschnitt "Optional": Material, das bei knappem Kontext übersprungen werden kann.

Den ausführlichen Ablauf zeigt der Artikel llms.txt erstellen, ein ausgefülltes Muster finden Sie unter llms.txt Beispiel.

Kernsatz: Die llms.txt ist ein Wegweiser für Verständnis, kein Schalter für Sichtbarkeit.

Abgrenzung zu robots.txt, sitemap.xml und llms-full.txt

Datei	Zweck	Format	Wirkung
robots.txt	Zugriff steuern (RFC 9309)	Textregeln	Crawler erlauben oder sperren
sitemap.xml	Alle URLs melden	XML	Vollständigkeit für Suchmaschinen
llms.txt	Wichtiges kuratieren	Markdown	Orientierung für Sprachmodelle
llms-full.txt	Volltext bündeln	Markdown	Ein Abruf statt vieler Seiten

Wer Zugriff verweigert, den rettet auch die schönste llms.txt nicht. Das Zusammenspiel erläutern wir in llms.txt vs. robots.txt; die Volltext-Variante behandelt llms-full.txt.

Was über die Verbreitung bekannt ist

Nach dem llms.txt-Leitfaden von BusinessMCP haben Tausende Websites eine Datei veröffentlicht, einige Entwicklerwerkzeug-Anbieter erzeugen sie automatisch. Zugleich hält der Leitfaden fest, dass kein großer KI-Anbieter (OpenAI, Google, Anthropic) dokumentiert hat, dass seine Crawler oder Antworten die Datei nutzen. Behauptungen über Zitiervorteile bezeichnet er als unbewiesen. Das ist eine Anbieterangabe, deckt sich aber mit dem, was uns an offiziellen Aussagen bekannt ist; prüfen Sie den Stand selbst, denn er kann sich ändern.

Für wen sich die Datei trotzdem lohnt

Der Aufwand ist gering: eine statische Datei, kein Eingriff in Design oder Code. BusinessMCP nennt das auf der Seite seines llms.txt Generators eine asymmetrische Wette: wenig Kosten, möglicher Nutzen. Am meisten profitieren Seiten mit klarer Struktur, etwa Dokumentationen, Shops mit vielen Kategorien oder Dienstleister mit wenigen, gut erklärten Leistungen. Eine Nebenwirkung ist ebenfalls nützlich: Wer die Zusammenfassung schreibt, muss das eigene Angebot in einem Satz definieren.

Was sie nicht kann

• Keine Garantie, dass ChatGPT, Gemini oder Claude Ihre Seite zitieren
• Kein Ersatz für gutes Content-Handwerk und technisches SEO
• Kein Schutz vor dem Training mit Ihren Inhalten (dafür ist robots.txt der Ort, soweit Crawler sie beachten)

Was ohne Illusionen realistisch ist, steht in Bringt llms.txt etwas?. Wer die Datei im Rahmen einer breiteren Strategie sieht, landet bei Generative Engine Optimization.

Häufige Missverständnisse zur Definition

"llms.txt ist das neue robots.txt." Die Namen ähneln sich, die Funktion nicht. robots.txt ist seit RFC 9309 ein beschriebenes Protokoll und regelt Zugriff. Die llms.txt hat keinen Regelcharakter: Sie verbietet nichts und erlaubt nichts. Sie ist eine Lesehilfe.

"llms.txt ist ein Google-Feature." Nein. Die Konvention stammt nicht von einer Suchmaschine, sondern wurde von einem Einzelnen vorgeschlagen und von einer Community getragen. Dass einzelne Dienste sie auswerten, ist möglich, aber nicht als Verpflichtung dokumentiert.

"Je länger, desto besser." Das Gegenteil trifft zu. Der Wert liegt in der Auswahl. Eine Datei mit 400 Links ist faktisch eine Sitemap im falschen Format.

"Ich brauche sie nur, wenn ich Entwickler bin." Die Idee entstand im technischen Umfeld, wo Dokumentation für Modelle aufbereitet werden soll. Sinnvoll ist sie jedoch für jede Website, die sich in zehn Zeilen erklären lässt: Berater, Handwerksbetriebe, Praxen, lokale Händler.

Ein Beispiel für die Wirkung der Zusammenfassung

Stellen Sie sich einen fiktiven Kölner Fahrradladen vor. Die Startseite spricht von "Mobilität neu gedacht", die Leistungsseiten heißen "Erlebniswelten" und "Service+". Ein Mensch erschließt daraus nach einigem Suchen, dass dort Räder verkauft und repariert werden. Ein Sprachmodell mit knappem Kontext erschließt es womöglich nicht. Die Zusammenfassung der llms.txt löst das Problem in einem Satz: "Fahrradhandel und Werkstatt in Köln-Nippes: Verkauf von Stadt- und Lastenrädern, Reparatur und Inspektion." Das ist der eigentliche Gewinn der Datei: Sie zwingt Sie zu der Klarheit, die Ihre Website womöglich nicht hat. Der Satz hilft übrigens auch Menschen, etwa bei Verzeichniseinträgen und Profilen.

Wo Sie weiterlesen

Für die Praxis lohnt der Weg von der Definition zur Datei: llms.txt erstellen erklärt die sechs Schritte, llms.txt in WordPress den Upload in einem verbreiteten CMS. Wer Format und Prüfung als erstes verstehen will, nutzt den kostenlosen llms.txt Generator von BusinessMCP als Spielwiese, denn dessen Live-Vorschau zeigt sofort, wie sich Eingaben im Format niederschlagen. Welche Rolle die Datei in einer größeren Strategie spielt, beschreiben die Texte über Generative Engine Optimization und GEO vs. SEO.

Für den Zugang der Crawler, also die Voraussetzung für alles andere, gibt es bei BusinessMCP außerdem den AI-Crawler-Checker. Laut Seite prüft er, ob Ihre robots.txt KI-Crawler zulässt und ob eine llms.txt vorhanden ist; das Web-Werkzeug ist als kostenlos gelistet.

Kurzer Überblick zum Mitnehmen

llms.txt ist eine Markdown-Datei im Stammverzeichnis, die Ihre wichtigsten Seiten für Sprachmodelle kuratiert. Pflicht ist nur die H1, üblich sind Zusammenfassung und Abschnitte mit Linklisten. Sie steuert keinen Zugriff, ist kein formaler Standard und hat keinen belegten Einfluss auf Zitate. Ihr praktischer Wert liegt in der Klarheit, die sie von Ihnen verlangt, und in ihrem sehr geringen Aufwand. Wer sie veröffentlicht, sollte sie pflegen, ihren Abruf in den Server-Protokollen beobachten und den Zugang für Crawler gesondert sicherstellen.