Was ist llms.txt – und liest die Datei überhaupt eine KI?

llms.txt ist eine vorgeschlagene Markdown-Datei im Wurzelverzeichnis einer Website, die großen Sprachmodellen ein kuratiertes Verzeichnis der wichtigsten Inhalte liefert. Jeremy Howard von Answer.AI veröffentlichte die Spezifikation am 3. September 2024. Stand 2026 erklärt keine große KI-Engine, sie zu unterstützen: Google hat sie ausdrücklich abgelehnt, die Crawler-Doku von OpenAI erwähnt sie nie, und Ahrefs fand, dass 97 % der veröffentlichten Dateien null Anfragen erhalten. Hier sind Format, Belege und die Fälle, in denen sie sich trotzdem lohnt.

Was ist llms.txt und woher kommt sie?

llms.txt ist ein Vorschlag von Jeremy Howard, Mitgründer von Answer.AI und fast.ai, veröffentlicht am 3. September 2024 auf llmstxt.org. Es ist kein verabschiedeter Webstandard; kein KI-Anbieter ist verpflichtet, die Datei zu lesen, und die Verbreitung beruht vollständig auf Freiwilligkeit.

Das adressierte Problem ist real. Sprachmodelle arbeiten innerhalb der Grenzen ihres Kontextfensters, und genau dort setzt die Spezifikation an. Howards Antwort ist eine kompakte Markdown-Datei unter /llms.txt, geschrieben, damit LLMs eine Website zur Inferenzzeit nutzen können: eine kurze Zusammenfassung plus Links auf die Seiten, auf die es ankommt – im Umfang auf diese Grenzen zugeschnitten.

Die Spezifikation geht über die eine Datei hinaus. Sie schlägt außerdem vor, von jeder Seite eine saubere Markdown-Fassung unter derselben URL mit angehängtem .md zu veröffentlichen (und index.html.md für URLs ohne Dateinamen). Der Anwendungsfall, den die Spezifikation hervorhebt, sind Entwicklungsumgebungen, in denen LLMs schnellen Zugriff auf Programmier- und API-Dokumentation brauchen.

llms.txt taucht in Checklisten zur Generative Engine Optimization immer wieder auf. Ob sie diesen Platz verdient hat, prüft dieser Leitfaden.

Wie sieht eine korrekte llms.txt-Datei aus?

Das Format ist minimal, so die offizielle Spezifikation (September 2024). Eine H1 mit dem Namen der Website ist der einzige Pflichtteil. Danach folgen der Reihe nach:

1. Ein Blockquote mit einer knappen Zusammenfassung der Website.
2. Null oder mehr Markdown-Abschnitte mit wissenswertem Kontext.
3. Null oder mehr Dateilisten, jeweils durch eine H2 abgegrenzt, mit Links im Format [Name](url), optional gefolgt von : Notiz.
4. Ein spezieller Abschnitt namens „Optional” für Nebeninhalte, die bei knapperem Kontext entfallen dürfen.

Ein Grundgerüst mit Platzhaltern sieht so aus:

# Beispiel GmbH

> Ein Satz dazu, was das Unternehmen tut und für wen.

Kurzer Absatz mit Kontext, den ein Sprachmodell kennen sollte.

## Dokumentation

- [Schnellstart](https://example.com/docs/quickstart.md): Installation und erste Schritte
- [API-Referenz](https://example.com/docs/api.md): Endpunkte und Authentifizierung

## Optional

- [Unternehmensgeschichte](https://example.com/about.md)

Worin unterscheidet sich llms.txt von robots.txt und sitemap.xml?

Sie erfüllen verschiedene Aufgaben: robots.txt steuert den Crawler-Zugriff, sitemap.xml listet URLs für die Indexierung, und llms.txt ist ein kuratierter Inhaltsführer ohne jede Durchsetzungskraft. Sie blockiert nichts und erlaubt nichts.

Datei	Funktion	Offizielle Unterstützung heute
robots.txt	Erlaubt oder blockiert den Crawler-Zugriff	Der einzige Kontrollmechanismus, den OpenAI dokumentiert (developers.openai.com/api/docs/bots)
sitemap.xml	Listet URLs für Discovery und Indexierung	Seit Langem etablierter Suchmaschinenstandard
llms.txt	Kuratiertes Markdown-Verzeichnis für LLMs	Keine große KI-Engine erklärt, die Datei zu lesen (2026)
llms-full.txt	Gesamte Dokumentation in einer Markdown-Datei	Automatisch erzeugt von Plattformen wie Mintlify

Die offizielle Crawler-Dokumentation von OpenAI (abgerufen Juli 2026) behandelt GPTBot, OAI-SearchBot, OAI-AdsBot und ChatGPT-User, nennt robots.txt als einzigen Kontrollmechanismus und erwähnt llms.txt nie. Wenn Ihr eigentliches Ziel die Steuerung des KI-Bot-Zugriffs ist, ist das ein Fall für die robots.txt – unser Leitfaden zu KI-Crawlern behandelt das.

llms-full.txt ist die maximalistische Schwester: statt eines Verzeichnisses kippt sie die gesamte Dokumentation in eine einzige Markdown-Datei. Ihre praktische Grenze ist die Größe – bei großen Websites kann sie das Kontextfenster vieler Modelle sprengen und eignet sich damit eher für bewusstes Einlesen als für Discovery.

Wer veröffentlicht tatsächlich eine llms.txt?

Überwiegend Plattformen, die sie für ihre Kunden erzeugen, nicht Websites, die sich dafür entschieden haben: 78,1 % der Shopify-Seiten veröffentlichen eine per automatischem Rollout, gegenüber 5,61 % Verbreitung in den Top 10.000 insgesamt – laut Casey Burridges HTTP-Archive-Analyse (Juni 2026). Der Anwendungsfall mit echtem Signal in Serverlogs ist enger gefasst: technische Dokumentation, und auch dort kommt die Datei oft vom Doku-Hoster statt vom Website-Betreiber.

• Anthropic veröffentlicht eine echte: docs.anthropic.com/llms.txt leitet (301) auf platform.claude.com/docs/llms.txt weiter, ein Markdown-Verzeichnis mit der Überschrift „Anthropic Developer Documentation” und Linkabschnitten nach Sprache und Kategorie (geprüft am 16. Juli 2026).
• Perplexity liefert docs.perplexity.ai/llms.txt aus, mit H1 und einem Blockquote, das die APIs beschreibt.
• Mintlify aktivierte am 20. November 2024 die automatische Erzeugung von /llms.txt und /llms-full.txt für jede gehostete Doku-Seite und nannte dabei Anthropic, Windsurf und Bolt.new. Tausende Dokumentationsseiten hatten die Datei über Nacht.

Beachten Sie die Asymmetrie: KI-Labore nutzen llms.txt für ihre eigene Doku, aber keines hat erklärt, dass seine Engines die Datei auf fremden Websites auswertet. Laut Casey Burridges HTTP-Archive-Analyse (Juni 2026) haben ChatGPT, Claude und Gemini auf ihren Hauptdomains keine llms.txt – nur auf ihren Entwicklerdokumentationen.

Wie viele Websites nutzen llms.txt bereits?

Zwischen rund 5 % und 28 %, je nachdem, welche Stichprobe man misst. Die Schlagzeilenzahlen gehen auseinander, weil die Methoden auseinandergehen.

Laut Burridges HTTP-Archive-Datensatz (Juli 2025 bis Juni 2026) wuchs die Verbreitung in den Top 10.000 innerhalb von zwölf Monaten von 1,04 % auf 5,61 % – etwa das 5,4-Fache. Nach Plattform aufgeschlüsselt führt Shopify: 78,1 % der Shopify-Seiten veröffentlichen eine, getrieben von automatischem Plattform-Rollout statt von organischer Entscheidung, während WordPress bei rund 8,7 % liegt. Laut Ahrefs (Logdaten Mai 2026) veröffentlichen 28 % von 137.210 Domains mit Traffic eine gültige llms.txt – rund 38.000 Websites.

Aggregatoren melden wieder andere Werte: Rankability beziffert die Verbreitung auf 8,7 % der weltweiten Top 1.000 (Juni 2026), eine weitere Analyse von rund 300.000 Domains kam auf etwa 10,13 %, und ppc.land berichtet von einem 8,8-fachen Wachstum in zwölf Monaten, von 4.088 auf 36.120 Dateien.

Die Spannweite ist Methodik, kein Widerspruch: andere Domain-Stichproben, andere Gültigkeitskriterien, andere Datenquellen. Zwei Signale halten über alle Studien hinweg. Die Verbreitung wächst schnell, und ein großer Teil kommt von Plattformen – Shopify, Mintlify und Yoast SEO, das die llms.txt als kostenlose WordPress-Funktion automatisch erzeugt, während die eigene Produktseite davon absieht, eine Nutzung durch KI-Plattformen zu garantieren.

Nutzt Google die llms.txt?

Nein – und Google hat das mindestens dreimal gesagt, in steigender Verbindlichkeit.

Im April 2025 schrieb John Mueller auf Reddit (r/TechSEO), berichtet vom Search Engine Journal, dass kein KI-Dienst erklärt habe, llms.txt zu nutzen, dass Serverlogs zeigten, dass die Dienste nicht einmal danach schauen, und dass ihn die Datei an das Keywords-Meta-Tag erinnere – das Paradebeispiel für Metadaten, die Suchmaschinen zu ignorieren gelernt haben.

Im Juli 2025 wurde Gary Illyes beim Search Central Deep Dive APAC deutlicher:

„Google doesn’t support LLMs.txt and isn’t planning to” — Gary Illyes (Google), berichtet von Search Engine Land, 24. Juli 2025

Demselben Bericht zufolge ergänzte Illyes, normales SEO genüge, um in AI Overviews aufzutauchen. Und die offizielle Dokumentation von Google Search Central zu KI-Funktionen (aktualisiert am 10. Dezember 2025) hält unmissverständlich fest, dass man keine neuen maschinenlesbaren Dateien, KI-Textdateien oder Auszeichnungen erstellen muss, um in diesen Funktionen zu erscheinen.

Mueller wies laut der Berichterstattung des Search Engine Journal außerdem auf einen strukturellen Konstruktionsfehler hin: Eine Website könnte in der llms.txt das eine zeigen und Nutzern sowie Suchmaschinen etwas anderes. Dieses Cloaking-Risiko zwingt jeden ernsthaften Bot, die echte Seite ohnehin zu prüfen – was die Datei überflüssig macht.

Lesen ChatGPT oder Claude die llms.txt?

Keines der beiden Unternehmen sagt das. Die Crawler-Dokumentation von OpenAI nennt robots.txt als einzigen Mechanismus und enthält keine Aussage, dass GPTBot oder ChatGPT eine llms.txt liest. Anthropic veröffentlicht die Datei für die eigene Entwicklerdokumentation, hat aber nie erklärt, dass Claude fremde llms.txt-Dateien auswertet – das ist eine fehlende Zusage, kein Dementi.

Das einzige positive Signal steckt in Serverlogs. Innerhalb der Minderheit von llms.txt-Abrufen, die Ahrefs (Mai 2026) KI-Werkzeugen zuordnete, stachen GPTBot und Claude-Code hervor. Das deutet auf Coding-Assistenten hin, die technische Dokumentation ziehen – nicht auf KI-Suchmaschinen, die gewöhnliche Websites entdecken.

Was verraten Serverlogs über llms.txt?

Nahezu vollständige Stille. In der Ahrefs-Studie über 137.210 Domains (Logdaten Mai 2026) erhielten 97 % der veröffentlichten llms.txt-Dateien keine einzige Anfrage. Ahrefs’ eigenes Fazit: „AI search bots barely fetch these files, and no AI system goes looking for one.”

Der Traffic, der ankam, war überwiegend Rauschen. 96 % der Anfragen stammten von Bots – SEO-Audit-Tools (21,7 %), nicht identifizierte Bots (14,9 %), allgemeine Crawler (13,1 %) und Technologie-Profiler wie BuiltWith (11,6 %). KI-Werkzeuge machten 19,5 % dieser Abrufe aus, angeführt von GPTBot und Claude-Code, doch nur etwa 1,1 % der Anfragen kamen von KI-Retrieval-Bots – dem theoretischen Publikum der Datei.

In der Kennzeichnung von UpgradePro ist damit jeder Traffic-Nutzen der llms.txt ANGENOMMEN, kein GEMESSENes Ergebnis. Niemand hat Logs veröffentlicht, die etwas anderes zeigen.

Sollten Sie eine llms.txt anlegen?

Legen Sie eine an, wenn es Sie nichts kostet; lassen Sie es, wenn es echte Arbeitszeit von Dingen abzieht, die tatsächlich gelesen werden. Die Belege stützen eine Entscheidung nach Aufwand, nicht nach Hype.

Situation	Urteil
Entwicklerdoku, API oder SaaS-Produkt	Bester Fall: Coding-Assistenten (GPTBot, Claude-Code) zeigen echte Abrufe in den Logs
Doku auf Mintlify gehostet	Seit November 2024 automatisch erledigt
WordPress-Website mit Yoast SEO	Kostenlose Funktion aktivieren; Aufwand nahe null, kein Traffic zu erwarten
Mittelstands-Imageseite oder lokale Dienstleistung	Nachrangig: keine Engine liest sie, und es gibt keine Doku zu indexieren

Wie auch immer Sie entscheiden: Finanzieren Sie das nicht aus Arbeit, für die es echte Belege gibt. Sauberes, crawlbares HTML, Antwort-zuerst-Inhalte und strukturierte Daten, die KI-Systeme auswerten haben einen stärkeren Anspruch auf Ihre Stunden als eine Datei, die in 97 % der Fälle niemand abruft.

Was sollten Sie diese Woche tun?

Eine 30-minütige, belegorientierte Routine für ein kleines Team:

1. Prüfen Sie Ihre Serverlogs auf Anfragen an /llms.txt in den letzten 90 Tagen. Messen Sie die Nachfrage, bevor Sie investieren – das ist der Unterschied zwischen GEMESSEN und ANGENOMMEN.
2. Unter WordPress: Schalten Sie die kostenlose llms.txt-Erzeugung von Yoast ein. Der Aufwand liegt nahe null, damit fällt die negative Beleglage nicht ins Gewicht.
3. Bei Mintlify-Doku: Sie liefern /llms.txt und /llms-full.txt bereits aus; prüfen Sie, ob sie korrekt dargestellt werden.
4. Wenn Sie sie von Hand schreiben: Halten Sie sich exakt an die Spezifikation – H1, Blockquote, H2-Linklisten, ein Abschnitt „Optional”. Zwanzig Minuten, einmalig.
5. Schichten Sie kein Budget um, weg von Crawlbarkeit, Inhaltsstruktur oder strukturierten Daten hin zur Pflege der llms.txt.
6. Prüfen Sie quartalsweise nach. Die Verbreitung wuchs binnen eines Jahres etwa auf das 5,4-Fache; sollte eine Engine je Unterstützung ankündigen, ändert sich die Rechnung – und Ihre Logs zeigen es zuerst.

Und wenn Sie wissen wollen, wo Ihre Marke in KI-Antworten heute tatsächlich steht – vorher und nachher gemessen, nicht angenommen –, genau diese Baseline liefert unser KI-Sichtbarkeits-Audit.