Das Wichtigste auf einen Blick
- Eine llms.txt ist eine Markdown-Datei im Stammverzeichnis einer Website, die KI-Systemen eine kurze Übersicht der wichtigsten Inhalte geben soll. Vorgeschlagen hat sie Jeremy Howard im September 2024.
- Google Search nutzt die llms.txt laut Googles Leitfaden zur Optimierung für generative KI (Stand Juli 2026) nicht, auch nicht für AI Overviews und AI Mode.
- Für die ChatGPT-Suche entscheidet laut OpenAI, ob der Crawler OAI-SearchBot die Website abrufen darf. Eine llms.txt erwähnt OpenAI in seiner Crawler-Dokumentation nicht.
- In einer Ahrefs-Auswertung von 137.210 Domains bekamen 97 % der llms.txt-Dateien im Mai 2026 keinen einzigen Abruf. KI-Suchbots machten 1,1 % der Abrufe aus.
- In 190 Tagen Serverprotokollen von tokato-media.com fragte kein einziger KI- oder Such-Crawler nach einer llms.txt. Dieselben Crawler riefen die Website im gleichen Zeitraum 13.897-mal ab.
- Direkten Schaden richtet eine llms.txt in der Regel nicht an. Die eigentlichen Kosten sind Pflegeaufwand und mögliche Widersprüche zur Website.
- Mehr bewirken Crawler-Zugang, Indexierung und Inhalte, die konkrete Fragen vollständig beantworten.
Was eine llms.txt ist
Eine llms.txt ist eine Textdatei im Markdown-Format, die KI-Systemen eine kurze, kuratierte Übersicht über eine Website geben soll. Der Gedanke dahinter: Ein Sprachmodell soll die wichtigsten Inhalte finden, ohne jede HTML-Seite einzeln auswerten zu müssen. Vorgeschlagen hat das Format Jeremy Howard am 3. September 2024 auf llmstxt.org.
Die Datei liegt im Stammverzeichnis der Domain, also unter /llms.txt, oder in einem Unterverzeichnis für dessen Inhalte. Pflicht ist laut Vorschlag nur eine Überschrift mit dem Namen der Website. Üblich sind dazu eine Kurzbeschreibung und Abschnitte mit Linklisten auf die wichtigsten Seiten.
Die llms.txt ist ein Vorschlag, kein verabschiedeter Standard. Die oft erwähnte llms-full.txt mit dem gesamten Textinhalt einer Website beschreibt llmstxt.org nicht.
Nutzt Google die llms.txt?
Nein. Google schreibt in seinem Leitfaden zur Optimierung für generative KI-Funktionen (Stand 10. Juli 2026), dass Websites keine neuen KI-Dateien oder speziellen Auszeichnungen brauchen und Google Search sie nicht nutzt. Das gilt auch für AI Overviews und den AI Mode, die laut Google auf den normalen Ranking- und Qualitätssystemen der Suche beruhen.
Für Verwirrung sorgt, dass Chromes Prüfwerkzeug Lighthouse eine eigene Prüfung zur llms.txt hat. Sie gehört laut Chrome-Dokumentation zur Kategorie „Agentic Browsing“ und betrifft KI-Agenten im Browser, nicht das Ranking in der Google-Suche. Fehlt die Datei, wertet Lighthouse die Prüfung als nicht anwendbar, nicht als Fehler.
Bringt eine llms.txt Sichtbarkeit in ChatGPT?
Belege dafür gibt es nicht. Ob eine Website in der ChatGPT-Suche erscheinen kann, hängt laut OpenAI-Dokumentation vom Crawler OAI-SearchBot ab. Websites, die ihn in der robots.txt sperren, erscheinen nicht in den Antworten der ChatGPT-Suche, höchstens als einfacher Link. Nach einer Änderung der robots.txt dauert es rund 24 Stunden, bis OpenAI sie berücksichtigt.
Eine llms.txt erwähnt OpenAI in dieser Dokumentation nicht. Wer in ChatGPT sichtbar werden möchte, sollte deshalb zuerst prüfen, ob OAI-SearchBot die Website überhaupt abrufen darf. Dazu gehören die robots.txt und Firewalls oder CDN-Regeln, die Bots pauschal blockieren. Mehr dazu im Ratgeber KI-Crawler in der robots.txt.
Eigene Messung: Wer fragt die llms.txt ab?
Tokato Media hat die Serverprotokolle der eigenen Website vom 15. April bis 21. Oktober 2026 ausgewertet, also 190 Tage. In dieser Zeit gab es 92 Abrufe von /llms.txt oder /llms-full.txt. Kein einziger davon kam von einem KI- oder Such-Crawler.
13.897
Anfragen von KI-Crawlern an die Website
- ClaudeBot 7.235
- GPTBot 4.995
- OAI-SearchBot 1.547
- PerplexityBot 120
0
davon Abrufe der llms.txt
| Abrufer | Anteil | Abrufe |
|---|---|---|
| Browser ohne Bot-Kennung | 41 | |
| SEO- und Prüfwerkzeuge u. a. SEOJuice 28, Semrush Site Audit 4, Lighthouse 3 | 35 | |
| Analyse- und Technik-Scanner u. a. Dataprovider, Piperic, BuiltWith, llmstxtscan | 16 | |
| KI- und Such-Crawler GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot, Googlebot u. a. | 0 |
Im selben Zeitraum riefen GPTBot, OAI-SearchBot, ClaudeBot und PerplexityBot die Website zusammen 13.897-mal ab. An Aktivität fehlt es also nicht. Eine Einschränkung gehört dazu: Auf der Website gab es nie eine llms.txt. Gemessen ist, ob die Crawler danach suchen, nicht, ob sie eine vorhandene Datei nutzen würden.
Was die Ahrefs-Studie zeigt
Die größte veröffentlichte Auswertung stammt von Ahrefs. Für den Mai 2026 wurden die Daten von 137.210 Domains ausgewertet. 28 % davon hatten eine gültige llms.txt, rund 38.000 Domains. 97 % dieser Dateien wurden im ganzen Monat kein einziges Mal abgerufen.
Bei den Abrufen, die es gab, lagen SEO-Prüfwerkzeuge mit 21,7 % vorn. KI-Suchbots, also die Crawler hinter den Suchfunktionen von ChatGPT oder Perplexity, kamen auf 1,1 %, Trainings-Crawler wie GPTBot auf 5,3 %. Ahrefs weist selbst darauf hin, dass die eigenen Kunden technisch eher versiert sind und die tatsächliche Verbreitung im Netz niedriger liegen dürfte.
Das Ergebnis deckt sich mit der eigenen Messung: Wer eine llms.txt abruft, ist meist ein SEO-Tool, kaum eine KI-Suche.
llms.txt und robots.txt im Vergleich
Beide Dateien liegen im Stammverzeichnis, haben aber verschiedene Aufgaben. Die robots.txt regelt, welche Crawler welche Bereiche abrufen dürfen. Die llms.txt soll beschreiben, welche Inhalte wichtig sind.
| Merkmal | llms.txt | robots.txt |
|---|---|---|
| Aufgabe | Übersicht der wichtigsten Inhalte für KI-Systeme | Regeln, welche Crawler was abrufen dürfen |
| Status | Vorschlag seit September 2024 | Standard, RFC 9309 |
| Format | Markdown mit Überschrift, Kurzbeschreibung und Linklisten | Textanweisungen wie User-agent und Disallow |
| Abrufe durch KI-Crawler (eigene Messung, 190 Tage) | 0 | u. a. ClaudeBot 3.051, OAI-SearchBot 903, Googlebot 738 |
| Wirkung in der Google-Suche | Keine, laut Google | Steuert das Crawling |
Die eigene robots.txt selbst prüfen
Ob Such- und KI-Crawler eine Website abrufen dürfen, steht in der robots.txt, nicht in einer llms.txt. Sie liegt unter https://ihre-domain.de/robots.txt. Den Inhalt dort kopieren und hier einfügen: Der Prüfer zeigt für die wichtigsten Crawler von Google, OpenAI, Anthropic und Perplexity, ob der Zugriff erlaubt ist und welche Regel greift.
Die Prüfung läuft nur in Ihrem Browser. Der eingefügte Text wird nicht übertragen.
| Crawler | Zugriff | Grund |
|---|
Der Prüfer wertet nur die robots.txt aus. Firewalls oder CDN-Regeln, die Bots zusätzlich blockieren, sind hier nicht sichtbar.
Kann eine llms.txt schaden?
Direkten Schaden für Rankings richtet eine llms.txt nach allem, was bekannt ist, nicht an. Google nutzt sie nicht, und Lighthouse wertet eine fehlende Datei nicht als Fehler. Nur wenn der Server beim Abruf einen Fehler meldet, schlägt die Lighthouse-Prüfung an.
Die Kosten liegen woanders. Eine llms.txt muss gepflegt werden, sonst verweist sie auf alte Seiten oder beschreibt Leistungen, die es nicht mehr gibt, und widerspricht damit der Website. Ahrefs nennt außerdem ein Risiko durch Prompt-Injection: Inhalte, die KI-Agenten unkritisch aus solchen Dateien übernehmen, lassen sich missbrauchen.
Die Frage ist also weniger, ob die Datei schadet, sondern ob sich der Aufwand lohnt, solange kaum ein KI-System sie liest.
Wenn man trotzdem eine anlegt: Aufbau und Ablage
Für Anbieter von Software, Schnittstellen oder umfangreicher Dokumentation kann eine llms.txt sinnvoll sein, weil Programmierwerkzeuge mit KI sie eher nutzen. Ahrefs sieht hier den wahrscheinlichsten Nutzen. So entsteht eine Datei nach dem Vorschlag von llmstxt.org:
Beispiel einer llms.txt. Eine Zeile antippen, um zu sehen, wofür sie steht.
Überschrift erster Ebene
Der Name der Website oder des Projekts. Laut Vorschlag auf llmstxt.org ist das der einzige Pflichtteil der Datei.
Kurzbeschreibung als Zitatblock
Eine knappe Zusammenfassung mit den Informationen, die zum Verständnis der restlichen Datei nötig sind.
Weitere Angaben
Optionale Absätze mit zusätzlichem Kontext. Überschriften sind in diesem Teil nicht vorgesehen.
Abschnitt mit Linkliste
Überschriften zweiter Ebene gliedern die Links, etwa nach Ratgebern, Produkten oder Dokumentation.
Link mit optionaler Notiz
Jeder Eintrag ist ein Markdown-Link [Name](URL), danach optional ein Doppelpunkt und eine kurze Notiz. Der Vorschlag empfiehlt, auf Markdown-Fassungen der Seiten zu verlinken, erkennbar an der Endung .md.
Abschnitt „Optional“
Links in diesem Abschnitt kann ein KI-System überspringen, wenn es mit weniger Kontext auskommen muss.
- Eine Textdatei mit dem Namen llms.txt anlegen, die später unter https://ihre-domain.de/llms.txt erreichbar ist.
- In die erste Zeile eine Überschrift erster Ebene mit dem Namen der Website oder des Projekts schreiben.
- Darunter eine Kurzbeschreibung als Zitatblock einfügen.
- Abschnitte mit Überschriften zweiter Ebene anlegen, die jeweils eine Liste von Markdown-Links auf wichtige Seiten enthalten.
- Weniger wichtige Links in einen Abschnitt „Optional“ verschieben, den KI-Systeme überspringen können.
- Die Datei bei jeder größeren Änderung der Website mitpflegen.
- In den Serverprotokollen prüfen, ob überhaupt jemand sie abruft.
Was für die Sichtbarkeit in KI-Antworten stattdessen wirkt
Für Google AI Overviews, AI Mode und die ChatGPT-Suche entscheiden dieselben Grundlagen wie in der klassischen Suche, ergänzt um den Zugang der KI-Crawler:
- Googlebot und OAI-SearchBot dürfen die Website laut robots.txt, Firewall und CDN abrufen.
- Die wichtigen Seiten sind indexiert und dürfen mit Snippet angezeigt werden.
- Jede Seite beantwortet ihre Kernfrage gleich zu Beginn und deckt die Teilfragen ab, die KI-Systeme dazu stellen.
- Fakten, Zahlen und eigene Erfahrungen stehen im Text, nicht nur in Bildern.
- Das Unternehmen wird in Quellen erwähnt, die KI-Systeme in der Branche zitieren.
Welche Teilfragen das sind, erklärt der Ratgeber Query Fan-Out. Wie sich die Wirkung messen lässt, zeigt KI-Sichtbarkeit messen. Die technische Prüfung ist Teil von Technisches SEO.
Häufige Fragen
Nutzt Google die llms.txt für AI Overviews oder den AI Mode?
Nein. Laut Googles Leitfaden zur Optimierung für generative KI-Funktionen (Stand 10. Juli 2026) nutzt Google Search KI-Dateien wie die llms.txt nicht. AI Overviews und AI Mode beruhen auf den normalen Ranking- und Qualitätssystemen der Suche.
Bringt eine llms.txt mehr Sichtbarkeit in ChatGPT?
Belege dafür gibt es nicht. Für die ChatGPT-Suche ist laut OpenAI entscheidend, dass der Crawler OAI-SearchBot die Website abrufen darf. In den Serverprotokollen von tokato-media.com fragte über 190 Tage kein OpenAI-Crawler nach einer llms.txt.
Kann eine llms.txt meiner Website schaden?
Direkte Nachteile für Rankings sind nicht bekannt. Die Kosten liegen im Pflegeaufwand und in möglichen Widersprüchen, wenn die Datei veraltet. Ahrefs weist außerdem auf ein Risiko durch Prompt-Injection hin, wenn KI-Agenten Inhalte daraus unkritisch übernehmen.
Wo muss die llms.txt liegen?
Im Stammverzeichnis der Domain, also unter /llms.txt. Der Vorschlag auf llmstxt.org erlaubt auch Dateien in Unterverzeichnissen, die dann für die Inhalte unterhalb dieses Pfads gelten.
Was ist der Unterschied zwischen llms.txt und robots.txt?
Die robots.txt ist ein Standard (RFC 9309) und regelt, welche Crawler welche Bereiche abrufen dürfen. Die llms.txt ist ein Vorschlag aus dem Jahr 2024 und soll KI-Systemen eine Übersicht der wichtigsten Inhalte geben. Die robots.txt wird von allen großen Crawlern gelesen, die llms.txt kaum.
Tom verantwortet bei Tokato Media Strategie, Content und technisches SEO und arbeitet seit 2017 in der Suchmaschinenoptimierung. Gemeinsam mit Katharina Frenzel betreut er Unternehmen vom regionalen Mittelständler bis zum Onlineshop mit internationaler Zielgruppe.
Mehr über Tom