llms.txt im Überblick

Sat, 04 Jul 2026 09:50:00 +0200

Wenn alles ordentlich abgelegt und wohldokumentiert wäre, müsste es doch mit dem Teufel zugehen, wenn ChatGPT meine Website nicht allen anderen vorzöge!
(Foto: jankolar)

Seit bald zwei Jahren hört man immer wieder von llms.txt, einem, so wird sich erzählt, mächtigem Instrument, um KI-Agents, die eine Website besuchen, den eigenen Willen aufzuzwingen.

Dass eine schnöde Textdatei das bewerkstelligen soll, kam mir doch zu fantastisch vor. Und so habe ich ein paar Abende recherchiert, wie denn die Lage zu diesem “Standard” nun ist und ob es sich lohnt, Zeit damit zu verbringen.

Leider ist das Netz voller Quacksalberei #

Vorweg etwas Unmut: Es wäre einfacher, sich ein Urteil über llms.txt zu bilden, würde das Netz bei KI-Themen nicht fortlaufend mit undurchdachtem, ai-generiertem Unfug geflutet, mit dem Scharlatane ihre SEO-Dienstleistungen bewerben und damit die vorderen Plätze der Suchergebnisse einnehmen, wenn man nach “llms.txt” sucht.

Jeder kann es schaffen, eine AI-Content-Pipeline zu bauen, deren Ergebnisse ihn persönlich zufriedenstellen (Ranking). Das heißt jedoch nicht, dass dieser Müll-Content dem Leser hilft (Information). Und immer mehr Themen fallen dieser egoistischen Publikationswut zum Opfer: Es wird täglich schwieriger die Spreu vom Weizen zu trennen und man müsste mal ernstlich etwas dagegen..!

Aber ich merke, dass ich abschweife, ich wollte ja etwas über diese kleine Textdatei erzählen und nicht zum Sturm auf die Bastille aufrufen.

Was will llms.txt überhaupt sein? #

Die Idee stammt von Jeremy Howard (Answer.AI) aus dem September 2024¹ und hat im Kern einen eher bescheidenen Anspruch: eine Markdown-Datei im Wurzelverzeichnis der Domain (also z.B.:https://example.de/llms.txt), die einem Sprachmodell einen kuratierten, token-sparsamen Überblick über die wichtigsten Inhalte einer Seite geben soll. Eine Hauptüberschrift mit dem Projektnamen, ein Blockquote mit ein bis drei Sätzen Zusammenfassung, darunter Links mit kurzen Beschreibungen. Viel mehr ist es nicht und findet sich so auch auf der Website des Standards unter llmstxt.org.

Gerne wird diese Datei mit der bekannteren robots.txt verglichen, dieser Vergleich führt allerdings in die Irre. robots.txt ist ein etablierter Webstandard, der regelt, welche URLs ein Crawler nicht indexieren soll. llms.txt ist dagegen eine Vorschlagsdatei, die KI-Systemen zur Informationsentnahme angeboten wird: Sie verbietet nichts, sie kuratiert. Wo robots.txt auf URL-Ebene Zugriff gewährt oder verweigert, möchte llms.txt eine redaktionelle Schicht darüber sein: nicht wohin nicht, sondern wo findest Du was. Deshalb konkurrieren die beiden auch nicht, sondern dürfen nebeneinander existieren.

Stand Juli 2026 ist llms.txt nach wie vor ein community-getriebener Vorschlag. Die Spezifikation wird über das Projekt llmstxt.org gepflegt; ein formaler IETF-RFC oder ein vergleichbares Standardisierungsverfahren ist bislang nicht zustande gekommen. Dass man überhaupt so viel darüber liest, hat also weniger mit ernsten Ingenieuren und Ingenieurinnen zu tun, sondern eher mit Hype und FOMO.

Kann ich damit ChatGPT davon überzeugen, über mich zu reden? #

Kurz: nein.

Hier wird die Angelegenheit unterhaltsam, weil das die Frage ist, bei der viele Ratgeber-Artikel unhaltbare Versprechen machen. Nochmal ganz deutlich: llms.txt ist kein SEO-Werkzeug.

Denn die Crawler, die bei den großen Anbietern für das Einsaugen von Inhalten zuständig sind, ignorieren sie aktuell durchgängig. Wenn man sich ein wenig im Netz umsieht findet man hinreichend Studien, Berichte und Feldbeobachtungen, die klar zeigen: llms.txt ist völlig irrelevant, um auf irgendeinen Index zu kommen.

Hier etwa: ahrefs.com, ein SEO-Anbieter, hat 137.000 Domains ausgewertet², die seine Analytics-Lösung verwenden: 97% der llms.txt-Dateien wurde innerhalb eines Monats gar nicht aufgerufen. Teile der Aufrufe gingen zwar auf das Konto von GPTBot und Claude-Code, aber kein einziges Mal haben die Bots der großen Anbieter vergeblich versucht, eine fehlende llms.txt aufzurufen, was bedeutet, dass die wenigen Aufrufe auf konkrete Nutzeraufforderungen hin geschahen und nicht durch zufälliges Scrapen der Seiten.

Auch konnte kein relevanter SEO-Effekt gemessen werden. Laut Search Engine Land sahen 8 von 9 Seiten nach der Implementierung keine messbare Veränderung im Traffic³, was u.a. darauf zurückgeführt wurde, dass KI-Crawler das Format durch die Bank ignorieren würden - eine Aussage, die John Mueller von Google zuvor schon auf Reddit getroffen hatte ⁴.

Wer es anschaulicher mag, kann zu wtfreadsllmstxt.com schauen. Hier veröffentlicht Sam Steiner seit dem 26. März 2026 die Server-Logs zu der dort feilgebotenen llms.txt. Bislang wurde sie weniger als 100 Mal abgerufen und kein einziger der Aufrufe sieht nach einem Crawler von Google, openAI, Anthropic & Co. aus.

Google wertet das Vorhandensein der Datei zwar inzwischen im Rahmen seiner Lighthouse-Tools als offene oder erledigte Maßnahme aus⁵, hat aber auch deutlich mitgeteilt, dass die Datei auf die Verarbeitung von Inhalten keinen Einfluss haben werde: Im Juli 2025 bestätigte Gary Illyes ⁶, dass Google llms.txt nicht unterstützt und auch nicht plant, das in sein Ranking einzubeziehen; John Mueller äußerte sich ebenfalls mehrfach⁷ gewohnt-charmant⁸ negativ⁹ dazu¹⁰.

Was soll man stattdessen tun? Am Ende verkünden offizielle Stellen leider immer die gleichen alten Ratschläge, die keiner hören möchte: Schreibe interessanten, wahren & originellen Content, den Menschen und Maschinen gut lesen können, räum Dein Zimmer auf, iss Deinen Teller leer, benutze Sonnencreme, usw…

Also ist llms.txt nutzlos? #

Es gibt durchaus Anwendungsfälle für llms.txt, nur eben nicht die, von denen ständig auf den Seiten von SEO-Beratern zu lesen ist: llms.txt ist kein Hebel für Sichtbarkeit, sondern ein Kanal für einzelne Agenten, die eine konkrete Aufgabe erledigen wollen. Es ist eine maschinenlesbaren Index, an dem KI-Agenten sich besser und schneller orientieren können als an einzelnen gecrawlten Seiten. Das Parsing fällt weg, es kann direkt mit dem Textinhalt gearbeitet werden. Das setzt aber auch voraus, dass der Agent in der Textdatei nicht ausgetrickst wird - und weil Google & Co. auf Jahrzehnte von billigen SEO-Scams zurückblicken können, ignorieren sie mit gutem Grund diese Textbereitstellung. Index-Crawler wollen das sehen, was menschliche Benutzer sehen, nicht die Scheinwelt einer möglicherweise für Suchmaschinenranking manipulierten Textdatei.

Es geht also um Kommunikation statt um Marketing. Und wer seine Inhalte geballt dem agentischen Scraper übermitteln möchte, greift zusätzlich zur llms-full.txt. Die Idee dahinter: Statt dem Agent ein Verzeichnis interessanter Links anzupreisen, werfen wir einfach den kompletten Seiteninhalt in Gestalt einer gigantischen Textdatei über den Zaun, das spart allen Beteiligten zusätzlich Zeit und Aufwand.

Dort, wo Agenten tatsächlich mit Website-Informationen arbeiten, werden die Dateien schon längst genutzt:¹¹ Coding-Agenten wie Cursor, Windsurf, Claude Code oder GitHub Copilot suchen routinemäßig nach /llms.txt und /llms-full.txt, wenn man sie auf eine Dokumentationsseite richtet. Der typische Ablauf: Der Agent identifiziert, welche Bibliothek ein Feature besitzt, holt deren llms.txt und lädt dann nur die relevanten verlinkten Seiten, bevor er Code schreibt.

Für API- und Devtool-Produkte ist sie also kein Nice-to-have mehr: Wird die Datei gut kuratiert, findet der Agent mit wenig Aufwand die aktuellen und passenden Informationen für seine Aufgabe. Das kann entscheidend sein, wenn ein Coding-Agent funktionierenden Integrationscode generieren soll statt einen nicht-existierenden Endpunkt herbei zu halluzinieren. Entsprechend bieten Stripe¹², Mistral¹³, Cloudflare¹⁴, Anthropic¹⁵ und viele andere moderne API-Produkte eine llms.txt auf ihren Seiten an.

Aber nochmals: Ein Google-Ranking wird davon nicht beeinflusst und die Wahrscheinlichkeit in einer ChatGPT-Antwort als Quelle zitiert zu werden steigt dadurch ebenfalls nicht.

Lohnt sich der Aufwand dann für mich? #

Das hängt schlicht davon ab, was Du auf Deiner Website veröffentlichst. Nachdem llms.txt bislang keinen Einfluss auf Platzierung in Suchergebnissen oder Chatbot-Antworten zeigt, ist sie als SEO-Maßnahme ziemlich nutzlos, aber als Developer-Experience-Maßnahme durchaus sinnvoll:

Betreibst Du eine technische Doku oder ein Produkt, mit dem Leute agentisch coden, oder hast Du ein umfassendes Datenangebot, in dem Agenten sich schnell zurechtfinden sollen, lohnt es sich.
Betreibst Du hingegen einen Markenauftritt und hoffst auf mehr Sichtbarkeit in Chatbot-Antworten oder Suchergebnissen, solltest Du nicht zu viel Zeit und Liebe investieren.

Es schadet vermutlich nicht die Datei zu haben, auch wenn das nicht alle so sehen¹⁶. Ich habe für dieses Blog eine llms.txt angelegt. Aber die Abrufzahlen zeigen auch bei mir klar, dass sich Indizierungsbots von Suchmaschinen oder LLM-Anbietern nicht sonderlich dafür interessieren. Zeit investierst Du daher besser in den Aufbau der Website, korrekte HTML-Semantik (damit klar ist ob etwas eine Überschrift sein möchte oder doch nur Deko ist) oder in gezieltes Server-Side Rendering (damit ein Crawler auch ohne JavaScript alle Inhalte lesen kann¹⁷). Strukturierte Daten (JSON-LD) können auch helfen. Den größten Effekt haben aber weiterhin gute, strukturierte Inhalte und Verlinkungen aus renommierten Quellen¹⁸.

Der größte SEO-Nutzen der llms.txt scheint aktuell darin zu liegen, als SEO-Artikel in den Suchergebnissen von Menschen zu erscheinen, die sich fragen, ob sie dieses Feature unbedingt für ihre Sichtbarkeit in Suchergebnissen brauchen.

Und die Antwort auf ihre Frage lautet vorerst weiterhin “Nein!”. Es gibt keine Abkürzungen wenn man mit Milliarden anderen Sendern konkurriert. Sobald man das einmal verinnerlicht hat, reduzieren sich SEO-Hacks schnell auf gängige Hygienemaßnahmen.