llms.txt Checker
Prüfe, ob deine llms.txt existiert, dem Format folgt und für KI-Crawler erreichbar ist.
| Teil | Inhalt | Links |
|---|
Was ist llms.txt?
llms.txt ist eine einfache Markdown-Datei, die im Stammverzeichnis einer Website liegt und KI-Modellen eine kurze Karte der Website gibt. Sie nennt die Website, sagt in einer Zeile, was sie ist, und verlinkt auf die Seiten, die sie am besten erklären.
Die Idee geht auf ein einfaches Problem zurück. Ein Sprachmodell kann nur eine begrenzte Menge auf einmal lesen, und eine normale Webseite besteht größtenteils aus Navigation, Skripten und Layout. Die llms.txt gibt dem Modell eine saubere Liste der Seiten, auf die es ankommt, in einem Format, das es leicht liest.
Was in der Datei steht
Vier Dinge, in dieser Reihenfolge: der Name der Website, eine kurze Zusammenfassung, Hintergrund, den ein Leser vorab braucht, und Gruppen von Links. Jeder Link kann eine Notiz tragen, die sagt, worum es auf der Seite geht. Das ist das ganze Format. Es enthält keinen Code und keine Einstellungen, nur Text, den auch ein Mensch lesen kann.
Woher die Idee kommt
Das Format ist auf llmstxt.org als offener Vorschlag veröffentlicht. Kein Standardisierungsgremium steht dahinter, und niemand muss es unterstützen. Deshalb zählt die Frage, wer die Datei liest, mehr als das Format selbst.
Wer sie heute nutzt
Vor allem Dokumentationen. Softwarefirmen veröffentlichen eine llms.txt, damit Coding-Tools und Agenten die richtige Seite der Doku finden, ohne die ganze Website zu crawlen. Menschen fügen die Datei auch in einen Chat ein, um einem Modell den Kontext auf einmal zu geben. Ob die großen Assistenten sie von sich aus lesen, ist eine andere Frage. Um sie geht es weiter unten auf dieser Seite.
Was dieser llms.txt Checker prüft
Ob die Datei existiert. Sie muss auf deinem Host unter /llms.txt aufgehen und als Text zurückkommen. Eine Weiterleitung auf die Startseite oder eine Fehlerseite zählt nicht.
Ob das Format gültig ist. Ein Titel, eine Zusammenfassung, Abschnitte und Links, die so geschrieben sind, wie das Format es erwartet. Jedes Problem wird mit Zeilennummer aufgelistet. Das ist der Teil, der die llms.txt validiert.
Ob KI-Crawler sie erreichen. Der Checker liest deine robots.txt und sagt dir, ob ein Such- oder KI-Crawler von /llms.txt fernbleiben soll. Eine Datei, die niemand abrufen darf, bewirkt nichts.
Ob es eine llms-full.txt gibt. Sie ist optional, und das Ergebnis sagt dir, ob du eine hast.
Du bekommst außerdem eine Gliederung der Datei: den Titel, die Zusammenfassung und jeden Abschnitt mit der Zahl seiner Links. Sobald die Datei abgerufen ist, läuft die Prüfung in deinem Browser. Eine Datei, die du einfügst oder bearbeitest, verlässt die Seite nie.
Das llms.txt-Format, mit Beispiel
Die Datei ist gewöhnliches Markdown mit einer festen Reihenfolge. Pflicht ist nur der Titel.
# Acme Analytics
> Acme Analytics ist ein Webanalyse-Tool für Onlineshops. Es erfasst Besuche, Bestellungen und Umsatz ohne Cookies.
Der Preis gilt pro Website. Alle Tarife enthalten die API.
## Dokumentation
- [Erste Schritte](https://acme.example/docs/start): Skript einbauen und die ersten Daten sehen
- [API-Referenz](https://acme.example/docs/api): jeder Endpunkt mit Beispielen
## Produkt
- [Preise](https://acme.example/pricing): die Tarife und was jeder enthält
## Optional
- [Changelog](https://acme.example/changelog): VersionsverlaufDer Titel
Die erste Zeile ist ein einzelnes #, gefolgt vom Namen der Website oder des Produkts. Es darf nur einen geben.
Die Zusammenfassung
Eine Zeile, die mit > beginnt, direkt unter dem Titel. Sie sagt in ein oder zwei Sätzen, was die Website ist. Ein Modell, das sonst nichts liest, sollte trotzdem wissen, was du machst.
Freier Text
Beliebige Absätze oder einfache Listen nach der Zusammenfassung. Nutze sie für Fakten, die ein Modell braucht, bevor es einem Link folgt. Überschriften gehören hier nicht hin.
Abschnitte mit Links
Jede ##-Überschrift beginnt einen Abschnitt, und ein Abschnitt ist eine Liste von Links. Ein Link pro Zeile, geschrieben als - [Title](https://full-url): short note. Die Notiz ist freiwillig, aber es lohnt sich, sie zu schreiben. Sie sagt dem Modell, was es findet, bevor es Aufwand in den Abruf der Seite steckt.
Der Abschnitt Optional
Ein Abschnitt mit dem Namen Optional hat eine besondere Bedeutung. Ein Tool, dem der Platz knapp wird, darf ihn überspringen. Dorthin gehören die Seiten, die nett, aber nicht nötig sind.
llms.txt vs. llms-full.txt
Beide Dateien decken denselben Bedarf, nur in unterschiedlicher Größe.
llms.txt ist der Index. Sie ist kurz, und ein Modell, das mehr will, muss den Links folgen. llms-full.txt ist der Inhalt selbst: der vollständige Text deiner wichtigsten Seiten, zusammengefügt zu einer einzigen Markdown-Datei, damit ein Tool alles mit einer Anfrage laden kann.
Die lange Datei ist als Konvention rund um das Format entstanden, vor allem auf Dokumentationsseiten, wo es nützlich ist, das ganze Handbuch auf einmal zu lesen. Eine Marketing-Website mit einer Handvoll Seiten braucht sie selten.
Wenn du beide veröffentlichst, halte sie auf demselben Stand. Eine lange Datei, die das Produkt vom letzten Jahr beschreibt, ist schlechter als gar keine. Der Checker sagt dir, ob /llms-full.txt auf deinem Host existiert, und wertet es als normal, wenn sie fehlt.
Funktioniert llms.txt wirklich?
Die ehrliche Antwort hat zwei Teile.
Kein großer KI-Assistent hat bestätigt, dass er die llms.txt liest, wenn er eine Frage beantwortet. Wenn du die Datei anlegst und erwartest, dass ChatGPT oder Gemini dich deswegen zitieren, gibt es dafür keinen Beleg.
Genutzt wird die Datei an anderer Stelle. Coding-Tools lesen sie, um die Dokumentation einer Bibliothek zu lernen. Agenten öffnen sie, wenn jemand sie auf eine Website verweist. Menschen fügen sie in einen Chat ein, um einem Modell den Kontext auf einmal zu geben. Für ein Produkt mit Dokumentation ist das heute echter Nutzen.
Sieh sie also als kleine, günstige Ergänzung. Sie ist in einer Stunde geschrieben, und sie zu pflegen kostet nichts. Sie ersetzt nicht die Arbeit, die darüber entscheidet, ob Assistenten dich nennen: es wert zu sein, zitiert zu werden, und auf den Websites erwähnt zu werden, denen sie schon vertrauen.
llms.txt vs. robots.txt vs. sitemap.xml
Die drei Dateien liegen nebeneinander im Stammverzeichnis einer Website und haben unterschiedliche Aufgaben.
| Datei | Was sie tut | Wer sie liest | Kann sie den Zugriff sperren? |
|---|---|---|---|
robots.txt | Sagt Crawlern, welche URLs sie abrufen dürfen | Such- und KI-Crawler | Ja, bei Crawlern, die sich daran halten |
sitemap.xml | Listet jede URL auf, die gefunden werden soll | Suchmaschinen | Nein |
llms.txt | Zeigt KI-Modellen die wenigen Seiten, die die Website erklären | Tools und Agenten, die sie lesen wollen | Nein |
Der häufige Fehler ist die Erwartung, dass die llms.txt irgendetwas steuert. Sie kann keinen Crawler aussperren und keinen hereinlassen. Wenn die robots.txt einen Crawler von deinen Seiten aussperrt, ändert es nichts, diese Seiten in der llms.txt aufzulisten. Was deine Datei jedem Crawler sagt, prüfst du mit dem Robots.txt Tester.
So kannst du eine llms.txt erstellen
- Wähl die Seiten aus. Nimm die, die erklären, was du machst: die Produktseite, die Preise, die wichtigste Doku und die Seite, die die Frage beantwortet, die du am häufigsten hörst. Lass alles andere weg.
- Schreib den Titel und die Zusammenfassung. Der Name in der ersten Zeile, dann unter
>ein oder zwei Sätze, die auch ein Fremder versteht. - Gruppiere die Links. Gib jeder Gruppe eine
##-Überschrift und liste die Seiten mit vollständiger URL und je einer kurzen Notiz auf. - Speichere sie als
llms.txtim Stammverzeichnis. Sie muss unteryoursite.com/llms.txtals reiner Text aufgehen. - Prüfe sie. Füge den Entwurf vor der Veröffentlichung in den Checker ein und prüfe dann die Live-Adresse, sobald die Datei online ist.
Schreib sie von Hand, wenn du kannst. Eine Datei, die aus der Sitemap generiert wird, listet alles auf, und eine Liste von allem ist das Gegenteil von dem, wofür das Format gedacht ist.
Best Practices für die llms.txt
Schreib eine Zusammenfassung, die erklärt, keinen Slogan. „Der schnellste Weg zu mehr Wachstum“ sagt einem Modell nichts. „Ein Buchungstool für Zahnarztpraxen“ schon.
Halte die Liste kurz. Nimm die Seiten, die du jemandem schicken würdest, der noch nie von dir gehört hat. Wenn du dich zwischen zwei Seiten nicht entscheiden kannst, kommt die schwächere unter Optional.
Beschreibe jeden Link. Anhand der Notiz nach dem Doppelpunkt entscheidet ein Modell, ob es sich lohnt, die Seite zu öffnen.
Nutze vollständige Adressen. Jeder Link beginnt mit https:// und zeigt auf die endgültige URL, nicht auf eine Weiterleitung.
Verlinke Seiten, die sich als Text gut lesen. Ein Modell kann die Seite nutzen, die ihren Inhalt ohne Skripte und ohne Login zeigt.
Aktualisiere sie, wenn sich die Website ändert. Tote Links und alte Preise in dieser Datei schaden mehr als eine fehlende Datei.
Lass sie in der robots.txt offen. Die Datei nützt nur Crawlern, die sie abrufen dürfen.
Häufige Fehler in der llms.txt
Die Datei liegt nicht im Stammverzeichnis. Unter /docs/llms.txt oder /static/llms.txt suchen Tools nicht.
Die Adresse liefert die Startseite. Viele Websites beantworten jede unbekannte URL mit einer Seite statt mit einem Fehler. Es sieht aus, als gäbe es die Datei, und es gibt sie nicht.
Kein Titel oder gleich zwei. Die Datei beginnt mit einer einzigen #-Zeile. Alles darunter nutzt ##.
Relative Links. /pricing sagt einem Tool nichts, das die Datei von woanders bekommen hat. Nutze die vollständige Adresse.
Jede Seite der Website. Eine lange Liste verfehlt den Zweck. Der Wert liegt in dem, was du weglässt.
Die robots.txt blockiert die Datei. Ein breites Disallow kann /llms.txt erfassen, ohne dass es jemand so wollte.
Links zu Seiten, die ein Modell nicht lesen kann. Wenn die Seite einen Login braucht oder ihren Inhalt mit Skripten aufbaut, führt der Link zu nichts Brauchbarem.
Häufige Fragen
Was ist llms.txt?
llms.txt ist eine einfache Markdown-Datei im Stammverzeichnis einer Website, die KI-Modellen eine kurze Karte der Website gibt. Sie nennt die Website, sagt in einer Zeile, was sie ist, und verlinkt auf die Seiten, die sich zu lesen lohnen. Sie ist ein vorgeschlagenes Format, kein offizieller Webstandard.
Wo muss die llms.txt liegen?
Im Stammverzeichnis des Hosts, sodass sie unter yoursite.com/llms.txt aufgeht. Eine Datei in einem Unterordner finden die Tools nicht, die nach ihr suchen. Jede Subdomain braucht ihre eigene.
Wie kann ich meine llms.txt prüfen?
Gib deine Website oben in den Checker ein. Er ruft die Datei ab und sagt dir, ob es sie gibt, ob das Format gültig ist und ob deine robots.txt KI-Crawler von ihr fernhält. Um einen Entwurf zu prüfen, füge ihn stattdessen ein.
Nutzen ChatGPT, Claude und Gemini die llms.txt?
Kein großer Assistent hat bestätigt, dass er die llms.txt liest, wenn er eine Frage beantwortet. Genutzt wird die Datei heute von Coding-Tools, von Agenten, die jemand auf sie verweist, und von Menschen, die sie in einen Chat einfügen. Sieh sie als günstige Ergänzung, nicht als Ranking-Hebel.
Ist llms.txt dasselbe wie robots.txt?
Nein. Die robots.txt sagt Crawlern, wohin sie dürfen. Die llms.txt listet die Seiten auf, die KI-Modelle lesen sollen. Sie erlaubt und blockiert nichts. Eine Seite, die du sperren willst, braucht deshalb weiterhin eine Regel in der robots.txt.
Was ist llms-full.txt?
Eine Begleitdatei, die den vollständigen Text deiner wichtigsten Seiten in einem einzigen Markdown-Dokument enthält. Die llms.txt ist der kurze Index mit Links, die llms-full.txt ist der ganze Inhalt. Sie ist optional.
Hilft llms.txt bei SEO?
Nicht bei Google. Die Rankings in der Suche nutzen sie nicht. Wirken kann sie nur bei Tools und Agenten, die sie lesen wollen, und die Datei ersetzt nichts von dem, was du schon für die Suche tust.
Wie lang sollte eine llms.txt sein?
Kurz. Sie ist ein Index, also liste die Seiten auf, die dein Produkt am besten erklären, und lass den Rest weg. Wenn ein Abschnitt nett, aber nicht nötig ist, setz ihn unter eine Überschrift namens Optional, die Tools überspringen dürfen.
Brauche ich einen llms.txt Generator?
Nein. Die Datei ist kurz genug, um sie von Hand zu schreiben, und eine von Hand ausgewählte Liste schlägt eine generierte. Die meisten Generatoren kopieren die Sitemap, und die listet jede Seite auf. Wenn du einen nutzt, kürze das Ergebnis auf die Seiten, die zählen, und lass es durch den Checker laufen.
Wie kann ich eine llms.txt für WordPress erstellen?
Mehrere SEO-Plugins können die Datei aus deinen Einstellungen erzeugen. Ohne Plugin lädst du eine Datei namens llms.txt in das Stammverzeichnis der Website hoch, neben die robots.txt. Lass danach den Checker laufen, um zu bestätigen, dass sie unter /llms.txt aufgeht.
Eine saubere llms.txt zeigt einem Modell, wo es nachsehen soll. Ob die Assistenten deine Marke nennen, wenn jemand fragt, ist eine andere Frage, und der AI Visibility Check beantwortet sie.