Technicalllms.txt

llms.txt-Generatoren im Vergleich

Ein systematischer Vergleich von llms.txt-Generatoren für KI-Sichtbarkeit: Funktionen, Preise und Kriterien für Web-Tools, APIs und WordPress-Plugins.

, AI Researcher7 min read
In this article8
  1. Wie kann ich eine llms.txt-Datei generieren?
  2. Auswahlkriterien
  3. Anbieter im Überblick
  4. Preise und Tarife
  5. Datenbasis und Methodik
  6. Grenzen und offene Punkte
  7. Häufig gestellte Fragen
  8. Quellen
Ein Vergleichsdiagramm, das verschiedene llms.txt-Generatoren und ihre Funktionsweise bei der Erstellung von Markdown-Dateien für KI-Crawler zeigt. · KI-generiert
Ein Vergleichsdiagramm, das verschiedene llms.txt-Generatoren und ihre Funktionsweise bei der Erstellung von Markdown-Dateien für KI-Crawler zeigt.

Wie kann ich eine llms.txt-Datei generieren?

Eine llms.txt-Datei entsteht auf drei Wegen: über ein Web-Tool, das die Website crawlt, über eine CMS-Erweiterung, die die Datei aus der eigenen Datenbank erzeugt, oder über Dokumentationsplattformen, die sie automatisch ausliefern. Grundlage ist ein Formatvorschlag, den Jeremy Howard im September 2024 auf llmstxt.org veröffentlicht hat: eine Markdown-Datei im Pfad /llms.txt, deren einziges Pflichtelement eine H1-Überschrift mit dem Projektnamen ist, gefolgt von einer Blockquote-Kurzzusammenfassung und H2-Abschnitten mit Markdown-Links zu weiterführenden Seiten[1].

Von der robots.txt unterscheidet sich die Datei grundsätzlich: Die robots.txt legt fest, welchen automatisierten Tools der Zugriff auf eine Website erlaubt ist; die llms.txt ist dagegen ein kuratierter Inhaltswegweiser, der laut Spezifikation vor allem zur Inferenzzeit gelesen wird, wenn ein Agent eine Nutzerfrage beantwortet, und keine Zugriffskontrolle darstellt[1].

Drei Wege zur Generierung

  1. Dokumentationsplattformen erzeugen die Datei automatisch: Mintlify hostet für jedes Dokumentationsprojekt eine stets aktuelle llms.txt und eine llms-full.txt, ohne manuelle Pflege[2].
  2. Externe Web-Crawler erzeugen sie bei Bedarf: Der Keploy LLMs File Generator nimmt eine Domain entgegen, liest Sitemap oder Startseiten-Links und liefert ohne Anmeldung eine herunterladbare Datei[3].
  3. Von Hand lässt sich die Datei ebenfalls pflegen, weil das Format einfaches Markdown ist; die Spezifikation empfiehlt, sie zu testen, indem ein Agent Fragen ausschließlich auf Basis der Datei beantwortet[1].

Welcher Weg passt, hängt vom System ab: Für Dokumentationsplattformen ist die automatische Auslieferung der Normalfall, für Marketing- und Unternehmenswebsites auf einem CMS wie WordPress bleibt die Wahl zwischen Web-Tool und Plugin.

Auswahlkriterien

Der Vergleich ordnet die Generatoren nach fünf Kriterien ein; die Anker für 0 und 10 stehen vor der Einordnung fest.

KriteriumPrüfpunktAnker 0Anker 10
DatenerhebungWoher stammen Titel, Beschreibungen und Links?Nur Sitemap- oder Link-Abruf ohne InhaltsprüfungCrawl mit ausgewerteten Seiteninhalten oder direkter Datenbankzugriff
FormatumfangWird neben llms.txt auch llms-full.txt erzeugt?NeinBeide Dateien, zusätzlich weitere Formate
Struktureller StandardBesteht der Entwurf das Lighthouse-Audit „Agentic Browsing“?Prüfung nicht integriertAudit-Nachweis direkt im Tool
TransparenzSind übernommene und ausgeschlossene URLs nachvollziehbar?Keine EinsichtURL-für-URL-Auswahl vor dem Download
AktualisierungWie entsteht eine neue Fassung nach Inhaltsänderungen?Nur manueller NeudurchlaufErneuerung per Klick, Zeitplan oder automatisch

Den strukturellen Maßstab liefert das Lighthouse-Audit „Agentic Browsing“: Google Lighthouse und PageSpeed Insights prüfen seit Version 13.3 die Datei /llms.txt nach drei Kriterien, einer H1-Überschrift, mindestens einem echten Markdown-Link und mehr als 50 Zeichen Inhalt; eine fehlende Datei wird als „nicht zutreffend“ eingestuft, nur eine vorhandene, aber fehlerhafte Datei fällt durch[4]. Auch die llmstxt.org-Spezifikation führt das Audit als Teil der Agentic-Browsing-Prüfungen von Lighthouse an[1].

Anbieter im Überblick

Verglichen werden vier Anbieter in alphabetischer Reihenfolge: der Firecrawl llmstxt-generator, der Keploy LLMs File Generator, das WordPress-Plugin LLMs.txt and LLMs-Full.txt Generator von Visibility.so sowie der deutsche llms-txt-generator.de der track by track GmbH mit Sitz in Berlin. Alle Angaben stammen von den jeweiligen Anbieterseiten, abgerufen am 30. September 2026.

AnbieterTypDatenbasisllms-full.txtKosten
Firecrawl llmstxt-generatorAPI-Endpunkt (Alpha)Crawl der URL und ihrer verlinkten SeitenJa, optionalAPI-Credits, 1 Credit pro verarbeiteter URL
Keploy LLMs File GeneratorWeb-ToolSitemap oder Startseiten-Links, Verarbeitung im BrowserJa, insgesamt vier FormateKostenfrei, keine Anmeldung
LLMs.txt and LLMs-Full.txt Generator (WordPress-Plugin von Visibility.so)CMS-PluginLokale WordPress-Datenbank, wählbare Post-TypesJaOpen Source, kostenfrei
llms-txt-generator.de (track by track GmbH)Web-ToolDeterministischer Crawl von bis zu 15 Seiten derselben DomainJaKostenfrei, keine Registrierung

Der Firecrawl-Endpunkt ist als Alpha gekennzeichnet; er bleibt aktiv, wird aber nach dem 30. Juni 2025 nicht mehr gepflegt, und Firecrawl verweist stattdessen auf seine Haupt-Endpunkte[5]. Das WordPress-Plugin ist im offiziellen Verzeichnis gelistet und wird dort mit Versionshinweisen fortlaufend aktualisiert[6].

Preise und Tarife

Drei der vier Lösungen kosten nichts: Keploy und llms-txt-generator.de sind ohne Anmeldung nutzbar, das WordPress-Plugin ist Open Source[3][4][6]. Nur Firecrawl rechnet pro verarbeiteter URL ab, weshalb bei größeren Websites die Tarifwahl und der Parameter maxUrls die Kosten bestimmen.

AnbieterKostenAbrechnungAnmerkung
Keploy0ohne Anmeldung, unbegrenzte NutzungÜbermittelte Domains werden für Analysezwecke protokolliert
llms-txt-generator.de0ohne RegistrierungÜber 15 Seiten hinaus: Terminanfrage
WordPress-Plugin0Open SourceKeine Tarife
Firecrawl APIFree: 1.000 Credits/Monat für 0 US-Dollar; Hobby: 16 US-Dollar/Monat bei Jahreszahlung (5.000 Credits); Standard: 83 US-Dollar/Monat bei Jahreszahlung (100.000 Credits)pro Monat bei Jahreszahlung, in US-Dollar1 Credit pro verarbeiteter URL

Für den llmstxt-Endpunkt zählt Firecrawl pro verarbeiteter URL; der Parameter maxUrls (1 bis 100, Standard 10) begrenzt den Verbrauch pro Auftrag[5]. Die genannten Firecrawl-Preise gelten bei Jahreszahlung, sind in US-Dollar ausgewiesen und seit dem 4. September 2026 gültig[7].

Datenbasis und Methodik

Die Generatoren unterscheiden sich weniger im Ausgabeformat als in der Datenbasis, also in der Frage, aus welcher Quelle sie Titel, Beschreibungen und Links beziehen. Das bestimmt, wie aktuell die Datei ist und welche Inhalte sie abbildet.

AnbieterDatenquelleVerarbeitungAusgabe
llms-txt-generator.deStartseite, robots.txt, Sitemaps und priorisierte interne Seiten, maximal 15 URLs derselben DomainDeterministisch ohne Aufruf eines externen Sprachmodells; Inhalte aus den abgerufenen Seiten derselben Domain; Seiten-JavaScript wird nicht ausgeführtEditierbarer Entwurf, übernommene und ausgeschlossene URLs vor dem Download einsehbar
KeploySitemap.xml an mehreren Standardorten inklusive wp-sitemap.xml, sonst Links der StartseiteTitel und Meta-Description pro SeiteVier Formate: Standard, Full, Categorized, Minimal
WordPress-PluginLokale WordPress-Datenbank: wählbare Post-Types, Auszüge, MediathekLokal bei der Site; Wildcard-Muster für Ein- und Ausschluss; beachtet noindex-Einstellungen von Yoast SEO, Rank Math, SEOPress und All in One SEOllms.txt und llms-full.txt im Root-Verzeichnis, manuell oder per Cron neu erzeugt
FirecrawlCrawl der angegebenen URL und ihrer verlinkten SeitenServerseitig als asynchroner Job; nur öffentlich zugängliche Seiten, in der Alpha bis zu 5.000 URLsllms.txt und llms-full.txt
Mintlify (Dokumentationsplattform)Eigene Dokumentationsstruktur laut docs.jsonAutomatisch gehostet und stets aktuell; ab 100.000 Zeichen wird der Index in Dateien unter /_llms/ aufgeteilt, ohne Seiten wegzulassenllms.txt, llms-full.txt sowie Markdown-Versionen der Seiten

Tools, die nur Sitemaps und Metadaten lesen, liefern schnell Ergebnisse, erfassen aber keine Seiteninhalte; Crawler wie Firecrawl ziehen vollständige Texte, kosten dafür Credits und Bearbeitungszeit. CMS-Plugins umgehen den Crawl ganz, weil sie auf die lokale Datenbank zugreifen, und erneuern die Datei daher auf Knopfdruck oder nach Zeitplan.

Grenzen und offene Punkte

Eine technisch fehlerfreie llms.txt garantiert keine Nennungen in KI-Antworten und keine Rankingeffekte. Die Datei ist ein Vorschlag von llmstxt.org, kein Standard; die Spezifikation sieht sie als kuratierte Übersicht für Agenten vor, nicht als Optimierungsmaßnahme mit belegter Wirkung[1]. Die Google-Dokumentation zu KI-Funktionen in der Suche hält zudem fest, dass es für Übersichten mit KI und den KI-Modus keine zusätzlichen Anforderungen und keine speziellen Optimierungen gibt; die grundlegenden SEO-Best-Practices bleiben ausschlaggebend[8]. Ob die eigene Seite in KI-Antworten überhaupt auftaucht, zeigt unabhängig davon der kostenlose Check von scaile.

  • Kein Betreiber von ChatGPT, Perplexity, Gemini oder Microsoft Copilot dokumentiert, dass seine Systeme llms.txt-Dateien für die Quellenauswahl auswerten; eine Wirkung auf Zitierungen ist daher nicht vom Betreiber bestätigt. Ob eine Marke in KI-Antworten genannt wird, misst ein laufendes Tracking wie das Prompt-Tracking von scaile, nicht eine Datei im Webroot.
  • Das Lighthouse-Audit prüft nur die Struktur der Datei, nicht ihre inhaltliche Qualität und nicht, ob KI-Systeme sie tatsächlich abrufen[4].
  • Ob eine Datei korrekt ausgeliefert wird, entscheidet der Webserver; llms-txt-generator.de bietet dafür einen eigenen Validator[4]. Einen Überblick über solche technischen Grundlagen gibt der kostenlose Website-Check von scaile.

Weiterlesen auf Optinest: llms.txt: Was die Datei ist, wie man sie erstellt und wer sie liest.

Stand dieses Vergleichs ist der 30. September 2026; alle Anbieterangaben wurden an diesem Tag abgerufen. Der nächste Prüftermin ist der 31. März 2027, weil sich Tarife, Alpha-Status und Plugin-Versionen kurzfristig ändern können.

Häufig gestellte Fragen

Was ist ein llms.txt-Generator?

Ein llms.txt-Generator ist ein Web-Tool, eine API oder ein Plugin, das Website-Inhalte in eine strukturierte Markdown-Datei umwandelt. Die Ausgabe folgt dem Vorschlag von llmstxt.org und dient Sprachmodellen als kuratierter inhaltlicher Wegweiser.

Welche Dateiformate geben die Generatoren aus?

Neben der kompakten llms.txt-Datei unterstützen viele Tools, wie etwa das Plugin von Visibility.so, auch die llms-full.txt. Diese erweiterte Variante hält die kompletten Seiteninhalte für KI-Modelle bereit, die über ein ausreichend großes Kontextfenster verfügen.

Testet Google Lighthouse die generierte llms.txt-Datei?

Ja, aber nur strukturell. Seit Version 13.3 prüft das Audit „Agentic Browsing“ eine vorhandene Datei nach Kriterien wie H1-Überschrift, echtem Markdown-Link und Mindestlänge; eine fehlende Datei gilt als „nicht zutreffend“ und fällt nicht durch. Generatoren wie der llms-txt-generator.de richten ihre Ausgabe an diesen Vorgaben aus.

Kann ein Generator auch nicht öffentliche Seiten erfassen?

Externe Web-Crawler nicht: Firecrawl verarbeitet in der Alpha nur öffentlich zugängliche Seiten, Login-geschützte oder bezahlte Inhalte werden nicht unterstützt. Interne oder geschützte Seiten erfasst ein CMS-Plugin mit Datenbankzugriff, das die Inhalte direkt aus der eigenen Installation ausliest.

Werten ChatGPT oder Perplexity die Datei nachweislich aus?

Dokumentiert ist das nicht: Weder OpenAI noch Perplexity beschreiben in ihrer Dokumentation, dass ihre Systeme die Datei für die Quellenauswahl heranziehen, und auch die Spezifikation von llmstxt.org nennt keinen Betreiber, der das tut. Eine Wirkung auf Zitierungen ist damit nicht vom Betreiber bestätigt.

Quellen

  1. llmstxt.org
  2. mintlify.com
  3. keploy.io
  4. llms-txt-generator.de
  5. docs.firecrawl.dev
  6. wordpress.org
  7. firecrawl.dev
  8. developers.google.com

Rankings and scores on Optinest cannot be bought — no commercial relationship changes how a provider is assessed. How we score

Related reading

All Technical →