LLMs.txt lookup
Zie of een website een llms.txt heeft en of het bestand de juiste opzet volgt.
Wat doet deze tool?
Een llms.txt is een tekstbestand in de hoofdmap van een website dat AI-systemen een korte, leesbare samenvatting van de site geeft, met de belangrijkste pagina’s. Het is een voorstel en geen verplichte standaard, maar het wordt steeds vaker gebruikt.
De opzet
Een titel (# Naam), een samenvatting met >, daarna kopjes (##) met lijsten van links in de vorm - [naam](url): uitleg. Een onderdeel "Optional" bevat links die overgeslagen mogen worden.
Wat we controleren
Of het bestand er is en als tekst wordt aangeboden, of het een titel, samenvatting en links heeft, en of de links volledige adressen zijn.
Geen garantie
Niet elk AI-systeem leest een llms.txt. Het is een hulpmiddel, geen manier om te sturen of je site wordt gebruikt.
Zo lees je het resultaat
We halen /llms.txt op en kijken of het een tekstbestand in Markdown is, met een titel en links. Krijgen we een webpagina terug in plaats van een bestand, dan stuurt de website onbekende adressen door naar een gewone pagina.
llms.txt is een voorstel, geen officiële standaard. Sommige AI-diensten lezen het, andere niet. Het vervangt robots.txt of een goede sitemap niet.
Veelgestelde vragen
Is een llms.txt hetzelfde als robots.txt?
Nee. Een robots.txt zegt wat een crawler wel of niet mag ophalen. Een llms.txt vertelt wat je site is en waar de belangrijkste informatie staat. Ze vullen elkaar aan.
Helpt het voor mijn positie in Google?
Er is geen aanwijzing dat een llms.txt invloed heeft op zoekresultaten van Google. Het is bedoeld voor AI-assistenten die een site willen begrijpen.
Waarom zegt de controle dat er een webpagina staat in plaats van een bestand?
Sommige websites tonen voor elk adres een pagina met status 200, ook als het bestand niet bestaat. Dat is geen llms.txt.