llms.txt – vad det är och om det gör någon skillnad

Filen dyker upp i mängder av branschtexter, ofta i en uppräkning av saker man "bör ha på plats för AI-eran", och nästan alltid utan att någon säger vad den vilar på. Det är värt att reda ut, eftersom skillnaden mellan ett intressant förslag och en fungerande standard är hela skillnaden mellan tid väl använd och tid bortkastad.

Vad förslaget går ut på

Idén presenterades 2024 av Jeremy Howard och bygger på en verklig teknisk observation: en språkmodell som ska svara på en fråga har ett begränsat utrymme att arbeta med, och en modern webbsida består till största delen av navigation, skript, banners och layout snarare än av det som faktiskt står. Om sajten själv tillhandahåller en ren, kort sammanfattning i markdown, slipper modellen gräva fram innehållet ur röran.

Filen läggs på din-domän.se/llms.txt och innehåller vanligen en rubrik med sajtens namn, ett kort stycke om vad verksamheten är, och en punktlista med länkar till de viktigaste sidorna med en rads beskrivning vardera. Namnet och placeringen är en medveten blinkning till robots.txt.

Vad som faktiskt är belagt

Här blir det tunt, och det är hela poängen med den här sidan. Att ett förslag finns publicerat, att verktyg genererar filen och att många sajter lagt upp den säger ingenting om huruvida någon läser den. Såvitt vi kan se har ingen av de stora AI-leverantörerna dokumenterat att deras robotar hämtar eller använder llms.txt, och Google har offentligt varit skeptiska till formatet. Jämförelsen som brukar göras är med den gamla nyckelords-metataggen: en fil där sajtägaren får beskriva sig själv är svår att lita på just därför att den är självdeklarerad.

Ska du lägga upp den ändå?

Om du har en liten sajt och en kvart över: gärna. Den kostar ingenting, den kan inte gärna skada, och skulle formatet få fäste ligger du före. Betrakta det som ett lotteri med låg insats, inte som en åtgärd med förväntad effekt.

Om någon säljer den som en tjänst med ett pris värt att nämna: fråga vad den bygger på. Att ta betalt för en fil vars verkan ingen kan visa är inte olagligt, men det är inte heller det arbete som gör skillnad för din synlighet. Uppgifter som är korrekta och samstämmiga mellan din sajt, din Google-profil och bokningsplattformarna gör betydligt mer, och det arbetet är mindre roligt att sälja just därför att det är enkelt att förstå.

En sak att undvika: låt inte filen bli en plats där du beskriver verksamheten annorlunda än på sajten. En sammanfattning som säger något annat än sidorna den sammanfattar är motstridig information, och motstridiga uppgifter är det enda i den här texten som faktiskt är känt att ställa till problem.

Vanliga frågor

Är llms.txt samma sak som robots.txt?

Nej. robots.txt är ett etablerat format som säger vad robotar får hämta, och det respekteras av de stora aktörerna. llms.txt är ett förslag om att beskriva vad sajten innehåller, och det finns inget bekräftat stöd för det hos de stora plattformarna.

Kan llms.txt ersätta strukturerad data?

Nej. Strukturerad data märker upp innehållet på varje sida i ett format sökmotorerna dokumenterat att de använder. llms.txt är en fristående sammanfattning utan bekräftad läsare. De löser olika problem och det ena ersätter inte det andra.

Min byrå säger att llms.txt är nödvändigt. Har de fel?

"Nödvändigt" är för starkt, eftersom ingen har visat att filen läses av de stora tjänsterna. Fråga vad påståendet bygger på. Ett rimligt svar är att det är billigt och kan bli användbart; ett orimligt svar är att det krävs för att synas i ChatGPT.

Hur uppdaterar jag filen?

Manuellt, eller via ett tillägg om din plattform har ett. Det viktiga är att den inte blir inaktuell – en sammanfattning som beskriver sidor du tagit bort är sämre än ingen fil alls.