llms.txt – så gör vi vår webbplats AI-redo

Sök handlar inte längre bara om Google. I takt med att AI-verktyg som ChatGPT, Perplexity och Claude blir allt vanligare förändras hur vi upptäcker, jämför och väljer produkter och tjänster online.

Men AI-drivna system använder webben på ett annat sätt än klassiska sökmotorer. Där Google främst indexerar webbsidor för att kunna ranka dem i sökresultat, hämtar AI-modeller innehåll för två huvudsyften:

Live retrieval: Att läsa och citera innehåll i realtid när en användare ställer en fråga.
Träning: Att använda innehåll som underlag för framtida modellutveckling.

För att följa med i AI-utvecklingen har vi på Webbyrå Sigtuna implementerat llms.txt – en öppen fil som både hjälper AI-system att tolka vårt innehåll och tydliggör våra användningsvillkor för AI-crawlers. Ett första steg mot en mer transparent, kontrollerad och AI-anpassad webb.

Vad är llms.txt egentligen?

llms.txt är ett nytt, community-drivet format som förenklat kan beskrivas som ett slags “robots.txt för AI” – även om filerna har olika funktioner. Medan robots.txt styr vilka crawlers som får besöka webbplatsen, hjälper llms.txt AI-system att förstå:

vad webbplatsen handlar om
vilka delar av webbplatsen som är viktigast
hur innehållet bör tolkas eller sammanfattas.

I vår llms.txt-fil har vi dessutom lagt till en separat policy där vi beskriver hur vi vill att olika AI-aktörer ska få använda vårt innehåll för hämtning och träning.

Filen ligger öppet i webbplatsens rot – se till exempel: https://webbyrasigtuna.se/llms.txt.

llms.txt fungerar som en AI-anpassad, handplockad översikt över webbplatsens viktigaste sidor, tjänster och resurser. Den kan även innehålla korta beskrivningar eller sammanfattningar som hjälper LLM:er att förstå kontext, expertis och syfte, utan att behöva analysera hela webbplatsen från början.

Det innebär inte att AI slutar läsa det övriga innehållet, men llms.txt ger en tydlig startpunkt som underlättar tolkningen av helheten – ungefär som en introduktionssida särskilt riktad till AI.

Påverkar llms.txt synlighet eller ranking?

Nej, inte direkt. llms.txt påverkar varken ranking eller synlighet i Google eller AI-söktjänster.

Däremot kan llms.txt bidra till att ditt innehåll återges mer korrekt när det används av AI-modeller. Genom att ge en strukturerad startpunkt kan du hjälpa AI att förstå sammanhang och undvika feltolkningar.

Används llms.txt av alla AI-verktyg i dag?

Nej, llms.txt används ännu inte på samma sätt av alla AI-verktyg.

Stödet varierar mellan olika aktörer, och det finns ännu inget gemensamt sätt för tjänster som Perplexity, OpenAI/ChatGPT och Anthropic/Claude att läsa och använda filen. Det är inte heller alltid offentligt dokumenterat i vilken utsträckning deras webbcrawlers använder llms.txt.

Formatet är fortfarande under utveckling och ännu inte en universell standard. Genom att använda llms.txt ger vi ändå AI-system och andra verktyg en tydlig översikt över webbplatsen när de väljer att använda filen.

Varför vi på Webbyrå Sigtuna valde att implementera llms.txt

Vi tror att framtidens sök handlar lika mycket om AI som om traditionella sökmotorer, och att ha llms.txt-filen på plats innebär att vår webbplats redan idag är förberedd för både nuvarande och kommande plattformar.

Med llms.txt vill vi:

förmedla våra användningsvillkor direkt till AI-crawlers.
ge AI-system bättre kontext kring vårt innehåll.
ligga steget före när AI börjar spela en större roll i hur webbinnehåll används och presenteras.

Vår policy för AI-åtkomst

Som en del av vår llms.txt-implementering har vi inkluderat en Bot Access Policy. Där beskriver vi öppet vilka AI-aktörer och söktjänster vi tillåter att hämta vårt innehåll och, där det är relevant, använda det för modellträning.

Policyn uttrycker våra användningspreferenser. Den faktiska åtkomsten till webbplatsen styrs av robots.txt och webbplatsens säkerhetsinställningar.

Vår policy omfattar bland annat: