Kort svar
Bara om innehållet finns i sidans HTML från början. AI-botarna från bland andra OpenAI, Anthropic och Perplexity kör inte JavaScript, så text som laddas in efteråt syns inte för dem. Öppna Visa sidkälla i webbläsaren och sök efter en mening från sidan: hittar du den kan botarna läsa den. Kolla också att din robots.txt inte stänger ute dem.
Därför spelar det roll hur sajten är byggd
En hemsida kan byggas på två sätt. Antingen skickar servern färdig HTML med all text i, eller så skickar den ett nästan tomt skal som webbläsaren fyller med JavaScript. För dig som besökare ser det likadant ut. För en bot som inte kör JavaScript är skillnaden total: i det andra fallet finns ingen text att läsa.
Google kör JavaScript, även om det sker i efterhand. Det gör inte de flesta AI-botar. När Vercel, som driver en stor del av webbens hosting, gick igenom hur AI-botarna beter sig i december 2024 var det bara Googles och Apples botar som körde JavaScript. Botarna bakom ChatGPT, Claude och Perplexity läste bara det som fanns i HTML-koden.
Testet: fem minuter i webbläsaren
Öppna en viktig sida
Välj en sida du vill bli hittad för, till exempel en tjänstesida, och kopiera en mening ur texten.
Visa sidkällan
Högerklicka och välj Visa sidkälla, eller tryck Ctrl+U (Cmd+Alt+U på Mac). Det är så sidan ser ut innan JavaScript har körts.
Sök efter meningen
Tryck Ctrl+F (Cmd+F) och klistra in meningen. Hittar du den kan AI-botarna läsa texten. Hittar du den inte laddas innehållet med JavaScript.
Kolla robots.txt
Gå till dindomän.se/robots.txt. Står det Disallow: / under GPTBot, OAI-SearchBot, ClaudeBot eller PerplexityBot stänger du ute dem.
Kolla brandväggen
Använder du Cloudflare eller ett liknande skydd, titta efter inställningar som blockerar AI-botar. De kan vara påslagna utan att du vet om det.
Vilka botar ska du släppa in?
Det finns två sorters AI-botar: de som samlar in text för att träna AI-modeller och de som hämtar sidor när någon ställer en fråga. Vill du synas i svaren är det de senare som räknas. Du kan välja att stänga ute träningsbotarna och ändå släppa in sökbotarna.
- OAI-SearchBot hämtar sidor till ChatGPT:s sökfunktion. Blockerar du den kan du inte synas i ChatGPT:s svar.
- GPTBot samlar in text för att träna OpenAI:s modeller. Den påverkar inte sökningen.
- ChatGPT-User besöker en sida när en användare ber ChatGPT läsa den.
- Google-Extended styr om Google får använda din text för att träna Gemini. Enligt Google påverkar den inte om din sajt syns i Google Sök.
Om din sajt inte klarar testet
Är det robots.txt eller brandväggen som stoppar är det en snabb ändring. Laddas innehållet med JavaScript behöver sajten byggas så att sidorna renderas på servern, med server-side rendering eller som statiska sidor. Alla sajter vi bygger fungerar så från början, och det är en av grunderna i vårt arbete med AI-sök.
Vanliga frågor
Ser Google innehåll som laddas med JavaScript?
Oftast, men inte alltid och inte direkt. Google renderar JavaScript i ett senare steg, och då kan det dröja innan innehållet blir indexerat. Text i HTML-koden är säkrare även för Google.
Är det farligt att släppa in AI-botar?
Sökbotarna hämtar sidor för att kunna hänvisa till dem i svaren, ungefär som Google. Vill du inte att din text används för att träna AI-modeller kan du blockera träningsbotarna, som GPTBot och Google-Extended, och ändå synas i svaren.
Behöver jag en llms.txt-fil?
Det skadar inte, men det finns inget som tyder på att AI-tjänsterna använder den i någon större utsträckning. Lägg hellre tiden på att innehållet syns i HTML-koden och svarar tydligt på kundernas frågor.
KundcaseHagve Måleri ABNy hemsida för Hagve Måleri i Ljungsbro: Next.js, lokala sidor för Linköping, Motala och Mjölby, referensprojekt och SEO som behöll alla gamla placeringar.Läs caset