Egen forskning
GEO-eksperimenter
Vi tester hvordan nettsteder behandler AI-crawlere, på ferske utvalg og med metoden skrevet ned først. Her er det vi fant, og det vi ikke fant.
Målt 20. oktober 2026
Eksperimentene
Resultater publisert
Hvor mange nettsteder blokkerer AI-crawlere?
Vi leste robots.txt på 6 596 nettsteder og fant ut, bot for bot, hvem som får besøke forsiden. I tillegg: hvem har en ekte llms.txt-fil.
Se resultateneResultater publisert
JavaScripts blindsone
Noen AI-verktøy leser en side uten å kjøre JavaScript-en. Vi sammenlignet det de får med det en nettleser viser, på 1 804 forsider.
Se resultatenePlanlagt, ikke kjørt ennå
Hva kan AI-assistenter egentlig lese på en side?
En testside med hemmelige kodeord på ulike steder: vanlig tekst, JavaScript, strukturerte data. Så spør vi ChatGPT, Gemini, Claude og andre hvilke ord de finner. Det trengs først et eget testnettsted, så testen er ikke kjørt ennå.
Slik kjører vi hvert eksperiment
Slike studier er lette å gjøre feil. Dette er reglene vi holder oss til.
- Vi skriver ned planen før vi samler inn data.
- Vi trekker et ferskt tilfeldig utvalg fra en offentlig liste med et fast startpunkt, slik at andre kan trekke de samme nettstedene.
- Vi viser hvert nettsted vi ikke kunne måle, og hvorfor. Feil blir stående i tabellene.
- Hver prosent får sitt 95 %-intervall, per gruppe av nettsteder. Vi slår aldri gruppene sammen til ett tall.
- Hvert tall har en dato. Nettet endrer seg, så vi måler på nytt i stedet for å endre tall i det stille.
- Vi publiserer totaler og en CSV, aldri en liste med navngitte nettsteder.
- Vi forteller hva vi målte. Vi påstår ikke at noe gir deg bedre plassering eller flere sitater.
- Crawleren vår sier hvem den er, følger robots.txt og tar det med ro.
Mer forskning
Den andre forskningen vår bygger på GEO-poeng fra våre egne revisjoner. Alle forskningsrapporter (engelsk)
Sjekk ditt eget nettsted
Dette er gjennomsnitt. Ditt eget nettsted er enten med eller ikke. De gratis verktøyene våre sjekker det på sekunder.
Kilder til nettstedlistene
Populære nettsteder: Tranco-listen 467YX (Le Pochat mfl., NDSS 2019).
Nederlandsk- og tyskspråklige nettsteder: med innhold fra Curlie.org - den største menneskeredigerte nettkatalogen. Bidra ved å sende inn et nettsted eller bli redaktør. Curlie-data er lisensiert under CC BY 3.0.