AI-crawlere
Meta-ExternalAgent
Kalles også: Meta-ExternalFetcher
Meta-ExternalAgent er Metas nettcrawler for formål som å trene grunnleggende AI-modeller eller forbedre produkter ved å indeksere innhold direkte.
Med enkle ord
User agenten ser slik ut: meta-externalagent/1.1.
Meta har også Meta-ExternalFetcher. Den henter enkeltlenker når en bruker ber om det, for eksempel så en AI kan utføre oppgaver, og Meta sier at den kan gå forbi robots.txt.
Eksempel
Et nettsted som ikke vil at Meta skal crawle innholdet for disse formålene, legger gruppen nedenfor til i robots.txt.
User-agent: meta-externalagent
Disallow: /Hvorfor det betyr noe for AI-søk
Én crawler dekker flere formål, så en blokkering påvirker både AI-trening og indeksering for Metas produkter.
Meta-ExternalFetcher jobber for bestemte brukere og følger kanskje ikke robots.txt.
Dette kan du gjøre
- Bestem deg om Meta-ExternalAgent separat fra Metas andre crawlere, som facebookexternalhit.
- Bruk robots.txt for Meta-ExternalAgent.
- Legg privat innhold bak en innlogging, fordi Meta-ExternalFetcher kan gå forbi robots.txt.
Prøv det: Gratis robots.txt-generator
Forveksles ofte med
- Meta-ExternalFetcher
- Meta-ExternalFetcher henter en lenke når en bruker ber om det. Meta-ExternalAgent crawler nettet.
- facebookexternalhit
- facebookexternalhit er en annen Meta-crawler. Meta sier at den kan gå forbi robots.txt ved sikkerhets- eller integritetssjekker.
Kjappe fakta
- Drives av
- Meta
- Navn i robots.txt
- meta-externalagent, meta-externalfetcher
Kilder
Fakta og kilder sist sjekket 19. oktober 2026.
Relaterte begreper
Hvordan gjør siden din det i AI-søk?
GEO-Score sjekker en side på 22 signaler, fra tilgang for AI-crawlere til strukturerte data, og viser hva du bør fikse først.
Analyser en side