Google-Extended

Ele não tem user agent próprio. O Google rastreia com seus rastreadores normais; o token funciona só como configuração.

O Google diz que o Google-Extended não influencia se seu site aparece na Pesquisa Google e que não é um sinal de ranking.

Um site de notícias adiciona a regra abaixo. Os artigos continuam aparecendo na Pesquisa Google, mas o Google não pode usá-los para treinar futuros modelos Gemini nem para grounding nos apps do Gemini.

User-agent: Google-Extended
Disallow: /

O Google diz que as regras do robots.txt para o Googlebot são o controle dos recursos de IA da Pesquisa, como AI Overviews e AI Mode.

Então o Google-Extended não tira você dos AI Overviews. Para isso, o Google indica nosnippet, data-nosnippet, max-snippet ou noindex.

• Use o Google-Extended só se você quiser deixar seu conteúdo fora do treinamento e do grounding do Gemini.
• Use os controles de snippet, como nosnippet e max-snippet, para limitar o que a Pesquisa mostra, inclusive nos AI Overviews.
• Não bloqueie o Googlebot, a menos que você queira sair totalmente da Pesquisa Google.

Experimente: Gerador de robots.txt gratuito

Googlebot

O Googlebot rastreia para a Pesquisa Google. O Google-Extended é só uma configuração de permissão para o Gemini.

nosnippet

O nosnippet limita AI Overviews e AI Mode. O Google-Extended não.