Google-Extended

No tiene user agent propio. Google rastrea con sus rastreadores habituales; el token solo funciona como ajuste.

Google dice que Google-Extended no influye en si tu web aparece en la Búsqueda de Google y que no es una señal de ranking.

Un medio de noticias añade la regla de abajo. Sus artículos siguen saliendo en la Búsqueda de Google, pero Google no puede usarlos para entrenar futuros modelos Gemini ni para grounding en las apps de Gemini.

User-agent: Google-Extended
Disallow: /

Google dice que las reglas de robots.txt para Googlebot son el control de las funciones de IA de la Búsqueda, como AI Overviews y AI Mode.

Así que Google-Extended no te saca de los AI Overviews. Para eso, Google remite a nosnippet, data-nosnippet, max-snippet o noindex.

• Usa Google-Extended solo si quieres dejar tu contenido fuera del entrenamiento y el grounding de Gemini.
• Usa los controles de fragmentos, como nosnippet y max-snippet, para limitar lo que muestra la Búsqueda, también en AI Overviews.
• No bloquees Googlebot salvo que quieras salir por completo de la Búsqueda de Google.

Pruébalo: Generador de robots.txt gratuito

Googlebot

Googlebot rastrea para la Búsqueda de Google. Google-Extended es solo un ajuste de permisos para Gemini.

nosnippet

nosnippet limita AI Overviews y AI Mode. Google-Extended no.