Rastreadores de IA
Googlebot
Googlebot es el nombre genérico de los dos rastreadores de la Búsqueda de Google: Googlebot Smartphone y Googlebot Desktop.
En palabras sencillas
Los dos obedecen el mismo token de robots.txt, Googlebot, así que no puedes dirigirte solo a uno.
En la mayoría de webs, Google indexa sobre todo la versión móvil, así que la mayoría de peticiones vienen del rastreador para smartphone.
Ejemplo
La regla de abajo mantiene a Googlebot fuera de una carpeta de pago, mientras el resto de la web sigue siendo rastreable. Recuerda: un bloqueo en robots.txt frena el rastreo, no la indexación. Usa noindex para dejar una página fuera de los resultados.
User-agent: Googlebot
Disallow: /checkout/Por qué importa para la búsqueda con IA
Google dice que la IA forma parte de la Búsqueda. Por eso las reglas de robots.txt para Googlebot son el control de cómo se rastrea tu web para la Búsqueda, también para AI Overviews y AI Mode.
Bloquear Googlebot afecta a la Búsqueda de Google, incluido Discover y todas sus funciones, y también a Google Imágenes, Google Vídeos y Google Noticias.
Qué puedes hacer
- No bloquees Googlebot si quieres aparecer en las funciones de IA de Google; no hay un rastreador de IA de Google aparte que permitir.
- Usa nosnippet o max-snippet para limitar lo que muestra Google, también en AI Overviews.
- Comprueba el tráfico real de Googlebot antes de bloquear nada: Google avisa de que su user agent se suplanta a menudo.
Pruébalo: Generador de robots.txt gratuito
Se confunde a menudo con
- Google-Extended
- Google-Extended no es un rastreador y no afecta a la Búsqueda. Solo controla el entrenamiento y el grounding de Gemini.
Datos rápidos
- Operado por
- Nombre en robots.txt
- Googlebot
- Lista oficial de IP
- static/crawling/ipranges/common-crawlers.json
Fuentes
- Google Search Central: Googlebot
- Google Search Central: AI features and your website
- Google: Google's common crawlers
Datos y fuentes revisados por última vez el 19 de octubre de 2026.
Términos relacionados
¿Qué tal le va a tu página en la búsqueda con IA?
GEO-Score revisa una página con 22 señales, desde el acceso de los rastreadores de IA hasta los datos estructurados, y te muestra qué arreglar primero.
Analizar una página