Índice de rastreadores de IA

¿Qué es Google-Extended?

Google-Extended es un token de control de robots.txt de Google, no un rastreador. Controla si el contenido que rastrea Google se usa para entrenar futuros modelos Gemini y para fundamentar Gemini Apps y Vertex AI.

En resumen

OperadorGoogle
FinalidadToken de control en robots.txt
User agent El operador no lo documenta
Respeta robots.txtSí, según el operador
Rangos de IP publicados El operador no lo documenta
Cómo verificarlo El operador no lo documenta
Documentación oficial https://developers.google.com/crawling/docs/crawlers-fetchers/google-common-crawlers

¿Conviene bloquear Google-Extended?

No tiene rastreador propio: es un interruptor en robots.txt que controla cómo se usan los datos que recoge el rastreador principal del operador. Bloquearlo no frena ese rastreador ni te saca de sus resultados de búsqueda.

No tiene rastreador propio: Google lo usa solo como control en robots.txt. Google dice que bloquearlo no afecta a tu presencia en la Búsqueda de Google ni es un factor de posicionamiento.

Cómo bloquear o permitir Google-Extended en robots.txt

Bloquearlo en toda la web:

User-agent: Google-Extended
Disallow: /

Permitirlo en toda la web:

User-agent: Google-Extended
Allow: /

Las reglas se asignan por el token de la línea User-agent. Prueba el resultado con el probador de robots.txt antes de publicarlo.

Otros rastreadores de Google

Comprueba tu propia web

El comprobador de rastreadores de IA te dice qué rastreadores de IA deja pasar tu robots.txt, y el analizador de logs muestra con qué frecuencia te visita cada uno. Para el contexto, mira qué son los rastreadores de IA y el índice completo de rastreadores de IA.

FAQ

Preguntas sobre Google-Extended

Google-Extended es un token de control de robots.txt de Google, no un rastreador. Controla si el contenido que rastrea Google se usa para entrenar futuros modelos Gemini y para fundamentar Gemini Apps y Vertex AI.
Sí. Google dice que Google-Extended sigue las reglas de robots.txt, así que una regla Disallow para su token lo frena.
Añade «User-agent: Google-Extended» seguido de «Disallow: /» a tu robots.txt. No tiene rastreador propio: Google lo usa solo como control en robots.txt. Google dice que bloquearlo no afecta a tu presencia en la Búsqueda de Google ni es un factor de posicionamiento.

Empieza hoy a medir tu marca en los buscadores con IA

Controla cómo citan tu marca los motores de IA, sigue tus posiciones y compárate con la competencia, todo en una sola plataforma.