Índice de rastreadores de IA

¿Qué es meta-externalagent?

meta-externalagent es el rastreador de Meta para entrenar IA. Rastrea para usos como entrenar modelos de IA o mejorar productos indexando el contenido directamente.

En resumen

Operador	Meta
Finalidad	Entrenamiento de IA
User agent	`meta-externalagent/1.1`
Respeta robots.txt	Sí, según el operador
Rangos de IP publicados	El operador no lo documenta
Cómo verificarlo	El operador no lo documenta
Documentación oficial	https://developers.facebook.com/documentation/sharing/webmasters/web-crawlers

¿Conviene bloquear meta-externalagent?

Recoge páginas para entrenar modelos, no para responder preguntas en tiempo real. Bloquearlo deja tu contenido futuro fuera de los datos de entrenamiento de ese operador, pero no te saca de las respuestas de búsqueda con IA, que alimentan otros rastreadores. Bloquéalo si no quieres que tu contenido entre en conjuntos de entrenamiento; permítelo si quieres que los modelos futuros conozcan tu marca.

Las citas de búsqueda de Meta AI usan otro rastreador, meta-webindexer. Meta puede guardar robots.txt en caché hasta 24 horas.

Cómo bloquear o permitir meta-externalagent en robots.txt

Bloquearlo en toda la web:

User-agent: meta-externalagent
Disallow: /

Permitirlo en toda la web:

User-agent: meta-externalagent
Allow: /

Las reglas se asignan por el token de la línea User-agent. Prueba el resultado con el probador de robots.txt antes de publicarlo.

Otros rastreadores de Meta

meta-externalfetcher: Visita a petición del usuario

Comprueba tu propia web

El comprobador de rastreadores de IA te dice qué rastreadores de IA deja pasar tu robots.txt, y el analizador de logs muestra con qué frecuencia te visita cada uno. Para el contexto, mira qué son los rastreadores de IA y el índice completo de rastreadores de IA.

FAQ

Preguntas sobre meta-externalagent

meta-externalagent es el rastreador de Meta para entrenar IA. Rastrea para usos como entrenar modelos de IA o mejorar productos indexando el contenido directamente.

Sí. Meta dice que meta-externalagent sigue las reglas de robots.txt, así que una regla Disallow para su token lo frena.

Añade «User-agent: meta-externalagent» seguido de «Disallow: /» a tu robots.txt. Las citas de búsqueda de Meta AI usan otro rastreador, meta-webindexer. Meta puede guardar robots.txt en caché hasta 24 horas.

Empieza hoy a medir tu marca en los buscadores con IA

Controla cómo citan tu marca los motores de IA, sigue tus posiciones y compárate con la competencia, todo en una sola plataforma.