Índice de rastreadores de IA

¿Qué es meta-externalfetcher?

meta-externalfetcher es el agente de Meta que visita páginas cuando lo pide un usuario. Descarga enlaces concretos a petición de un usuario y da soporte a la IA agéntica que navega webs por los usuarios.

En resumen

Operador	Meta
Finalidad	Visita a petición del usuario
User agent	`meta-externalfetcher/1.1`
Respeta robots.txt	No siempre: el operador dice que algunas visitas pueden ignorarlo
Rangos de IP publicados	El operador no lo documenta
Cómo verificarlo	El operador no lo documenta
Documentación oficial	https://developers.facebook.com/documentation/sharing/webmasters/web-crawlers

¿Conviene bloquear meta-externalfetcher?

Solo visita una página cuando un usuario pregunta al asistente algo que la necesita. Bloquearlo impide que el asistente lea tu página en esos momentos, lo que te cuesta citas; y como cada petición la inicia una persona, robots.txt puede no frenarlo.

Meta dice que puede saltarse robots.txt porque la descarga la pide un usuario. Es distinto de facebookexternalhit, que genera las vistas previas de enlaces.

Cómo bloquear o permitir meta-externalfetcher en robots.txt

Bloquearlo en toda la web:

User-agent: meta-externalfetcher
Disallow: /

Permitirlo en toda la web:

User-agent: meta-externalfetcher
Allow: /

Las reglas se asignan por el token de la línea User-agent. Prueba el resultado con el probador de robots.txt antes de publicarlo.

Prueba meta-externalfetcher en tu robots.txt

Cómo dejar pasar a meta-externalfetcher por el cortafuegos o la CDN

robots.txt solo le dice a meta-externalfetcher qué puede pedir. Si un cortafuegos, una CDN o una regla antibots bloquea la petición antes, nunca llega a leer el fichero, así que permitirlo en robots.txt no basta.

Meta no publica una lista de IP ni un hostname para meta-externalfetcher, así que la única regla posible es por user agent, y deja pasar también a quien lo copie.

Cómo saber si una visita es realmente de meta-externalfetcher

Meta no publica una lista de IP ni un hostname para meta-externalfetcher, así que no puedes demostrar que una visita es auténtica. Toma el user agent como una declaración y juzga las visitas por lo que piden en tus logs.

Otros rastreadores de Meta

meta-externalagent: Entrenamiento de IA
meta-webindexer: Búsqueda con IA
facebookexternalhit: Vista previa de enlaces

Comprueba tu propia web

El comprobador de rastreadores de IA te dice qué rastreadores de IA deja pasar tu robots.txt, y el analizador de logs muestra con qué frecuencia te visita cada uno. Para el contexto, mira qué son los rastreadores de IA y el índice completo de rastreadores de IA.

Lo que dicen nuestros datos sobre meta-externalfetcher

Cifras que hemos medido en respuestas de IA y webs reales. Cada una enlaza a su estudio, con el método, la muestra y la fecha.

3,5 %

El 3,5 % de las webs que más cita la IA en España impide rastrear su web a meta-externalfetcher, y el 3,4 % lo nombra en un grupo propio de su robots.txt.

Muestra: 678 webs que la IA cita para tres o más de 43 marcas en España. Fuente: Mencoro (noviembre de 2026), en ¿Qué rastreadores de IA dejan entrar las webs que cita la IA?