Índice de rastreadores de IA

¿Qué es YouBot?

YouBot es el rastreador de You.com para la búsqueda con IA. Rastrea e indexa páginas para el buscador de You.com.

En resumen

Operador	You.com
Finalidad	Búsqueda con IA
User agent	`Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; YouBot/1.0; +https://docs.you.com/youbot; env:prod) Chrome/X.X.X.X Safari/537.36`
Respeta robots.txt	Sí, según el operador
Rangos de IP publicados	El operador no lo documenta
Cómo verificarlo	Firmas Web Bot Auth, DNS inverso hacia youbot-*.search.you.com o el rango de IP de la documentación de You.com.
Documentación oficial	https://you.com/docs/youbot

¿Conviene bloquear YouBot?

Construye el índice del que cita un buscador con IA. Bloquearlo puede sacar tus páginas de las respuestas y los enlaces de ese motor, así que, si quieres que te citen ahí, permítelo.

Respeta robots.txt, incluido Crawl-delay, y lo guarda en caché 30 minutos. You.com no indica si los datos entrenan modelos de IA.

Cómo bloquear o permitir YouBot en robots.txt

Bloquearlo en toda la web:

User-agent: YouBot
Disallow: /

Permitirlo en toda la web:

User-agent: YouBot
Allow: /

Las reglas se asignan por el token de la línea User-agent. Prueba el resultado con el probador de robots.txt antes de publicarlo.

Prueba YouBot en tu robots.txt

Cómo dejar pasar a YouBot por el cortafuegos o la CDN

robots.txt solo le dice a YouBot qué puede pedir. Si un cortafuegos, una CDN o una regla antibots bloquea la petición antes, nunca llega a leer el fichero, así que permitirlo en robots.txt no basta.

Si tu cortafuegos admite reglas por hostname, permite las peticiones cuyo DNS inverso termine en .search.you.com y apunte de vuelta a la misma IP.

Cómo saber si una visita es realmente de YouBot

Cualquiera puede escribir YouBot en un user agent, así que el user agent por sí solo no demuestra nada. Saca la IP de la petición de los logs de tu servidor y compruébala.

Busca el hostname de la IP y después busca ese hostname. La primera respuesta debe terminar en .search.you.com y la segunda debe devolver la misma IP; si no, es una suplantación. En Windows, usa nslookup en lugar de host.

host 203.0.113.7
host <hostname>

Comprueba tu propia web

El comprobador de rastreadores de IA te dice qué rastreadores de IA deja pasar tu robots.txt, y el analizador de logs muestra con qué frecuencia te visita cada uno. Para el contexto, mira qué son los rastreadores de IA y el índice completo de rastreadores de IA.

Lo que dicen nuestros datos sobre YouBot

Cifras que hemos medido en respuestas de IA y webs reales. Cada una enlaza a su estudio, con el método, la muestra y la fecha.

5,3 %

El 5,3 % de las webs que más cita la IA en España impide rastrear su web a YouBot, y el 5,2 % lo nombra en un grupo propio de su robots.txt.

Muestra: 678 webs que la IA cita para tres o más de 43 marcas en España. Fuente: Mencoro (noviembre de 2026), en ¿Qué rastreadores de IA dejan entrar las webs que cita la IA?