Índice de rastreadores de IA

¿Qué es Bytespider?

Bytespider es un rastreador de ByteDance. ByteDance no publica documentación sobre Bytespider que hayamos podido verificar.

En resumen

Operador	ByteDance
Finalidad	Otro o sin declarar
User agent	El operador no lo documenta
Respeta robots.txt	El operador no lo documenta
Rangos de IP publicados	El operador no lo documenta
Cómo verificarlo	El operador no lo documenta
Documentación oficial	El operador no lo documenta

¿Conviene bloquear Bytespider?

Su finalidad no está bien documentada. Mira en los logs de tu servidor con qué frecuencia visita y qué pide antes de decidir.

Sin una página oficial, ni su finalidad ni si respeta robots.txt están documentados. Si quieres frenarlo, añade la regla en robots.txt y confirma en tus logs que las peticiones paran.

Cómo bloquear o permitir Bytespider en robots.txt

Bloquearlo en toda la web:

User-agent: Bytespider
Disallow: /

Permitirlo en toda la web:

User-agent: Bytespider
Allow: /

Las reglas se asignan por el token de la línea User-agent. Prueba el resultado con el probador de robots.txt antes de publicarlo.

Prueba Bytespider en tu robots.txt

Cómo dejar pasar a Bytespider por el cortafuegos o la CDN

robots.txt solo le dice a Bytespider qué puede pedir. Si un cortafuegos, una CDN o una regla antibots bloquea la petición antes, nunca llega a leer el fichero, así que permitirlo en robots.txt no basta.

ByteDance no publica una lista de IP ni un hostname para Bytespider, así que la única regla posible es por user agent, y deja pasar también a quien lo copie.

Cómo saber si una visita es realmente de Bytespider

ByteDance no publica una lista de IP ni un hostname para Bytespider, así que no puedes demostrar que una visita es auténtica. Toma el user agent como una declaración y juzga las visitas por lo que piden en tus logs.

Comprueba tu propia web

El comprobador de rastreadores de IA te dice qué rastreadores de IA deja pasar tu robots.txt, y el analizador de logs muestra con qué frecuencia te visita cada uno. Para el contexto, mira qué son los rastreadores de IA y el índice completo de rastreadores de IA.

Lo que dicen nuestros datos sobre Bytespider

Cifras que hemos medido en respuestas de IA y webs reales. Cada una enlaza a su estudio, con el método, la muestra y la fecha.

15,6 %

El 15,6 % de las webs que más cita la IA en España impide rastrear su web a Bytespider, y el 15,8 % lo nombra en un grupo propio de su robots.txt.

Muestra: 678 webs que la IA cita para tres o más de 43 marcas en España. Fuente: Mencoro (noviembre de 2026), en ¿Qué rastreadores de IA dejan entrar las webs que cita la IA?