Analizador de logs para SEO y bots de IA

Qué muestra este analizador de logs

• Cada bot, según para qué sirve: buscadores, rastreadores de entrenamiento de IA (GPTBot, ClaudeBot, CCBot, Bytespider), índices de búsqueda con IA (OAI-SearchBot, PerplexityBot, Claude-SearchBot) y visitas a petición (ChatGPT-User, Claude-User, Perplexity-User), con peticiones, páginas, errores y última visita.
• Peticiones por día: buscadores frente a rastreadores de IA, para ver picos y el día en que un rastreador dejó de venir.
• Las páginas que más leen los rastreadores de IA, y las que les devuelven errores 4xx o 5xx.
• Visitas desde asistentes de IA: personas que pulsaron un enlace en ChatGPT, Perplexity, Gemini, Copilot o Claude, y las páginas en las que aterrizan.

Cómo conseguir tus logs de acceso

• Nginx: normalmente /var/log/nginx/access.log y sus ficheros .gz rotados.
• Apache: /var/log/apache2/access.log o /var/log/httpd/access_log.
• Paneles de hosting: cPanel y Plesk tienen una sección «Registros de acceso sin procesar» o «Logs» para descargarlos.
• Cloudflare, Vercel y otras CDN: expórtalos como JSON por líneas con Logpush o un log drain; bastan los campos de URI, estado, user agent y referer.

Qué hacer con lo que encuentres

Si falta un rastreador de IA que quieres, comprueba si el robots.txt o tu firewall lo bloquean con el comprobador de rastreadores de IA, y prueba tus reglas con el probador de robots.txt. Si los rastreadores gastan sus visitas en redirecciones, 404 o URL con parámetros, corrígelas o bloquéalas para que lleguen a las páginas que importan. Si las páginas que más leen no son las que quieres que citen los asistentes de IA, dales un mapa con un llms.txt.

El rastreo es el principio de la cadena, no el final. Si después ChatGPT, Perplexity, Claude y los AI Overviews de Google recomiendan tu marca es lo que mide Mencoro, cada día, junto a tus competidores, desde 15 € al mes.