¿Qué es Bot Analytics?
Bot Analytics te ayuda a supervisar qué bots visitan tu sitio web, con qué frecuencia lo visitan y qué páginas rastrean. Rastrea los bots en 12 categorías, incluidos asistentes de IA, motores de búsqueda, herramientas SEO y más.
Bot Analytics es gratuito durante la beta.
¿Por qué supervisar el tráfico de bots?
Una parte considerable del tráfico que llega a tu sitio web proviene de bots, y Cloudflre estima que el 53% del tráfico de rastreadores es esfuerzo desperdiciado.
Monitorizar el tráfico de bots de tu sitio web puede ayudarte a:
Establecer reglas adecuadas de limitación de tasa para gestionar los bots maliciosos y mantener tu sitio web estable
Saber qué rastreadores de IA (como ChatGPT y Perplexity) visitan tu sitio para recopilar contenido antes de citarlo en respuestas generadas por IA
Ver los datos de tráfico de bots en los informes
Bot Analytics tiene cuatro informes, y cada uno ofrece una vista diferente del tráfico de bots.
Resumen: un resumen general de toda la actividad de bots en tu sitio
Bots: tráfico desglosado por bot individual (p. ej., Googlebot, GPTBot, ClaudeBot)
Categorías: tráfico agrupado por tipo de bot, como motor de búsqueda, rastreador de IA o herramienta SEO
Páginas rastreadas: páginas específicas de tu sitio que los bots han visitado
Cada uno de los informes incluye un gráfico de líneas que puedes configurar para adaptarlo a tu análisis.
Alterna entre las vistas Absoluta (recuentos de solicitudes sin procesar) y Relativa (porcentaje relativo). Esta última opción facilita comparar directamente páginas o bots entre sí.
Configura la granularidad temporal en horaria, diaria, semanal o mensual, y usa el selector de fechas personalizado para comparar distintos periodos de tiempo.
Filtrado en los informes
Puedes filtrar los datos por nombres de bots, categorías, URL de páginas o métricas como clics, etc. Se pueden apilar varios filtros para crear el informe que necesitas.
También hay un botón de "bots de IA" para filtrar al instante todo el tráfico y mostrar solo el de bots de IA. Esta práctica función te permite ver rápidamente cómo los bots de IA rastrean tu sitio y qué páginas visitan con más frecuencia.
Exportar los datos de tráfico de bots
Exporta los datos de tráfico de bots en un .csv o como una hoja de Google.
¿Cómo inspecciono el contenido de una página?
En cualquier informe que liste páginas, pasa el cursor sobre el icono de la lupa junto a la URL de una página para abrir Page Inspect y ver el contenido de esa página. También puedes ver cómo ha cambiado la página con el tiempo, lo cual es útil para comprobar qué ven realmente los bots cuando la rastrean.
Los datos de inspección de página provienen de AhrefsBot.
¿Cómo configuro Bot Analytics?
Bot Analytics requiere una integración con Cloudflare para recopilar datos del tráfico de bots. Funciona de forma independiente de Web Analytics y recopila datos del lado del servidor, así que no necesitas un script de seguimiento de JavaScript en tu sitio.
Primero, abre tu proyecto en Ahrefs y ve a Ajustes del proyecto → Bot Analytics.
Luego, elige tu método de integración: Cloudflare Logpush o Cloudflare Worker
Método 1: Cloudflare Logpush
Cloudflare Logpush envía automáticamente a Ahrefs los registros de solicitudes HTTP de tu sitio. Es la opción más eficiente para sitios con mucho tráfico. Este método necesita un plan Enterprise de Cloudflare.
Método 2: Cloudflare Worker
Un Cloudflare Worker ejecuta un pequeño script en cada solicitud y envía los datos a Ahrefs. Este método funciona con cualquier plan de Cloudflare, incluido el nivel gratuito.
Configura tu token personalizado (Cloudflare Worker)
Para usar el método de Cloudflare Worker, debes crear un token de API personalizado en Cloudflare con los permisos correctos.
Al crear el token, asegúrate de completar tu Zona (dominio) en Recursos de zona. El token no se puede guardar sin este paso.
Cuando tu token esté configurado correctamente, la configuración de tu worker debería verse así:
¿Cuáles son las categorías de bots?
Bot Analytics agrupa todos los bots detectados en las siguientes 12 categorías.
Categoría | Descripción |
Supervisión | Bots que comprueban si tu sitio web está en línea y funciona correctamente (p. ej., monitores de tiempo de actividad) |
Asistente de IA | Bots de plataformas de IA como ChatGPT y Perplexity que rastrean contenido para generar respuestas |
Búsqueda con IA | Rastreadores que impulsan motores de búsqueda basados en IA |
Rastreador de IA | Bots que recopilan contenido web para entrenar modelos de IA o crear conjuntos de datos de IA |
Motor de búsqueda | Rastreadores de Google, Bing y otros motores de búsqueda que indexan tus páginas |
Herramienta SEO | Bots de plataformas de SEO como Ahrefs que analizan tu sitio |
Redes sociales | Bots de plataformas como Facebook y Twitter/X que obtienen vistas previas de enlaces |
Agente de servicio | Bots que realizan tareas automatizadas en nombre de un servicio o plataforma |
Seguridad | Bots que escanean en busca de vulnerabilidades o malware |
Herramienta de obtención de feeds | Bots que obtienen feeds RSS o Atom para sindicar tu contenido |
Publicidad | Bots de redes publicitarias que verifican ubicaciones y detectan el fraude de clics |
Otros | Cualquier bot que no encaje en las categorías anteriores |