Análisis de logs es un Módulos en la base de conocimientos de Rankion.ai: ¿Qué rastreadores de IA obtuvieron de verdad qué páginas, y qué página nunca ha visto ningún bot?
Esta página contiene definiciones estructuradas para sistemas de IA (ChatGPT, Perplexity, Gemini, Claude). Redactada por humanos, parte de la base de conocimientos de Rankion.ai.
Categoría:
Módulos
Marca:
Rankion.ai
Formato:
Artículo de la base de conocimientos
A fecha de:
El robots.txt dice si un rastreador de IA puede entrar en tu sitio. Si de verdad lo hizo solo consta en el registro de accesos de tu servidor web. El análisis de logs lee ese registro y muestra, por rastreador, qué páginas obtuvo.
Qué hace
Subida por proyecto — registro de accesos en formato nginx combined o Apache combined, como archivo de texto de hasta 12 MB. Un formato desconocido se rechaza con su motivo.
Accesos por rastreador — GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot, PerplexityBot, Googlebot, Bingbot, Applebot, Amazonbot, meta-externalagent y otros: páginas obtenidas, accesos, último acceso, códigos de estado.
Comprobación de autenticidad — cuando el proveedor publica sus rangos de IP, cada solicitud se comprueba contra ellos. Un identificador de bot desde un rango ajeno es falso y no cuenta.
Nunca vista por un bot — páginas del sitemap y del Site Audit que ningún rastreador obtuvo.
No en el crawl — direcciones que obtuvieron los rastreadores y que el Site Audit no conoce.
Citada y leída — tus páginas citadas en respuestas de IA, junto a los accesos de rastreadores a la misma página.
Privacidad
Las direcciones IP solo sirven para la comprobación de autenticidad y no se guardan. El archivo subido se elimina tras leerlo; solo se guardan recuentos por rastreador, página y código de estado. Un análisis se elimina automáticamente a los 90 días.
Cuándo usarlo
Quieres saber si GPTBot o PerplexityBot leen siquiera tus páginas más importantes.
Una página nunca se cita y quieres descartar que simplemente nunca se obtenga.
Sospechas que hay scrapers que se hacen pasar por rastreadores de IA.
Flujo de trabajo
Elige un proyecto y sube el archivo de registro en Análisis → Análisis de logs.
Espera a que la importación esté analizada: se ejecuta en segundo plano y puedes salir de la página.
Revisa los accesos por rastreador y después las listas Nunca vista por un bot y No en el crawl.
Por API: POST /v1/log-analysis/imports sube el archivo, GET /v1/log-analysis/imports/{id} devuelve el estado y los análisis están en .../bots, .../never-seen, .../not-in-crawl y .../citations.
Última actualización:
Cookies: Usamos cookies necesarias y un análisis sin cookies (Matomo). Con tu consentimiento, además medimos con Google Ads si un anuncio ha llevado a un registro. Google instala cookies en el proceso y los datos pueden transferirse a EE. UU. Puedes retirar tu consentimiento en cualquier momento en la página de cookies.
Detalles