O painel de Agentes de IA do seu dashboard é construído apenas com sinais públicos: a política do seu robots.txt para bots de IA conhecidos, se você publica um llms.txt e com que frequência as respostas de IA armazenadas pelos seus escaneamentos citaram seu domínio. São dados honestos de acessibilidade — mas não são tráfego de rastreadores. Contagens reais de requisições de bots de IA existem em exatamente um lugar: os logs do seu servidor. Nós nunca temos acesso a eles, e não vamos fingir o contrário.
Se o seu site roda atrás da Cloudflare, você pode ver o tráfego real de rastreadores de IA em poucos minutos, sem dar acesso a ninguém.
Opção 1: o painel AI Audit / AI Crawl Control (a mais fácil)
A Cloudflare oferece uma visão dedicada exatamente para isso:
- Entre no painel da Cloudflare e selecione seu site (zona).
- Abra AI Crawl Control (antigo AI Audit) na navegação à esquerda.
- Você verá quais rastreadores de IA (GPTBot, ClaudeBot, PerplexityBot, Google-Extended e outros) requisitaram suas páginas, com que frequência e quais caminhos acessaram — contado a partir de requisições reais no edge da Cloudflare.
Na mesma tela você pode permitir ou bloquear rastreadores de IA individualmente. Antes de bloquear, lembre-se do dilema: bots que não conseguem ler seu site também não conseguem citá-lo.
Opção 2: analítica de Security → Bots
Em qualquer plano, Security → Bots mostra o tráfego de bots classificado por nome de bot verificado. Filtre pelos rastreadores de IA que interessam para ver os volumes de requisições ao longo do tempo. É menos detalhado que o AI Crawl Control, mas está disponível em todos os planos.
Opção 3: Logpush para logs brutos (Enterprise)
Se você precisa de registros brutos por requisição — para seus próprios dashboards ou retenção de longo prazo — o Logpush da Cloudflare pode transmitir logs de requisições HTTP (incluindo o cabeçalho User-Agent) para o seu próprio armazenamento (R2, S3 e outros). Filtre esses logs pelas strings de user-agent de bots de IA conhecidos para obter contagens exatas por bot. Requer um plano Enterprise.
Como isso se relaciona com o painel de Agentes de IA
- Nosso painel responde: os rastreadores de IA poderiam alcançar você (robots.txt, llms.txt), e as respostas de IA dos seus escaneamentos realmente citaram você?
- Seus logs da Cloudflare respondem: quais bots de IA realmente requisitaram suas páginas, e com que frequência?
Os dois são complementares. Se a Cloudflare mostra muito tráfego do GPTBot mas seus escaneamentos mostram poucas citações, seu conteúdo está sendo lido mas não é considerado digno de citação. Se nosso painel mostra bots bloqueados, nenhuma análise de logs vai ajudar até o robots.txt permiti-los.
Não pedimos que você compartilhe nenhum desses dados conosco. O tráfego é seu; você deve vê-lo diretamente.