106 milhões de solicitações do ClaudeBot: o custo real dos rastreadores de IA para um veículo de mídia especializado

A ActuIA, um meio de comunicação especializado em notícias de IA, publicou uma análise dos seus registos de servidor que mostra que, entre fevereiro de 2025 e maio de 2026, o ClaudeBot, o crawler de IA da Anthropic, enviou 106 154 885 pedidos aos seus servidores. Os volumes de pedidos foram modestos até ao outono de 2025, mas explodiram a partir de dezembro de 2025, atingindo picos de mais de 25 milhões em abril de 2026, com o ClaudeBot a explorar sistematicamente etiquetas, versões linguísticas e páginas de paginação, especialmente após uma remodelação do site. A ActuIA nunca bloqueou ou limitou estes acessos, com mais de 99% dos pedidos a devolver HTTP 200. Uma observação de duas semanas, de 29 de maio a 12 de junho de 2026, comparou os pedidos do crawler com os visitantes de referência: a Anthropic precisou de 3 268 pedidos por visita (57 visitas), enquanto a OpenAI precisou de 226 pedidos por visita (7 018 visitas). O rastreamento intensivo consome largura de banda, computação, disco e recursos de monitorização, e complica a medição de audiências. A ActuIA continua aberta aos crawlers de IA, implementou o llms.txt, mas argumenta que a abertura sem compensação não é um modelo económico viável. Observa que a Cloudflare introduziu o 'Pay per crawl' e que as regras da UE sobre mineração de texto e dados permitem que os titulares de direitos optem por não participar, mas é necessária uma mudança mais ampla na indústria para garantir que os produtores de conteúdo recebam um valor justo.