alphaXiv

O que aprendemos ao reproduzir 2.200 artigos do ICML

A Hugging Face, em parceria com a alphaXiv, realizou o desafio de Reproduções Abertas do ICML 2026, no qual participantes usaram agentes de codificação de IA para tentar reproduzir 2.200 artigos. Os resultados: 51% dos artigos examinados tiveram pelo menos uma afirmação verificada, 23% tiveram uma afirmação refutada ou contestada, e 242 artigos tiveram veredictos conflitantes. A supervisão humana mostrou-se crucial, pois os agentes atingiram limites e ocorreram falsas refutações; o evento é considerado a maior auditoria em nível de afirmação de uma conferência de aprendizado de máquina até hoje.

Hugging Face Anthropic OpenAI Cursor alphaXiv