alphaXiv

Lo que aprendimos al reproducir 2.200 artículos de ICML

Hugging Face, en colaboración con alphaXiv, organizó el desafío de Reproducciones Abiertas de ICML 2026, donde los participantes usaron agentes de programación con IA para intentar reproducir 2.200 artículos. Los resultados: el 51% de los artículos examinados tenían al menos una afirmación verificada, el 23% tenía una afirmación refutada o en disputa, y 242 artículos tenían veredictos contradictorios. La supervisión humana resultó crucial, ya que los agentes alcanzaron límites y se produjeron falsas refutaciones; el evento se considera la mayor auditoría a nivel de afirmaciones de una conferencia de aprendizaje automático hasta la fecha.

Hugging Face Anthropic OpenAI Cursor alphaXiv