我们通过复现2,200篇ICML论文学到的经验
Hugging Face与alphaXiv合作，开展了ICML 2026开放复现挑战赛，参赛者使用AI编码代理尝试复现2,200篇论文。结果显示：在所审查的论文中，有51%至少有一项主张得到验证，23%存在主张被证伪或质疑，另有242篇论文的结论相互矛盾。人工监督至关重要，因为代理有时达到能力极限，且出现过错误的证伪案例。该活动被认为是迄今对机器学习会议进行的最全面主张级审计。
Hugging Face
Anthropic
OpenAI
Cursor
alphaXiv
Hugging Face blog13.08 · 20:03