alphaXiv

ICML 논문 2,200편 재현 실험에서 배운 것

Hugging Face는 alphaXiv와 함께 ICML 2026 오픈 재현 챌린지를 진행했는데, 참가자들은 AI 코딩 에이전트를 사용하여 2,200편의 논문 재현을 시도했습니다. 그 결과, 검토된 논문의 51%에서 최소 하나의 주장이 검증되었고, 23%는 주장이 반증되거나 논쟁이 있었으며, 242편은 상충된 판정을 받았습니다. 에이전트가 한계에 부딪히고 잘못된 반증이 발생했기 때문에 인간의 감독이 중요한 것으로 드러났으며, 이 행사는 현재까지 ML 학회에서 가장 큰 규모의 주장 수준 감사로 간주됩니다.

Hugging Face Anthropic OpenAI Cursor alphaXiv