ما تعلمناه من إعادة إنتاج 2,200 ورقة بحثية من مؤتمر ICML
أجرت Hugging Face، بالشراكة مع alphaXiv، تحدي إعادة الإنتاج المفتوح لمؤتمر ICML 2026، حيث استخدم المشاركون وكلاء ترميز بالذكاء الاصطناعي لمحاولة إعادة إنتاج 2,200 ورقة بحثية. النتائج: تم التحقق من ادعاء واحد على الأقل في 51٪ من الأوراق التي تم فحصها، وتم دحض ادعاء أو الاعتراض عليه في 23٪، وكان هناك 242 ورقة بأحكام متضاربة. أثبتت المراجعة البشرية أنها حاسمة، حيث وصل الوكلاء إلى حدود وحدثت حالات دحض خاطئة؛ وتُعتبر هذه الفعالية أكبر تدقيق على مستوى الادعاءات لمؤتمر تعلم آلي حتى الآن.
Hugging Face
Anthropic
OpenAI
Cursor
alphaXiv
Hugging Face blog13.08 · 20:03
