إصدار PROVE من فريق MiLM Plus في Xiaomi: مقاييس RC-S وRC-T لإزالة الأجسام المتوافقة مع الإدراك ومعيار فيديو واقعي

تطورت نماذج إزالة الكائنات بشكل أسرع من المقاييس المستخدمة لتقييمها، والتي غالبًا ما تسيء ترتيب المخرجات. أصدر فريق MiLM Plus من شياومي مقياس PROVE، الذي تم قبوله في ACM MM 2026، ويتضمن مقياسين: RC-S للتماسك المكاني وRC-T للاتساق الزمني، بالإضافة إلى PROVE-Bench، وهو معيار فيديو من مستويين. يسجل كلا المقياسين المنطقة المعدلة محليًا باستخدام الانحراف الأقصى المتوسط بنافذة منزلقة على ميزات DINOv2، ولا يتطلبان فيديو مرجعي. يتوفر PROVE كمستودع PyTorch بترخيص Apache 2.0. تعالج المقاييس مشكلات المقاييس الحالية: PSNR وSSIM وLPIPS متحيزة تجاه النسخ واللصق، وReMOVE وCFD تكافئان التشويش وتخطئان في التقييم عند الهلوسة، والمقاييس الزمنية غير حساسة للتلف. يحقق RC-S متوسط كيندال تاو قدره 0.59 مقابل تقييمات البشر، متجاوزًا بشكل كبير ReMOVE (0.26) وCFD (0.16). يتضمن PROVE-Bench PROVE-M مع 80 فيديو مزدوجًا وPROVE-H مع 100 فيديو صعب بدون أساس حقيقي. الكود ومجموعة البيانات متاحان للعموم، ويعمل RC-S بسرعة 134.6 مللي ثانية لكل إطار، أي أسرع بـ 13.7 مرة من CFD.