Mistral AI تطلق Robostral Navigate: نموذج للملاحة الروبوتية بكاميرا RGB واحدة

أعلنت شركة Mistral AI عن إطلاق نموذجها الأول Robostral Navigate المصمم للملاحة التجسيدية. يعمل هذا النموذج ذو الثمانية مليارات معلمة على تحويل الصور الملونة (RGB) مع تعليمات بلغة بسيطة لتحريك الروبوت في البيئات المحيطة. على عكس النماذج الأخرى التي تستخدم مستشعرات العمق أو LiDAR أو كاميرات متعددة، يعمل Robostral Navigate بكاميرا عادية واحدة دون مستشعرات عمق، محققاً نسبة نجاح 76.6% في اختبار R2R-CE (التنقل من غرفة إلى غرفة في بيئات متصلة) على بيانات التحقق غير المرئية. يتفوق هذا الأداء على أفضل نهج يستخدم كاميرا واحدة بـ 9.7 نقاط، وعلى أفضل نظام يستخدم العمق أو كاميرات متعددة بـ 4.5 نقاط. النموذج مبني بالكامل داخل الشركة باستخدام بيانات محاكاة وتقنيات فعّالة من حيث عدد الرموز المميزة (tokens)، وهو قابل للتطبيق على روبوتات ذات عجلات وأرجل وطائرات. يستخدم النموذج طريقة ملاحة قائمة على التوجيه (pointing-based) حيث يتنبأ بإحداثيات الصورة للمواقع المستهدفة، ويعتمد على إزاحات إطار الإحداثيات المحلي عندما تكون الأهداف خارج مجال الرؤية. تُحقق كفاءة التدريب عبر تقنية التخزين المؤقت للبادئة (prefix-caching) التي تقلل عدد رموز التدريب بعامل 22 مرة؛ بينما يعمل التعلم المعزز عبر الإنترنت باستخدام خوارزمية CISPO على تحسين معدل النجاح بنسبة 3.2%.