NVIDIA Luncurkan Cosmos-H-Dreams: Simulator Generatif Real-Time untuk Robot Bedah

NVIDIA telah merilis Cosmos-H-Dreams, sebuah simulator generatif real-time untuk robotika bedah. Simulator ini menyuling model dunia Cosmos-H-Surgical-Simulator ke dalam model student kausal yang menggunakan difusi beberapa langkah, dan menyajikannya melalui pustaka inferensi dipercepat FlashDreams. Berjalan pada satu GPU NVIDIA RTX PRO 6000, simulator ini mencapai operasi interaktif pada sekitar 160 frame per detik. Simulator ini dikondisikan oleh aksi, menerima frame RGB awal dan aliran langsung kinematika robot untuk menghasilkan frame video berikutnya secara autoregresif. Simulator ini didemonstrasikan bekerja sama dengan CMR Surgical dan Cambridge Consultants pada pengontrol ahli bedah Versius. Sistem ini mendukung antarmuka manusia melalui peramban (WebRTC) dan Meta Quest (WebXR), dan juga dapat dihubungkan ke kebijakan bedah yang dipelajari. Cosmos-H-Dreams dirancang untuk mengevaluasi kebijakan bedah, menghasilkan data sintetis, dan memungkinkan kontrol loop tertutup untuk AI fisik dalam bidang bedah.