NVIDIA Lanceert Cosmos-H-Dreams: Real-Time Generatieve Simulator voor Chirurgische Robots

NVIDIA heeft Cosmos-H-Dreams uitgebracht, een realtime generatieve simulator voor chirurgische robotica. Het distilleert het Cosmos-H-Surgical-Simulator-wereldmodel in een causaal studentmodel dat gebruikmaakt van diffusie in enkele stappen en dit wordt aangeboden via de FlashDreams-versnelde inferentiebibliotheek. Op een enkele NVIDIA RTX PRO 6000 GPU draaiend, bereikt het interactieve werking bij ongeveer 160 frames per seconde. De simulator is actiegestuurd: hij ontvangt een eerste RGB-frame en een livestream van robotkinematica om autonoom volgende videoframes te genereren. Het systeem werd gedemonstreerd in samenwerking met CMR Surgical en Cambridge Consultants op de Versius-chirurgcontroller. Het ondersteunt menselijke interfaces via browser (WebRTC) en Meta Quest (WebXR) en kan ook worden verbonden met aangeleerde chirurgische beleidsregels. Cosmos-H-Dreams is ontworpen om chirurgische beleidsregels te evalueren, synthetische data te genereren en closed-loop-besturing mogelijk te maken voor fysieke AI in de chirurgie.