NVIDIA推出Cosmos-H-Dreams：手术机器人的实时生成式模拟器

英伟达发布了Cosmos-H-Dreams，这是一个用于手术机器人的实时生成式模拟器。它将Cosmos-H-Surgical-Simulator世界模型蒸馏成一个因果学生模型，该模型使用少步扩散，并通过FlashDreams加速推理库提供服务。在单个NVIDIA RTX PRO 6000 GPU上运行，可实现约每秒160帧的交互式操作。该模拟器是动作条件的，接收初始RGB帧和实时机器人运动学数据流，以自回归方式生成后续视频帧。它与CMR Surgical和Cambridge Consultants合作，在Versius手术控制器上进行了演示。该系统通过浏览器（WebRTC）和Meta Quest（WebXR）支持人机界面，还可以连接到学习型手术策略。Cosmos-H-Dreams旨在评估手术策略、生成合成数据，并为手术中的物理人工智能实现闭环控制。