NVIDIA, 수술 로봇용 실시간 생성 시뮬레이터 Cosmos-H-Dreams 출시

NVIDIA는 수술 로봇을 위한 실시간 생성 시뮬레이터인 Cosmos-H-Dreams를 출시했습니다. 이는 Cosmos-H-Surgical-Simulator 월드 모델을 증류하여 소수 단계 확산(diffusion)을 사용하는 인과적 학생 모델로 만들고, FlashDreams 가속 추론 라이브러리를 통해 제공합니다. 단일 NVIDIA RTX PRO 6000 GPU에서 구동되며, 약 초당 160프레임의 대화형 작동을 달성합니다. 이 시뮬레이터는 행동 조건화(행동 조건부)되어 있으며, 초기 RGB 프레임과 로봇 운동학의 실시간 스트림을 수신하여 후속 비디오 프레임을 자기회귀적으로 생성합니다. CMR Surgical 및 Cambridge Consultants와 협력하여 Versius 외과 의사 컨트롤러에서 시연되었습니다. 이 시스템은 브라우저(WebRTC)와 Meta Quest(WebXR)를 통한 인간 인터페이스를 지원하며, 학습된 수술 정책(policy)에도 연결될 수 있습니다. Cosmos-H-Dreams는 수술 정책 평가, 합성 데이터 생성, 그리고 물리적 AI의 폐루프 제어를 위해 설계되었습니다.