NVIDIA julkaisee Cosmos-H-Dreams: reaaliaikainen generatiivinen simulaattori kirurgiaroboteille

NVIDIA on julkaissut Cosmos-H-Dreams, reaaliaikaisen generatiivisen simulaattorin robottikirurgiaan. Se tiivistää Cosmos-H-Surgical-Simulator-maailmamallin kausaaliseksi oppilaaksi, joka käyttää muutaman askeleen diffuusiota, ja tarjoaa sen FlashDreams-kiihdytetyn päättelykirjaston kautta. Yhdellä NVIDIA RTX PRO 6000 -grafiikkasuorittimella se saavuttaa interaktiivisen toiminnan noin 160 kuvan sekuntinopeudella. Simulaattori on toimintaehdollinen: se vastaanottaa alkuperäisen RGB-kuvan ja reaaliaikaisen robotin kinematiikan virtauksen, ja tuottaa seuraavat videokuvat autoregressiivisesti. Sitä esiteltiin yhteistyössä CMR Surgicalin ja Cambridge Consultantsin kanssa Versius-leikkausohjaimella. Järjestelmä tukee ihmiskäyttöliittymiä selaimen kautta (WebRTC) ja Meta Questin kautta (WebXR), ja se voidaan myös kytkeä opittuihin kirurgisiin toimintatapoihin. Cosmos-H-Dreams on suunniteltu arvioimaan kirurgisia toimintatapoja, tuottamaan synteettistä dataa ja mahdollistamaan suljetun silmukan ohjaus fyysiselle tekoälylle kirurgiassa.