NVIDIA Cosmos 3: open wereldmodellen als fundament voor fysieke AI

NVIDIA heeft Cosmos 3 aangekondigd, een toonaangevend open fysiek AI-fundament-omni-model gebouwd op een mixture-of-transformers-architectuur, dat visie-redeenering, wereldgeneratie en actievoorspelling combineert. Hiermee kunnen ontwikkelaars met één modelfamilie werken voor scènebegrip, synthetische datageneratie, simulatie van toekomstige toestanden en het bouwen van gespecialiseerde wereldactiemodellen. De familie omvat Cosmos 3 Super (64B) voor high-fidelity wereldmodellering, Cosmos 3 Nano (16B) voor efficiënte redenering en post-training, en Cosmos 3 Edge (4B) voor on-device visie-redeenering en implementatie van robotbeleid, inzetbaar op NVIDIA RTX GPU's, DGX-systemen en Jetson-platforms. Volgens benchmarks staat Cosmos 3 op nummer 1 op Artificial Analysis voor open-weights tekst-naar-afbeelding en afbeelding-naar-video generatie, op PAI-Bench voor wereldgeneratie, en in de categorie afbeelding-naar-video van Physics-IQ. Voor robotbeleid staat het op nummer 1 op RoboLab, en Cosmos 3 Super is het hoogst gerangschikte open model op VANTAGE-Bench voor visiebegrip. NVIDIA Cosmos wereld-fundamentmodellen zijn beschikbaar onder de OpenMDW 1.1-licentie van de Linux Foundation, waardoor teams modellen kunnen post-trainen op hun eigen data en hardware. NVIDIA's fysieke AI-stack omvat ook Isaac GR00T voor robotica, Alpamayo voor autonome voertuigen en Metropolis voor visie-AI. Bedrijven zoals Doosan Robotics, LG Electronics, Samsung Electronics, Skild AI, Li Auto, Xiaomi, Afari, Centific, Fogsphere, Linker Vision, Milestone Systems en Yuan bouwen op NVIDIA Cosmos voor fysieke AI-toepassingen. De NVIDIA Cosmos Coalition, die onlangs is uitgebreid naar Japan, brengt wereldmodelbouwers, AI-ontwikkelaars en leiders in fysieke AI samen om modellen, onderzoek en evaluatiemethoden bij te dragen.