NVIDIA Cosmos 3: Açık Dünya Modelleri Fiziksel Yapay Zekânın Temeli Olarak

NVIDIA, Cosmos 3'ü duyurdu. Bu, mixture-of-transformers mimarisi üzerine inşa edilmiş, görüntü akıl yürütme, dünya üretimi ve eylem tahminini birleştiren, geliştiricilerin sahne anlama, sentetik veri üretimi, gelecek durum simülasyonu ve özel dünya eylem modelleri oluşturma için tek bir model ailesi kullanmasına olanak tanıyan, sınırda bir açık fiziksel yapay zeka temel omni-modelidir. Aile, yüksek doğruluklu dünya modellemesi için Cosmos 3 Super (64B), verimli akıl yürütme ve sonradan eğitim için Cosmos 3 Nano (16B) ve cihaz üzerinde görüntü akıl yürütme ve robot politikası dağıtımı için Cosmos 3 Edge (4B) içerir; NVIDIA RTX GPU'ları, DGX sistemleri ve Jetson platformlarında dağıtılabilir. Kıyaslamalara göre, Cosmos 3, açık ağırlıklı metinden görüntüye ve görüntüden videoya üretimde Yapay Analiz'de, dünya üretiminde PAI-Bench'te ve Physics-IQ'nun görüntüden videoya kategorisinde birinci sırada yer alıyor; robot politikası için RoboLab'da birinci sırada ve Cosmos 3 Super, görüntü anlama için VANTAGE-Bench'te en yüksek puan alan açık modeldir. NVIDIA Cosmos dünya temel modelleri, Linux Vakfı'nın OpenMDW 1.1 lisansı altında sunulmakta olup ekiplerin modelleri kendi verileri ve donanımları üzerinde sonradan eğitmelerine olanak tanır. NVIDIA'nın fiziksel yapay zeka yığını ayrıca robotik için Isaac GR00T, otonom araçlar için Alpamayo ve görüntü yapay zekası için Metropolis'i içerir. Doosan Robotics, LG Electronics, Samsung Electronics, Skild AI, Li Auto, Xiaomi, Afari, Centific, Fogsphere, Linker Vision, Milestone Systems ve Yuan gibi şirketler fiziksel yapay zeka uygulamaları için NVIDIA Cosmos üzerinde çalışıyor. Yakın zamanda Japonya'ya genişletilen NVIDIA Cosmos Koalisyonu, dünya modeli geliştiricilerini, yapay zeka geliştiricilerini ve fiziksel yapay zeka liderlerini bir araya getirerek model, araştırma ve değerlendirme yöntemlerine katkıda bulunuyor.