Chinees wereldmodel staat bovenaan ranglijst van Li Feifei: Aangepast voor Ascend-rekenkracht, volledige code en gewichten open source
Shanghai Artificial Intelligence Laboratory
Het team van het Shanghai AI Laboratory heeft OpenEM onthuld, een wereldmodel dat op de eerste plaats staat in de VBench-ranglijst van Li Feifei. Het model is aangepast voor Chinese Ascend-chips en is volledig open source (code, gewichten, data), waarmee 3D-scènes gegenereerd en interactief gebruikt kunnen worden.
Het team van het Shanghai AI Laboratory (上海人工智能实验室) heeft het wereldmodel OpenEM gepresenteerd dat op basis van één afbeelding een 3D-scène kan genereren met bewegingsvrijheid, interactieve bewerking en weersregeling. Het model behaalde de eerste plaats in de VBench-ranglijst (team van Fei-Fei Li) met 85,75 punten, waarmee het CogVideoX overtrof. OpenEM is aangepast voor de Chinese chips Ascend 910B (Huawei), maakt gebruik van een driedimensionale Gaussische representatie, een videodiffusiemodel en 6D-video-Parquet voor stabiele generatie van maximaal 300 frames. De volledige code, gewichten en gegevens zijn open beschikbaar onder de MIT-licentie.
Bron: QbitAI 量子位 —
origineel