Cinco Principais Universidades Lançam Primeiro Benchmark para Modelos de Mundo de Três Vistas em Robótica
Um consórcio de cinco universidades chinesas de destaque lançou o primeiro ranking para modelos de mundo de três vistas em robótica, chamado Desafio TriWorldBench. O benchmark avalia os modelos quanto à consistência multi-visão, execução de tarefas e compreensão física, com resultados iniciais mostrando CASIA-DRL, Equipe de Inteligência Espacial TONGJI e Fysics AI liderando o grupo.
O Desafio TriWorldBench, iniciativa conjunta da Universidade de Pequim, Universidade de Tsinghua, Universidade de Beihang, Universidade Jiao Tong de Xangai e Universidade de Ciência e Tecnologia da China, divulgou seu primeiro ranking semanal. É o primeiro benchmark de avaliação para modelos de mundo tridimensional (three-view) em robótica, com o objetivo de estabelecer um sistema de avaliação mais abrangente para modelos de mundo incorporados, impulsionando-os de 'geração visual' para 'compreensão do mundo'. O benchmark avalia os modelos quanto à consistência multivista, execução de tarefas e compreensão do espaço físico, sendo aberto a equipes de pesquisa globais. Na primeira semana, os modelos WoVR_Plus, do CASIA-DRL, BetaBWM, da Equipe de Inteligência Espacial Tongji, e Fysiverse-Video, da Física AI, ocuparam as três primeiras posições. O benchmark foca na geração e compreensão de vídeos de visão frontal (head view), visão do pulso esquerdo (left-wrist view) e visão do pulso direito (right-wrist view). Utiliza 500 episódios síncronos de três visões cobrindo 50 tarefas de manipulação robótica e agrega 19 sinais de avaliação em seis dimensões numa pontuação total chamada TWB-Score. O sistema também constrói anotações STATE (estado) a partir de trajetórias de referência para avaliar movimento e imobilidade. O ranking é atualizado regularmente, e os organizadores incentivam a participação global por meio do site oficial e do repositório no GitHub.
Fonte: QbitAI 量子位 —
original
