EgoVerse : l'étudiant de Li Feifei lance une norme internationale de données pour l'IA incarnée ; Guanglun Intelligence est la seule entreprise chinoise

EgoVerse est un cadre collaboratif et une norme pour les données de manipulation humaine à la première personne, initié par Danfei Xu, ancien doctorant de Li Feifei et aujourd'hui professeur assistant à Georgia Tech. L'écosystème comprend actuellement 1362 heures de données de démonstration humaine, environ 80 000 épisodes, 1965 tâches, 240 scènes et 2087 collecteurs. Les partenaires incluent Georgia Tech, Stanford, ETH Zurich, UC San Diego, Meta, Scale AI, Guanglun Intelligence, Mecka AI, MicroAGI et Trace Labs. Guanglun Intelligence est la seule entreprise chinoise impliquée. EgoVerse n'est pas conçu comme un ensemble de données statique, mais comme un cadre vivant avec des structures de données communes, une sémantique des tâches et des méthodes d'évaluation. Chaque partenaire apporte une expertise unique : Georgia Tech fournit l'organisation et le cadre de recherche ; le REAL Lab de Stanford a développé l'Interface de Manipulation Universelle (UMI) pour transférer les opérations humaines aux robots ; Meta contribue avec les lunettes de collecte de données Project Aria ; Mecka AI permet la collecte de données via iPhone et un casque léger ; Scale AI assure le traitement de données à grande échelle ; Guanglun Intelligence offre un système de contrôle qualité couvrant la collecte côté terminal, le traitement dans le cloud et la vérification par simulation. Le système de Guanglun comprend un contrôle qualité en temps réel piloté par des agents, une plateforme cloud unifiée compatible avec divers matériels, et une évaluation basée sur la simulation utilisant ses plateformes SimFoundry et RoboFinals. Cette boucle de qualité garantit que les données sont utiles pour l'apprentissage des robots. Guanglun est également la seule entreprise chinoise à participer à la fois à EgoVerse et à l'infrastructure de simulation physique Newton, dirigée par NVIDIA, Google DeepMind et Disney Research.