EgoVerse: Li Feifeis Student startet internationalen Datenstandard für verkörperte KI; Guanglun Intelligence ist das einzige chinesische Unternehmen

EgoVerse ist ein kollaboratives Framework und ein Standard für Erste-Personen-Daten zu menschlichen Manipulationen, initiiert von Danfei Xu, einem ehemaligen Doktoranden von Li Feifei und jetzt Assistenzprofessor am Georgia Institute of Technology (Georgia Tech). Das Ökosystem umfasst derzeit 1362 Stunden an Demonstrationsdaten von Menschen, etwa 80.000 Episoden, 1965 Aufgaben, 240 Szenen und 2087 Sammlern. Zu den Partnern gehören Georgia Tech, Stanford, die Eidgenössische Technische Hochschule Zürich (ETH Zürich), die University of California in San Diego (UC San Diego), Meta, Scale AI, Guanglun Intelligence, Mecka AI, MicroAGI und Trace Labs. Guanglun Intelligence ist das einzige beteiligte chinesische Unternehmen. EgoVerse ist nicht als statischer Datensatz konzipiert, sondern als ein lebendiges Framework mit gemeinsamen Datenstrukturen, Aufgaben-Semantik und Evaluierungsmethoden. Jeder Partner bringt einzigartige Expertise ein: Georgia Tech liefert Organisation und Forschungsframework; das REAL Lab der Stanford University entwickelte die Universal Manipulation Interface (UMI), um menschliche Operationen auf Roboter zu übertragen; Meta trägt die Datenbrillen des Project Aria bei; Mecka AI ermöglicht die Datenerfassung über iPhone und ein leichtes Headset; Scale AI sorgt für die großflächige Datenverarbeitung; Guanglun Intelligence bietet ein Qualitätskontrollsystem, das von der Erfassung am Endgerät über die Cloud-Verarbeitung bis zur Simulationsverifikation reicht. Guangluns System umfasst eine agentengesteuerte Echtzeit-Qualitätskontrolle, eine einheitliche Cloud-Plattform, die mit verschiedener Hardware kompatibel ist, sowie eine simulationsbasierte Evaluierung mit seinen Plattformen SimFoundry und RoboFinals. Dieser Qualitätskreislauf stellt sicher, dass die Daten für das Roboterlernen wertvoll sind. Guanglun ist zudem das einzige chinesische Unternehmen, das sowohl an EgoVerse als auch an der Newton-Physiksimulationsinfrastruktur unter der Leitung von NVIDIA, Google DeepMind und Disney Research teilnimmt.