Le moteur R2S2R de World Labs de Fei-Fei Li pour former des robots en simulation

World Labs a dévoilé le moteur Real-to-sim-to-real (R2S2R) pour l'entraînement et l'évaluation des politiques robotiques. R2S2R se compose de deux parties : Real-to-Sim, qui reconstruit les robots, capteurs, objets et interactions du monde réel dans un environnement virtuel, et Sim-to-Real, qui entraîne et évalue les politiques en simulation avant de les déployer sur des robots réels. Les politiques entraînées uniquement en simulation ont atteint jusqu'à une heure d'opération autonome continue sur du matériel réel, sans intervention humaine. Le moteur permet également une évaluation à grande échelle en alignant les performances en simulation et dans le monde réel. R2S2R étend l'intelligence spatiale de World Labs, passant de la génération de mondes interactifs virtuels à l'entraînement et au déploiement de robots réels. World Labs a acquis SceniX, une start-up spécialisée dans la simulation et l'évaluation de robots, cofondée par Yunzhu Li, ancien post-doctorant sous la direction de Fei-Fei Li. SceniX était initialement un client du modèle de monde génératif Marble de World Labs avant l'acquisition. Le moteur prend en charge plusieurs plateformes robotiques, notamment ALOHA, RB-Y1, YAM, Flexiv et xArm, ainsi que des tâches telles que le rangement de caisses, le câblage, le transfert de tubes à essai et la saisie d'objets uniques.