Fei-Fei Lis World Labs startet R2S2R-Engine für Robotertraining in der Simulation

World Labs hat die Real-to-sim-to-real (R2S2R)-Engine zur Schulung und Bewertung von Roboterstrategien veröffentlicht. R2S2R besteht aus zwei Teilen: Real-to-Sim, das reale Roboter, Sensoren, Objekte und Interaktionen in eine virtuelle Umgebung rekonstruiert, und Sim-to-Real, das Strategien in der Simulation schult und bewertet, bevor sie auf echte Roboter übertragen werden. Rein in der Simulation trainierte Strategien erreichten bis zu einer Stunde kontinuierlichen autonomen Betriebs auf echter Hardware ohne menschliches Eingreifen. Die Engine ermöglicht zudem skalierbare Bewertungen, indem sie die Leistung in Simulation und realer Welt angleicht. R2S2R erweitert die räumliche Intelligenz von World Labs von der Generierung interaktiver virtueller Welten auf das Training und den Einsatz realer Roboter. World Labs hat SceniX übernommen, ein Startup, das auf Robotersimulation und -bewertung spezialisiert ist und von Yunzhu Li mitbegründet wurde, einem ehemaligen Postdoc unter Fei-Fei Li. SceniX war zunächst ein Kunde von World Labs' generativem Weltmodell Marble, bevor es übernommen wurde. Die Engine unterstützt mehrere Roboterplattformen, darunter ALOHA, RB-Y1, YAM, Flexiv und xArm, sowie Aufgaben wie Behälterpacken, Kabelführung, Reagenzglastransfer und Einzelobjektgreifen.