Google lanceert drie nieuwe modellen om robots om te toveren tot 'allround-werkers': snelle aanpassing, volledige lichaamscontrole en teamwerk

Op 30 juli introduceerde Google DeepMind Gemini Robotics 2, een nieuwe versie van zijn serie AI-modellen die zijn ontworpen om verschillende robots te besturen, waaronder humanoïden, waardoor ze zich autonoom kunnen aanpassen aan onvoorspelbare omgevingen en over elke actie kunnen redeneren. Dit maakt een breed scala aan taken mogelijk, zoals het opruimen van afval en het oppakken van een gieter. De update voegt intelligente volledige lichaamscontrole, geavanceerde behendigheid en samenwerking tussen meerdere robots toe, wat een nieuwe fase in de robotica markeert. Het vorige Gemini Robotics-systeem kon robots aansturen om fijne handelingen uit te voeren, zoals het sluiten van zakken en het vouwen van origami, maar alleen met robotarmen en -handen. De nieuwe modellen kunnen op het apparaat draaien en zich binnen enkele uren aanpassen aan volledig nieuwe robotlichamen, waarbij aangeleerde vaardigheden worden overgedragen naar verschillende platforms. Ze stellen ook verschillende robots in staat om samen te werken om taken sneller te voltooien. Google ziet dit als een mijlpaal richting fysieke AGI, waarbij robots alles kunnen doen wat een mens kan. Demovideo's tonen de Apptronik Apollo 2-humanoïde die opdrachten opvolgt zoals het plaatsen van een gieter op een groene doos, en robots die taken uitvoeren zoals het plaatsen van boeken op planken, het opruimen van borden en het in een radio stoppen van cassettes. Het systeem ondersteunt zeer bekwame vijfvingerhanden, zoals de SharpaWave-hand met 22 vrijheidsgraden op Apollo 2, die taken uitvoert zoals het leggen van knopen en het sluiten van ritssluitingszakken, evenals standaard tweevingerige grijpers zoals de Franka Duo. Google rapporteert succespercentages tussen 45,7% en 76,3% voor drie categorieën van volledige lichaamsmanipulatie, 74,2% tot 89,6% voor drie categorieën met de Franka Duo-grijper, en 32% tot 92% voor taken met meerdere vingers. De video's tonen volledig autonome robots, in contrast met Elon Musk's Optimus die naar verluidt gebruikmaakte van externe operators. Deze robots zijn echter niet multifunctioneel; elke taak wordt specifiek getraind met behulp van teleoperatie, videoVoorbeelden en simulatie. De aanpak van Google omvat drie verschillende modellen: Gemini Robotics 2, een VLA-model dat visuele en taalkundige invoer omzet in motorische controle voor volledige lichaamscontrole; Gemini Robotics ER 2, een belichaamde redenerende VLM die fungeert als het brein-agent voor communicatie, planning van meerstapstaken en het mogelijk maken van robotsamenwerking; en Gemini Robotics On-Device 2, een VLA-model voor lokale uitvoering met snelle aanpassing aan nieuwe robotlichamen, geërfd van Gemini Robotics 1.5. Voor de veiligheid introduceerde Google ASIMOV-Agentic, een benchmark voor agentische veiligheidsorkestratie en onzekerheidsresolutie, die het vermogen van de agent meet om onveilige toolcalls te weigeren en taakvoltooiing te voorspellen. Gemini Robotics ER 2 is het veiligste robotmodel tot nu toe, dat de nabijheid van mensen detecteert en robots dienovereenkomstig stopt. De software draait op robotlichamen, waarvan er vele in China worden gemaakt, ondanks recente Amerikaanse beperkingen op in China gemaakte robots.