Waarom humanoïden moeite hebben met het grijpen van bewegende objecten: ontwikkeling van VLA voor dynamische omgevingen

De meeste robotdemonstraties vinden vandaag de dag plaats in statische omgevingen met stabiele verlichting en vaste camera's, waar VLA-modellen goed presteren. In de echte wereld hebben we echter vaak te maken met bewegende objecten, zoals items op een lopende band. Wanneer een humanoïde robot op ware grootte interactie heeft met bewegende objecten, moet deze ook lopen en zijn evenwicht bewaren, wat de bewegingsberekeningen compliceert. De belangrijkste uitdagingen zijn de latentie tussen observatie en actie, verouderde actieblokken en het onvermogen om de snelheid van een object uit één enkel beeld te bepalen. Recente modellen zoals DynamicVLA pakken deze problemen aan door acties vaker bij te werken en rekening te houden met timing. Voor humanoïde robots is volledige lichaamscontrole essentieel, omdat armbewegingen het evenwicht van de romp beïnvloeden. De RLDX-1-architectuur verwerkt meerdere informatiestromen (beweging, geheugen, fysica, actie) om dynamische manipulatie te verbeteren. Bij MTS Web Services past de auteur RLDX-1 aan om de Unitree G1-humanoïde robot aan te sturen voor volledige lichaamscontrole bij het dynamisch grijpen van objecten op een lopende band, waarbij de taak wordt beschouwd als een gesloten lus: observeren, voorspellen, onderscheppen, uitvoeren, verifiëren, corrigeren.