3D-modellering in robotica met LLM's: nu haalbaar
Anthropic
Google/DeepMind
OpenAI
Een jaar geleden slaagden grote taalmodellen er niet in om een correct URDF-model voor een robotarm te genereren op basis van STL-bestanden. Tegenwoordig kunnen nieuwere modellen zoals Opus 4.8 en Fable 5 binnen een paar uur een bijna functioneel model produceren, hoewel er nog steeds handmatige aanpassingen nodig zijn.
Een ingenieur testte of moderne LLM's de saaie taak aankonden om een URDF-model te maken voor een DIY-robotarm (PhantomX Pincher-kloon) op basis van STL-bestanden. Een jaar geleden produceerden modellen zoals Sonnet 4, Opus 4, Gemini 2.5 en GPT-4.1 willekeurige, verkeerd uitgelijnde onderdelen. Onlangs werd dezelfde prompt gegeven aan Opus 4.8 en Fable 5. Opus 4.8 schaalde de STL-onderdelen correct en identificeerde hun functies, maar de uiteindelijke oriëntaties van de gewrichten waren nog steeds verkeerd. Fable 5, na het ontvangen van een screenshot van de gebrekkige assemblage, stelde correct de problemen vast en verhielp ze, wat resulteerde in een bijna correct URDF. De ingenieur schat dat de taak nu een paar uur in beslag neemt in plaats van meerdere dagen, hoewel er nog steeds kleine handmatige aanpassingen nodig zijn.
Bron: Habr — хаб ИИ —
origineel
