ロボティクスにおけるLLMによる3Dモデリング:実用可能に
Anthropic
Google/DeepMind
OpenAI
1年前、大規模言語モデルはSTLファイルからロボットアームの正しいURDFモデルを生成できませんでした。現在では、Opus 4.8やFable 5などの新しいモデルが、数時間でほぼ機能するモデルを生成できるようになりましたが、手動での調整がまだいくつか必要です。
あるエンジニアが、DIYロボットアーム(PhantomX Pincherクローン)用のURDFモデルをSTLファイルから作成するという退屈なタスクを、最新のLLMが処理できるかどうかをテストしました。1年前、Sonnet 4、Opus 4、Gemini 2.5、GPT-4.1のようなモデルは、ランダムで位置がずれたパーツを生成しました。最近、同じプロンプトをOpus 4.8とFable 5に与えました。Opus 4.8はSTLパーツを正しくスケーリングし、その役割を特定しましたが、最終的な関節の向きはまだずれていました。Fable 5は、欠陥のあるアセンブリのスクリーンショットを受け取った後、問題を正しく診断して修正し、ほぼ正しいURDFを生成しました。エンジニアは、このタスクは数日ではなく数時間で完了するようになり、小さな手動調整がまだ必要だと見積もっています。
出典: Habr — хаб ИИ —
原文
