物体を認識するFBモデルと報酬プログラム、ヒューマノイドの loco-manipulation を進化させる話

論文

物体を認識するFBモデルと報酬プログラム、ヒューマノイドの loco-manipulation を進化させる話

スポンサーリンク

InterEvolveが、ヒューマノイドのLoco-Manipulationで未習得タスクを自律進化させた

この記事のポイント

  • 人間の報酬設計では能力を引き出せなかった
  • LLMと最適化で報酬プログラムを進化させた
  • 物理ロボットでも自律動作を確認した

数字で見る

この記事に出てくる数字

ロボット名 G1

どこで使えるか

未習得タスクを自前で解決したい人向け。学習不要で既存コントローラを流用できる arxivで公開済み Unitree G1での実機動作を確認

スポンサーリンク

解説

かみくだいて説明します

Zhuo Linらの研究チームが、2026-10-02に論文として公開したInterEvolveは、人間型ロボットの移動と物体操作を、学習していない新しいタスクでも試行錯誤しながら改善していくシステムです。既存の運動能力をそのまま使い回し、何度か挑戦するうちに正解に近づけ、その経験を次に活かす仕組みになっています。
学習し直さずに、その場で試して上達するわけですね。そのとき、ロボットの頭の中身はどのように入れ替わっているんですか?
中身を入れ替えるわけではありません。大きく二つの部品で構成されています。一つは物体を認識する前後方向の行動モデルで、凍らせた体の基礎部分に、新しい目標向けの微調整だけを足し算します。もう一つは報酬プログラムで、段階ごとの目標と到達条件、そして数値の定数から成ります。
凍らせた部分に新しい目標だけを足す、と。報酬プログラムの方は、その数値の定数をどうやって決めているんですか?
大規模言語モデルがプログラム全体の組み立てを、シミュレーションでの実行結果と、これまで正解だったプログラムの集まりを参考に見直します。数値の定数は別の数値最適化の手法で回します。複数のシミュレーションを並行で走らせて候補を確かめるため、試行ごとに新しい動かし方や、既存の動きの組み合わせ方が少しずつ洗練されていきます。
複数のシミュレーションを並行で回す、と。並行で回すことで、具体的に何が速くなるんですか?
並行でシミュレーションを回すことで、多くの候補を確かめられます。正解に辿り着く試行が増えるほど、既存の運動能力を引き出し、改善できます。
シミュレーションで検証済みのプログラムをスキルライブラリとして蓄え、正解に辿り着いた試行の経験も参照して、自然と改良されていく仕組みです。
そうです。試行を繰り返すうちに正解だけが自然に残っていく仕組みです。人間が手で作った報酬では、モデルが持っている運動能力の多くが活かせていませんでした。InterEvolveが進化させたプログラムは、その能力を解放し、場合によっては人間が思いつかない動かし方でも課題をこなします。
では、複雑な場面や長い手順のタスクでも使えるんですか?
使えます。複雑な場面や、長い手順を組み合わせたタスクでも動作し、Unitree G1という実機の上では、ロボット自身の目からの映像だけで自律的に走っています。
実機の上でロボット自身の目だけで動く、と。最後に、この手法が実用になる上で、まだ解けていない点はどこだと考えていますか?
実機での検証はUnitree G1一台に限られており、異なる形状のロボットや、より厳しい屋外環境での安定性については、そこはまだ分かっていません。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文