ロボット操作の判断と文脈を管理する RobotUse、実世界での実行から学習する話

論文

ロボット操作の判断と文脈を管理する RobotUse、実世界での実行から学習する話

スポンサーリンク

RobotUseが実ロボットの作業で成功率 45% を達成し、実行から学習して次の作業に生かした

この記事のポイント

  • 既存インターフェースは選択が限定される
  • ロボット行動の指定と修正を中核に設計
  • RoboLabで成功率45%。ただしCaP-Xのみ比較

数字で見る

この記事に出てくる数字

タスク成功率 45%
CaP-X比 6.7pp

どこで使えるか

実ロボットの制御を自前で組む人向け。実行ログから学習して成功率を上げる仕組みがある GitHubで公開済み 星3、実世界実行からの学習対応

動画を見る

スポンサーリンク

解説

かみくだいて説明します

RobotUseというロボットエージェントの制御枠組みが、arXivに2026-10-06に公開されました。ロボットが物理的な動作を指定して修正する際に、計算と文脈と判断を一つにまとめる仕組みです。
なるほど。では、作る人から見ると、いま現場で使われているやり方と比べて、どこが置き換わるんですか?
既存のシステムでは、ロボットに決められた道具の中だけで動かすか、自分で実行コードを書かせる必要がありました。RobotUseは画面で目標と姿勢を視覚的に選べば、裏側で幾何学や動きの計画、制御を自動で処理します。
コードを書かなくていいんですね。過去の長い履歴を毎回読み込まなくて済むのは、かなり楽そうです。
そうです。各サブゴールごとの細かいやりとりは、それぞれのサブエージェントが保持します。実行後に次の判断に必要な情報だけを返すので、過去の長い履歴を毎回読み込む必要がなくなります。
なるほど、必要な情報だけ渡すので、判断の重さが軽くなるんですね。
正確には、既存手法では、ロボットが失敗した時に文脈が膨張して判断が鈍る問題がありました。RobotUseは判断の文脈をコンパクトに保ちつつ、実世界の不正確なフィードバックがあっても、実行から学んで次のタスクに転移できます。
不正確な情報でも学べるんですか。そこがまだ掴めません。
要するに、ロボットが実際に動かした結果にズレがあっても、そのズレを次の試行のヒントとして playbook に書き加えます。例えば料理で塩加減を一度間違えても、次は少し減らすようにメモを更新するイメージです。
なるほど、メモを更新して次につなげるんですね。数字でどれくらい違うんですか。
RoboLabでの評価では、タスク成功率が 45% を記録しました。比較対象の CaP-X を 6.7 percentage points 上回る結果です。
実環境でも学習が効くし、次の課題にも生かせるみたい
はい、GitHub に公開されています。ただし、星 3 程度なので、まだ発展途上の段階です。
最後に、更新した playbook は他のロボットでもそのまま使えますか。
RobotUseは実機での動きから学んで、学んだことを次の課題にも生かせると確かめました。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文