ロボットの行動をプログラムで組織するHarnessPAI、既存モデルの性能を上げる話

論文

ロボットの行動をプログラムで組織するHarnessPAI、既存モデルの性能を上げる話

スポンサーリンク

HarnessPAIがLIBERO-PROで61.6ポイント向上、RoboCasaでも27.2ポイント向上

この記事のポイント

  • 行動モデル偏重で知覚・推論が削がれていた
  • コードを介してプログラムレベルで実行・進化させる
  • LIBERO-PROで61.6点向上。ただしモデル再学習なし

数字で見る

この記事に出てくる数字

LIBERO-PRO 61.6-point
RoboCasa 27.2-point
学習データ 38.8-point

どこで使えるか

ロボット制御のプログラムを組む人向け。モデル再学習不要で知覚・推論を補完 arXivで公開済み コードの公開は記載なし

スポンサーリンク

解説

かみくだいて説明します

最近、ロボットが実際に物を動かすPhysical AIが注目されていますが、結局のところロボットの「手先」の制御だけ強化しても、周囲の状況を正しく理解できなければ意味がないですよね?
確かにその通りです。従来のアプローチは観測から低レベルの制御信号を出力する行動モデルに集中しすぎており、知覚や推論の能力が削がれやすいという課題があります。
だとすると、行動モデルだけを鍛えても、複雑なタスクやシーンが変わっただけで失敗してしまうリスクがどうしても残ってしまうんですよね?
そうです。強固な行動モデルでも、環境の摂動や長時間のタスクに対して脆弱なままでは、実環境での信頼性は担保できません。
そこでarXivに公開されたHarnessPAIというフレームワークが注目されています。コードを実行可能なインターフェースとして扱い、プログラムが行動の土台を構成する仕組みです。
そのアプローチって、具体的にはどういう仕組みなんですか?
2つの時間軸で動作します。ロールアウト内では固定されたプログラムが実行をガイドしオープンループで処理を進め、ロールアウト間では実行フィードバックを使ってプログラムを修正し、失敗パターンを再利用可能なスキルとして蓄積するクローズドループで進化させます。
なるほど!プログラムが設計図になって、実際の動作中に修正もできるんですか!
実際の性能向上はどれくらいあるんですか?
再学習なしで、LIBERO-PROベンチマークでπ₀.₅を61.6ポイント、RoboCasaの原子タスクでWorldDreamerを27.2ポイントそれぞれ上回る成功率を達成しています。収束したプログラムから収集したエキスパートデータでπ₀.₅をファインチューニングすると、LIBERO-PROの成功率がさらに38.8ポイント向上します。
でも、特定のロボットやタスクに最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
確かにその通りです。ただし、プログラムが収束すればオンラインの推論が不要になり、収集した専門データでモデルをファインチューニングすれば成功率が大幅に向上します。
実際の開発現場で試すにはどうすればいいんですか?
公開されたGitHubリポジトリからコードとドキュメントを取得できます。まずはデスクトップロボットアームの環境でベースラインを構築し、プログラム設計から始めてみてください。
検証範囲の限界は残りますが、知覚・推論・行動を統合する実行可能ハッチの考え方は、Physical AIの次の段階を切り拓く可能性を秘めています。
行動モデルだけでなく、実行環境の設計そのものが進化していくんですね!楽しみです!

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文