アクションの違いを保持する世界モデル AD-WM、プランニングの精度を上げる話

論文

アクションの違いを保持する世界モデル AD-WM、プランニングの精度を上げる話

スポンサーリンク

AD-WMは、同条件の LeWM と比べてハードスタート成功率を 3.7% から 52.0% に上げた

この記事のポイント

  • 事実予測が得意でも計画に役立たない
  • 逆動力学で行動情報を保持する世界模型
  • OGBenchで成功率52.0%。ただしハードスタート

数字で見る

この記事に出てくる数字

ハードスタート成功率 3.7%→52.0%
環境数 5

どこで使えるか

反事実推論で行動選別を正確に行いたい人向け。事実予測精度だけでなく行動情報を保持する設計が要る GitHubで公開済み V-JEPA 2のエンコーダーは凍結

スポンサーリンク

解説

かみくだいて説明します

世界モデルを使ってロボットの動作を予測する技術が注目されていますが、実際のロボット制御に直結するんですか?
確かにその通りです。予測精度が高いモデルでも、ロボットの行動選別には必ずしも役立たないのが現状です。
既存の手法は予測だけ上手くて、結局ロボットの判断には生かせていないんですか?
その通りです。従来のモデルは事実通りの遷移を正確に再現することに最適化されていますが、同じ状態から別の行動を選別する能力が不足しています。
arXivで公開されたAD-WMは、反事実的モデル予測制御に対応するjoint-embedding世界モデルです。残差潜在ダイナミクスと行動回復正則化を組み合わせました。
そのアプローチって、具体的にはどういう仕組みなんですか?
地図のルート検索に例えると分かりやすいです。目的地までの最短経路だけでなく、分岐点での選択肢を明確に区別する機能を加えています。条件付き相互情報量に基づく正規化された回復目標と逆ダイナミクスを補助ヘッドとして導入し、行動情報を保持します。
分岐点での選択肢を区別するイメージですね!テスト時は補助ヘッドを外すんですか?
はい、テスト時には補助ヘッドを破棄するため、既存の制御パイプラインを維持したまま適用可能です。
改善効果はどのくらいあるんですか?
OGBench-Cubeのハードスタート成功率は3.7%から52.0%に向上し、5つのシミュレーション環境のうち4つで平均成功率を改善しました。実機へのゼロショット転移では、Frankaアームの基本的なピッキング成功率が42.2%から71.1%に達しています。従来手法と比べた性能差は明確で、事実予測誤差や行動ランキングだけでは成功順序を追従せず、CEMに準拠したエリートレグレットが成功率に最も近い挙動を示すことが計画診断で確認されています。
でも、特定の環境やエンコーダーに最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
V-JEPA 2のエンコーダーを凍結し、DROIDでポストトレーニングすることで、ラボ固有の適応なしに基本ピッキング・プレイスの成功率が42.2%から71.1%に向上しました。
実際の試し方はどうすればいいんですか?
論文ページに追加動画とコードが公開されています。詳細はウェブサイトでご覧いただけます。
計画用の世界モデルは反事実的選択に必要な行動依存の差異を保持すべきという結論です
基本ピッキング成功率が42.2%から71.1%に向上しました

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文