JEPAの潜在空間で全ダイナミクスを予測するLeWAM、ロボット制御と計画に使う話

論文

JEPAの潜在空間で全ダイナミクスを予測するLeWAM、ロボット制御と計画に使う話

スポンサーリンク

LeWAMが、JEPA潜在空間でロボット制御と計画を両立する世界モデルになった

この記事のポイント

  • 再構築ベースの表現はノイズが多く予測が複雑だった
  • 4モードでエンドツーエンドに学習する双方向Transformerを作った
  • 閉ループ性能はフローマッチング政策に匹敵する

どこで使えるか

ロボット制御と計画を両立させたい人向け。4モードでエンドツーエンド学習する双方向Transformerを使う arxivで公開済み 実機での動作確認は記載なし

スポンサーリンク

解説

かみくだいて説明します

Shashank Hegdeらの研究チームが、ロボットの状態と次の動作を同時に予測するモデル、LeWAMを発表しました。decoderを使わないJEPAの潜在表現を基に、未来の予測から逆算、そして政策予測の4つのモードを一度に学習する双方向のトランスフォーマーです。
4つのモードを一度に学習するんですか? 従来のモデルはそれぞれ別々に訓練していたんでしょうか。
はい、従来のワールドアクションモデルは再構成に基づく表現を使うことが多く、そこに含まれる雑音や冗長な情報が以後の予測を難しくしていました。LeWAMは一つのトランスフォーマーで前方予測・後方予測・逆動力学・方策予測を統合し、学習を別々のモードに分けることなく、エンドツーエンドで訓練します。
なるほど、一つにまとめることで効率が変わるんですね。では、ロボットの状態を読み取る精度はどうなるんですか。
前方予測だけのモデルや、画像をそのまま再現するモデルを比べても、ロボットや物体の状態をより正確に読み取れます。視界に入ってくる余計な映像のノイズも、従来の方法より確実に無視する仕組みになっています。
余計な映像を除外して本質だけ捉える、ということですね。では、実際にロボットを動かす場面では、既存のポリシーと比べてどうなりますか。
同じサイズのエンコーダーで訓練したフローマッチングのポリシーと、閉ループ評価で同等の性能を出します。しかも世界モデルとしての機能も併せ持つので、予測と制御を一つのシステムで賄うことができます。
予測と制御を一つで賄えるのは大きいですね。では、計画を立てる段階で、実際にどう動くんですか。
従来の手法は生の動作をそのまま取り出すと、モデルのズレを悪用して精度が落ちます。LeWAMはポリシーヘッドのノイズ空間の中で計画を立てることで、閉ループの性能を大きく引き上げます。
ノイズ空間の中で計画を立てる、というのがまだ掴めません。もう少し分かりやすく言うとどうなりますか。
例えば、目標地点まで直線で行こうとして壁にぶつかる代わりに、周囲の環境の揺らぎを考慮して迂回経路を事前にシミュレートする感じです。モデルが自信を持てない部分をノイズとして扱い、そこで最適解を探す仕組みです。
自信を持てない部分をあえて考慮して、安全な経路を見つけるんですね。最後に、このモデルは現在どこまで実用段階にあるんですか。
実験環境での検証は完了していますが、実機への組み込みや他のプラットフォームへの適用については、そこはまだ分かっていません。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文