DreamTrueが、反事実的学習でロボットの失敗事例を大幅に減らした。
この記事のポイント
- 既存データでは失敗事例が偏り
- オフライン幾何キャリブレーシと反事実学習で修正
- AgiBotで行動追従が最高。ただし48.12%→6.25%は欠陥率
どこで使えるか
ロボットのシミュレーション環境を構築する人向け。オフライン補正と反事実学習で実機追従性を向上 arXivで論文公開済み プロジェクトページも公開
スポンサーリンク
解説
かみくだいて説明します
Junyan Li たちの研究チームが、ロボットが行動を忠実に再現する動画予測モデル DreamTrue を発表しました。このモデルは複数の視点や異なる形状のロボットに跨って使え、物理法則に反しない動きを予測します。
複数の視点や異なる形状のロボットに跨って使えるということですが、具体的にどうやって行動を忠実に再現するんですか?
行動の軌道を画像の中に条件として書き込み、位置合わせの校正で対象の動画と揃えています。ただ、校正の精度が低いと行動を追えなかったり、失敗事例の不足で成功方向に偏る傾向があったりするのが従来の課題です。
失敗事例の不足で成功方向に偏るんですね。そこはどう解決するんですか?
記録された行動の軌道を書き換えて、より広い範囲の接触状態や動作で動画を作り直す反事実学習という手法を使っています。
反事実学習ですか。もう少しやさしく言うとどうなりますか?
失敗した動きのバリエーションを増やすイメージです。実際の動画にはない組み合わせを意図的に作って学習させます。
失敗のパターンを意図的に増やして学習するんですね。ただ、モデルが作った動画が正しいかどうかをどう評価するんですか?
正解の動画がない状況でも評価できるように、ロボットや物体、相互作用の欠陥を人間が注釈した動画データセットを構築し、強化学習の報酬モデルを訓練しています。そのスコアが物理的に自然な結果へ向かうよう後から学習を導いています。
人間の注釈で強化学習を導くんですね。実際にどのくらい改善したんですか?
AgiBot というロボットで試した結果、人間の評価で見た相互作用の欠陥率が 48.12% から 6.25% に下がっています。行動の忠実さでも現在の最上位の性能を達成し、AgiBot World Challenge 2026 のワールドモデル部門で一位になっています。
48.12% から 6.25% まで下がったんですか。では、他のロボットでも同じように使えるんですか?
はい、DreamTrueは複数の視点や異なる形状のロボットに跨って使えるように設計されています。Agibotでの結果が示す通り、他のロボットへの適用も視野に入っています。
では、研究している人から見ると、これまでに何ができていなかったんですか?
従来のモデルは単一の視点や特定のロボットに限定されがちで、失敗を含む多様な動作を学習するのが難しかったです。この研究はそれらを横断して扱える枠組みを提示したことになります。
最後に、実用化に向けてまだ何が解けていないんですか?
報酬モデルを使った強化学習で、相互作用の欠陥をどこまで減らせるかが問われている。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。