ロボットの手元カメラの向きに強いVLA WARP-VLA、pi-0.5の成功率を上げる話

論文

ロボットの手元カメラの向きに強いVLA WARP-VLA、pi-0.5の成功率を上げる話

スポンサーリンク

WARP-VLAが、手元カメラの向きが変わっても成功率を 39.2% から 78.3% に上げた

この記事のポイント

  • 手首カメラの配置変化にVLAsが弱い
  • MoEで視点別変換を学習するWARP-VLAを開発
  • LIBEROで成功率78.3%。実機でも転移成功

どこで使えるか

手首カメラの取り付け位置が毎回違う人向け。カメラパラメータ不要でロバストな方策が使える 論文付属のプラグインで利用可能 LIBEROベンチマークでの評価結果

スポンサーリンク

解説

かみくだいて説明します

Junmyeong Leeらの研究チームが 2026-10-08、ロボットの手首カメラの角度が変わっても正しく動く人工知能「WARP-VLA」を発表しました。従来の手法では取り付け位置がわずかにずれるだけで成功率が半分以下に落ちる問題を、専門知識を分けた設計で解決しています。
取り付け位置がわずかにずれるだけで成功率が半分以下になるんですか? 正確に合わせるのが難しいということですね。
その通りです。固定カメラなら位置を測れば対応できますが、ロボットと一緒に動く手首カメラはマウントのズレが細かな形状の読み取りを狂わせてしまいます。そこで MoE という仕組みを導入しました。専門知識を別々の部屋に持たせ、ルーターがカメラの写り込み具合を見てどの部屋の答えを使うか選ぶのです。机の引き出しをいくつか用意して、必要なものだけ取り出すイメージです。
引き出しから必要なものだけ選ぶんですね。そのルーターは、カメラの正式な角度のデータが要らないんですか?
要りません。従来の方法ではカメラの取り付け角度の数値を別途入力する必要がありましたが、WARP-VLA は写っている画像の情報だけから自動的に判断します。この仕組みで LIBERO という基準テストを使い、pi-0.5 というモデルの成功率を 39.2% から 78.3% に引き上げました。
成功率がおよそ倍になったということですね。シミュレーションで学んだ対応が、実際のロボットでもそのまま使えますか。
使えます。シミュレーション環境で得た特徴の適応が、異なる設置環境の実機テストでも成功しています。技術者の方が既存のシステムに組み込むためのコードも、差し込むだけで動く形式で公開しています。
差し込むだけで動くコードが公開されるのは、現場の技術者にとって助かります。ただ、角度が変わった時の対応は全てカバーできるんですか。
全ての角度の変化に対応できるかは、まだ検証が完了していません。公開されている基準テストでは、特定の範囲でのズレに対して安定した結果が出ています。それ以上のズレや全く異なる作業環境での性能については、そこはまだ分かっていません。
特定の範囲での安定性が確認できているんですね。今後、より広い角度のズレにも対応できるようにするには、どのような方向で研究が進みますか。
実ロボット実験ではシミュレーションで得た適応が実環境でも機能し、公開されたベンチマークやコードで実環境のカメラ配置データへの対応が容易になります。
実環境のデータを集めて対応する方向なんですね。最後に、一般のユーザーが自分で使えるようになるのは、まだ先ということですか。
実環境での実験では、シミュレーションで得られた特徴レベルの適応が多様な実環境への転移に成功しています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文