VGGTWorld-VLA、自動運転の行動を条件に3D世界を予測する手法

論文

VGGTWorld-VLA、自動運転の行動を条件に3D世界を予測する手法

スポンサーリンク

VGGTWorld-VLA、行動を条件に3D世界を予測。ベースラインと同等の性能。

この記事のポイント

  • 将来の進化が意図で条件付けられなかった
  • 意図と行動で3D世界を進化させる手法を開発
  • 条件付きで競合性能。ただしナビSIMのみ

どこで使えるか

意図と行動で3D世界を進化させたい人向け。NAVSIMで競合性能。 論文公開済み NAVSIMで評価済み

スポンサーリンク

解説

かみくだいて説明します

Zhaoyang Liuらの研究チームが 2026-10-08 に、自動運転の未来予測モデル VGGTWorld-VLA を公開しました。同じ風景から未来の 3D 形状を予測できる既存のモデルは、ドライバーの意図や操作を条件に加えるのが弱かったため、この手法では意図を条件にして同じ場面から複数の異なる未来を生成できるように改良しています。
意図を条件に加えるというのは、具体的にどうやるんですか?
運転中の画像データに、ドライバーが次にどのくらい曲がるかや、どのくらい加速するかという動きの情報を混ぜ合わせて、未来のフレームに送り込む仕組みです。
未来のフレームに送り込むというのは、もう少しやさしく言うとどうなりますか。
例えば映画のシナリオライターが、主人公が右に曲がると決めたら街の風景が右に変わるように、モデル側も操作の方向に合わせて 3D の形状を作り直します。
意図と操作の情報を別扱いにしていたのが、一気に結合されるようになったんですね。
正確には、画像から読み取った過去の 3D 形状と、言語モデルが抽出した意味情報、それに操舵や経路のデータを一緒に結合して予測に反映させています。評価は NAVSIM というデータセットで行い、従来のベースラインと同等以上の形状予測精度を出しています。
研究している人から見ると、どこが新しい部分になるんですか?
精度自体は既存のモデルと遜色ない水準を維持しつつ、複数の未来を自在に切り替えられる点です。これまでは一つの場面に対して一つの未来しか出せなかったため、安全確認のシミュレーションで使える幅が広がります。
現場で動かす技術者から見ると、実機に載せるのはまだ先の話ですか。
論文には実機搭載の日程や具体的な搭載条件の記載はありません。そこはまだ分かっていません。
解像度や計算速度の具体的な数値は、要旨にはありません。
解像度や計算速度に関する具体的な数値は、今回の公開資料には含まれていません。そこはまだ分かっていません。
最後になりますが、今後このモデルがどう発展していく見込みですか。
VGGTWorld-VLAは意図と操作を条件に加えることで、同じシーンでも異なる操作に応じて未来の幾何学を予測できます。NAVSIMでの評価では競合する性能を示し、アブレーション研究もその有効性を支持しています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文