Veloxが、48チャンク目でアテンションを4.36倍、ノイズ除去を2.43倍高速化した。
この記事のポイント
- 生成後段ほど遅くなる
- 幾何対応で注目をルーティング
- 48チャンクで4.36倍速。WBench158件で0.15点差
数字で見る
この記事に出てくる数字
| 精度差 | 0.15点 |
|---|
どこで使えるか
長い動画生成で後半の遅延を改善したい人向け。学習不要で既存モデルに組み込める コードの公開は記載なし H200 GPUで動作。158ケースの評価結果あり
スポンサーリンク
解説
かみくだいて説明します
Veloxという新しい手法が、arXivに2026年10月16日に出されました。動画の世界モデルで、カメラの動きや操作を長い映像に展開する際、後の方になるほど処理が遅くなる問題を、学習なしのAttentionルーティングで解決します。
なるほど。後の方ほど遅くなるのが課題なんですね。では、作っている人から見ると、この手法は既存のモデルにそのまま組み込める話ですか。
組み込み自体は学習不要なので、既存のモデルに追加で取り付ける形になります。ただし、直前に生成した映像の情報を溜めるメモリを、カメラの視界を立体の板状の塊で管理する仕組みに置き換えるため、システム側の設定が少し変わります。
立体の板状の塊ですか。そこがまだ掴めません。もう少しやさしく言うとどうなりますか。
分かりやすく言うと、今まで映像を生成した履歴を、全部の領域で同じ重みで覚えていたのを、カメラが見ている場所だけ必要な部分で覚えるようにした感じです。本棚で言えば、よく見る本は手前に置いて、使わない本は奥にしまうようなイメージです。
なるほど、使う場所だけ覚えて重さを減らすわけですね。では、性能はどのくらい変わるんですか。
48番目のチャンクに差し掛かった時点で、Attentionの計算がおよそ4.36倍、ノイズ除去の処理がおよそ2.43倍速くなります。評価データは158件のナビゲーションケースで、精度は既存のdenseモデルとの差が0.15ポイント以内です。
精度の差がほぼないまま速度だけ上がるのは大きいですね。では、同じGPUの上で別の処理と同時並行で動くんですか。
はい。H200というGPUの上で、立体の板を作る処理と映像を生成するノイズ除去を、並行して回しています。同じチップの中で役割を分け合うので、余分な待機時間が出ません。
並行して回るからこそ、速度が倍になるんですね。では、研究者から見ると、どこが新しい部分なんですか。
従来は映像の長さが増えるほどAttentionの計算量が増える仕組みでしたが、トークンとブロックの大きさを固定にしたので、計算量が伸び悩む部分を立体の位置関係を使った対応付けで抑え込みました。それ以上の詳細な比較データについては、そこはまだ分かっていません。
長い映像でのメモリ消費の限界はまだ不明なんですね。最後に、実用化に向けて何がまだ分からないか、教えていただけますか。
実用化に向けては、チャンク48でアテンションを4.36倍、デノイジングを2.43倍高速化し、158ケースのWBenchナビゲーション分割ではDense LingBot-Fast-Camと0.15ポイント以内の精度を保てることを示しています。
あわせて、先月には長い視覚ロールアウトを生成するビデオワールドモデルに取り組む別の研究も出ています。
出典
この記事のもとになった情報
- arXiv:Velox: Spatial Memory Makes World Models Efficient
- 公開日:2026-10-16
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。