動画生成の不要な処理を省く Speculative Forcing、推論速度を上げる手法

論文

動画生成の不要な処理を省く Speculative Forcing、推論速度を上げる手法

スポンサーリンク

Speculative Forcingが、動画生成の不要な処理を省いて推論速度を上げた。

この記事のポイント

  • 全トークンを最終段まで処理していた
  • ドラフトと検証器で早期終了を判断
  • LongLiveで1.5倍速。Lingbot-World 2.0で1.35倍速

数字で見る

この記事に出てくる数字

LongLive速度 41.7fps
LongLive速度 37.8fps
Lingbot速度 24.5fps

どこで使えるか

動画生成モデルの推論速度を上げたい人向け。学習不要と学習ありの両設計に対応。 GitHubで公開済み 星2、コード公開先URLあり

スポンサーリンク

解説

かみくだいて説明します

arXiv に 2026 年 10 月 16 日に出された論文で、動画生成の仕組みを効率化する Speculative Forcing という手法が提案されました。動画生成では一つ一つの情報を均等に通すステップを、すでに完成に近い情報はそのまま凍結して次のステップに進み、まだ微調整が必要な部分だけ最後まで処理することで、計算量を大幅に減らします。
なるほど。均等に通す必要がない情報を見分けるには、どうやっているんですか?
二つの見分け方があります。一つは学習を必要としない方法で、現在の情報と完成した動画の似ている度合いや、ステップを重ねても変わらない安定性を見て判断します。もう一つは、すでに完成した動画生成モデルが持つ中間の特徴を読み取って、残りのステップでどれだけ情報が更新されるかを推し測る学習済みの方法です。
なるほど。学習済みの方法は、完成したモデルの内部を覗いて判断するわけですね。
正確にはその通りです。完成したモデルが持っている特徴量から、まだ更新される余地があるかどうかを数値で割り出すイメージです。凍結された情報はそのまま出力として固定されますが、前後の動画の情報だけは残すので、後から処理される他の情報にとっての文脈として使われ続けます。
文脈として残すんですね。では、実際にどれくらい速くなるんですか?
短い動画や長い動画、世界を生成するモデルでそれぞれ試した結果、品質を損なわずに計算を減らせます。LongLive という評価では、四ステップの生成器と同等の品質を、およそ 1.7 ステップで達成し、41.7 と 37.8 fps で 1.5 倍以上速くなりました。
1.5 倍以上速くなるんですか。カメラが動く場面でも変わらぬ品質を維持できますか。
Lingbot-World 2.0 という評価では、カメラの動きで視界が次々と変わる環境でも、およそ 2.5 ステップで品質を維持し、24.5 fps で 1.35 倍速くなりました。コードは naver-ai/speculative-forcing という GitHub のリポジトリに公開されています。
では、この手法は既存のモデルに後から組み込める話ですか。
学習済みの方法では、すでに完成した動画生成モデルの中間特徴を読む形で動作するため、既存のモデルに見分け役だけを新たに追加する形で組み込むことが可能です。学習を必要としない方法であれば、追加の学習なしにそのまま適用できます。
追加の学習なしに使えるんですね。最後に、まだ解けていない課題はありますか。
動画生成の品質を維持しつつ計算量を大幅に削減することに成功し、特にカメラモーションが変化する環境でも1.35倍高速化を達成しました。
あわせて、今月にはオートレジressiveな動画生成に取り組む別の研究も出ています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文