DMADが、1ステップでFID 1.04、4ステップでVBench 85.15の最高値を出した。
この記事のポイント
- 補助模型が不要だった
- 対数密度比を直接学習
- FID1.04など最良値。ただし比較範囲限定
数字で見る
この記事に出てくる数字
| VBench | 85.15 |
|---|
どこで使えるか
生成モデルを高速化したい人向け。補助モデル不要でメモリと計算コストを削減できる GitHubでコード・モデル・デモ公開済み 33Bモデルは4ステップ生成で評価
スポンサーリンク
解説
かみくだいて説明します
Zhengming Yuらの研究チームが、画像生成モデルを高速化する新しい手法 DMAD を、2026年10月2日に arXiv に公開しました。既存の手法が追加のモデルを必要としていたのに対し、DMAD は判別器という二つの頭を使って、生成された画像と本物の画像を見分ける練習だけで学習を進めます。これにより、追加のモデルを動かす分のメモリと計算量を大幅に削減しつつ、ImageNet-64x64 で一ステップの生成で FID 1.04 を達成しました。
追加のモデルが要らなくなるなら、同じ性能をより少ない計算資源で回せることになりますね。その判別器の練習だけで、どうして元の手法と同じ品質の画像が生まれるんですか?
判別器が本物と生成画像の差を正確に判定できる状態になったとき、その判定結果から逆算して画像を修正する方向性が、従来の手法が求めていた数学的な勾配と一致するからです。つまり判別器の練習の成果を、画像を一つずつ作り直す指示に直接変換していることになります。
数学的な勾配とか逆算とか、そこがまだ掴めません。もう少しやさしく言うとどうなりますか?
分かりやすく言うと、判別器が「こっちが本物でこっちが嘘だ」と正しく判定できるようになった時点で、その判定結果を元にして画像を少しずつ正解に近づけていく指示が自然に出てくるということです。追加のモデルを使わずに、判別器の練習結果をそのまま画像の修正作業に転用していることになります。
判定の差を修正の指示に置き換えるわけですね。その置き換えの精度は、ノイズの多い段階でも保てるんですか?
保てるように設計しています。ノイズの多い段階ほど本物と生成画像の差が大きくなる性質を利用して、判別器が出すスコアの差を重みとして使い、教師モデルからの指示を段階ごとに適切に調整しています。
段階ごとの調整を重みでやるんですね。実際にどのくらい品質が上がったんですか?
画像データセット COCO-10K 上で SDXL を四ステップで回した結果、FID 14.47 を記録しました。動画生成の Wan2.1-T2V-14B でも四ステップで VBench の総合スコア 85.15 を出し、比較対象の少ないステップ手法や多ステップの教師モデルを上回っています。音声と画像を同時に生成する MiniMax-H3-33B での人間による評価では、DMD2 を 79.1%、rCM を 84.6% の割合で上回る結果でした。
少ないステップで教師モデルに迫る数値が出ているのは確かに大きいですね。研究している人から見ると、この手法のどこが従来の知識蒸留と違うんですか?
従来の知識蒸留は、教師モデルが出すスコアの差をそのまま真似する形で学習を進めていました。DMAD はその代わりに判別器の判定結果を訓練信号にするため、教師モデルの出力を直接追従する代わりに、データ分布そのものへの適合を判別器の目を通して測る形になります。
分布への適合を判別器の目で測るんですね。実装するときに、追加のモデルを外す代わりに計算負荷が別の場所に集中したりしませんか?
追加のモデルを動かす分の計算量は確実に減ります。判別器の二つの頭を同じ基盤で共有するため、パラメータの増加は抑えられます。具体的な削減の割合については、そこはまだ分かっていません。
具体的な削減率はまだ出ている段階ではないんですね。最後に、この手法を実際の生成パイプラインに組み込むにあたって、研究者が次に注目すべき点はどこですか?
実際、注目すべきは、Wan2.1-T2V-14BやMiniMax-H3-33Bなどでの生成結果です。ImageNetやCOCOだけでなく、動画やマルチモーダルな生成でも高品質が達成されています。
出典
この記事のもとになった情報
- arXiv:DMAD: Distribution Matching as Adversarial Distillation for Fast Visual Generation
- 公開日:2026-10-02
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。