画像生成の修正をRLで学ぶ UMM-Reflection、SFTよりGenEvalが12点向上

論文

画像生成の修正をRLで学ぶ UMM-Reflection、SFTよりGenEvalが12点向上

スポンサーリンク

UMM-Reflectionが画像生成の修正をRLで学習。GenEvalがSFTより12.05ポイント向上

この記事のポイント

  • SFTは成功率の高い修正パスを見つけられない
  • 統一モデル内で反射軌跡全体に強化学習を適用
  • BAGELでGenEvalが+12.05。ただし訓練データ外

数字で見る

この記事に出てくる数字

GenEval改善 +12.05
WISE改善 +10.97
OneIG改善 +3.48

どこで使えるか

画像生成の修正をRLで学習したい人向け。モデル内完結で外部検証不要 論文に記載なし コード・モデルの公開は未確認

動画を見る

スポンサーリンク

解説

かみくだいて説明します

Yijia Fanらの研究チームが、画像を生成するモデルが自分自身で画像を修正できる手法を、2026年9月29日にarXivに発表しました。画像を見て描き、間違えた部分を直してまた描くループを、強化学習で学ぶUMM-Reflectionという手法です。
模型が自分の絵を直せるのは面白いですね。強化学習で学ぶとき、どの部分を正解として評価しているんですか?
修正前の画像を共有する複数の生成軌跡を並べて、相対的な優位性を比較します。例えば同じ題材で違う修正を試みた場合、最終的に一番上手く描けたパターンを基準に、それぞれの修正の仕方に点数を振るイメージです。
生成軌跡や相対的な優位性という言葉がまだ掴めません。もう少しやさしく言うとどうなりますか。
正確には、同じ題材で複数の修正案を出して、一番上手く描けたものを基準に、他の修正案を比較する仕組みです。修正のたびに外部の判定器が要らなくなるのが最大のメリットです。BAGELベンチマークで、従来の教師あり学習を基盤にした場合と比較してGenEvalが12.05ポイント向上しました。追加でWISEが10.97ポイント、OneIG-Benchが3.48ポイント、T2I-CompBench++が4.63ポイントの改善を確認しています。
学習に使っていない別のテストでも上がっているのが気になります。これは学習データが被っていないからこそ出る数字なんですか?
そうです。学習段階で使わなかったベンチマークでも改善が見られたため、手法自体が汎用的な修正能力を身につけていると判断できます。特定のデータに過剰に適応しているわけではなく、異なる課題でも対応できる柔軟な修正ロジックを獲得した形です。
汎用的な修正能力が身につくのは確かに嬉しいですが、修正に要する時間や計算コストはどうなっていますか。
そこはまだ分かっていません。発表資料には計算量や推論速度に関する具体的な数値は記載されていません。
最後に、この手法が実用化される上で一番期待している点はどこですか。
外部の検証ツールが不要で、モデル単体で修正ループが完結する点は非常に魅力的です。ただし、学習に必要なデータ量や実際の推論負荷については、今後の検証待ちです。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文