画像を生成するモデル SenseNova-U1.5 8B、視覚の理解と作成を統一する話

論文

画像を生成するモデル SenseNova-U1.5 8B、視覚の理解と作成を統一する話

スポンサーリンク

SenseNova-U1.5 8Bが画像の生成と理解を統一。4K まで対応し、コードを公開。

この記事のポイント

  • 8B-MoTでエンコーダー不要の統一モデル
  • 4K解像度まで対応し生成・編集データを強化
  • 構造化形式の学習データは限定的

数字で見る

この記事に出てくる数字

モデル規模 8B
最大解像度 4K

どこで使えるか

画像の生成と理解を自前で試したい人向け。4K解像度に対応し、コードも公開される 学習コードの公開を記載 モデル重みの公開は記載なし

動画を見る

スポンサーリンク

解説

かみくだいて説明します

Haiwen Diaoらのチームが 2026年9月11日、8B-MoT という仕様の SenseNova-U1.5を発表しました。エンコーダーもVAEも使わない構造で、対応する解像度は最大 4K です。
なるほど。エンコーダーを抜いた構造だと、これまでと何が違うんですか。
正確には、画像を数値の羅列に直す中間工程を省略したということです。例えば、写真を見て「猫を描いて」と言われたときに、これまでなら一旦数値に変換してから描き直していたのを、直接絵の具で描くようにしているイメージです。
一旦数値に変換せず、直接描く感じですね。ただ、精度が落ちたりしないんですか。
評価結果を見ると、画像の忠実度や複雑な構図の生成、そして画像内の文字の書き込み精度は大きく向上しています。特に 4K 解像度での出力でも、細部が崩れにくい設計になっています。
4K でも細部が保たれるのは心強いですね。開発者が実際に動かすとなると、コードは公開されるんですか。
はい。学習コードは公開されます。教師あり学習や強化学習、それにオンポリシー蒸留という手法を使った学習手順も全て公開する予定です。
オンポリシー蒸留というのは、少しイメージが掴めません。もう少し分かりやすく言うとどうなりますか。
なるほど。例えばベテランの画家が、見本を見て真似するのではなく、自分で描いた絵を先生が即座に添削して、その場で修正する作業を繰り返す過程だと思ってください。
自分で描いて即座に直してもらう作業ですね。このモデルは、デザイン作業の現場で使えますか。
情報図表の生成や二か国語の文字描画、画像の編集機能が専門化されていますから、デザイン関連の業務に直接組み込める見込みです。
最後に、今後の展開についてですが、他のモデルとの比較データは出ているんですか。
材料には他社モデルとの直接比較の数値は記載されていません。そこはまだ分かっていませんが、今後は学習コードの公開をきっかけに、開発者コミュニティで検証が進むと見られます。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文