自己参照の画像を生成する Braided Sampling、再帰的な幾何学を保つ手法

論文

自己参照の画像を生成する Braided Sampling、再帰的な幾何学を保つ手法

スポンサーリンク

Braided Samplingが、再帰的な幾何学を保ちながら自己参照の画像を生成した。

この記事のポイント

  • 再帰的画像生成が困難だった
  • 拡散モデルの生成中に幾何変換を織り交ぜた
  • Print Gallery 風画像を生成した

どこで使えるか

自己参照の画像を生成したい人向け。拡散モデルの生成中に幾何変換を織り交ぜる arXivで公開済み コードの公開は記載なし

スポンサーリンク

解説

かみくだいて説明します

Sophia Feldmanらの研究チームが、2026年10月2日に発表した研究で、エッシャーの1956年の版画『版画商店』の幾何学を解析し、テキストから画像を生成するAIモデルを使って自己参照の新作画像を生成する方法を発表しました。
自分自身を描く画像を生成するのは、なかなか難しい作業だったのですね。
そうです。後から変形を掛けると構造が崩れてしまいますし、生成の途中で変形を適用しても、AIがノイズを消す過程で意図した歪みが元に戻されてしまいます。そこで研究チームは、変形を適用する演算と、その逆の演算を交互に繰り返す編み込みの手法を開発しました。
編み込むというのは、糸を交差させて紐を編む作業に似ているということですね。では、その交互のステップは具体的にどう役割を分けられているんですか?
変形前の空間では画像の全体構成を整え、変形後の空間では絵の細部やつなぎ目を整えます。変形前の空間で生成した画像を変形後の空間に写すとき、数学的に正確に元に戻せない部分が出てきます。そこでペンローズの恒等式という規則を使って、変形後の空間に写る画像を、型にはめたように幾何学的に正しい形に切り揃えています。
正確に戻せない部分を、正しい形に切り揃えるイメージですね。変形後の空間だけを対象にノイズを消すのは、まだ見慣れないデータに対する処理になります。
変形後の空間だけを対象にノイズを消すと、AIが想定外の画像を生成してしまう恐れがあります。そこで変形前の空間と変形後の空間を交互に使ってノイズを消すことで、画像の歪みと画像そのものが同時に育つようにしています。これまでにない自己参照の構図を、完成品を変形するのではなく、生成過程から組み立てている点が新しいです。
生成の途中から歪みを組み込むことで、絵の要素が自然に絡み合うわけですね。画像生成AIの開発現場で使われる既存の手法を置き換える話ですか、まだ実験段階の話ですか。
実用化の時期や既存のワークフローとの比較については、今回提示された材料には触れていません。そこはまだ分かっていません。
なるほど。では、この手法で生成される画像の解像度や、処理にかかる計算量については何か分かっていますか。
解像度や計算量に関する数値も、今回提示された材料には記載がありません。そこはまだ分かっていません。
最後に、この手法の応用範囲や、今後期待される展開について教えてください。
応用範囲や今後の見通しについては、今回提示された材料からは読み取れません。材料には『版画商店』に似た構図の生成と、さらに別の幾何学変換を試す記述が残されています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文