MiniMax-H3 に 360 度カメラ軌道を教える LoRA、ループする動画生成の話

モデル

MiniMax-H3 に 360 度カメラ軌道を教える LoRA、ループする動画生成の話

スポンサーリンク

MiniMax-H3の FL2VA 版に 360 度カメラ軌道を教える LoRA が公開され、ループする動画生成が可能になった

この記事のポイント

  • 1枚の写真から360度カメラ軌道
  • FL2VAの同フレーム固定を克服
  • ostris/ai-toolkitで動作

数字で見る

この記事に出てくる数字

カメラ軌道 360°

どこで使えるか

360度ループ動画を自作したい人向け。FL2VAの同フレーム固定を克服する Hugging Faceで公開済み FL2VAバリアント専用、ComfyUI命名対応

スポンサーリンク

解説

かみくだいて説明します

pablodawsonさんが2026年9月27日に公開した、MiniMax-H3向けのLoRAです。1枚の写真から、被写体を凍りつかせたままカメラが360度回り、最初に写ったフレームにぴたりと戻る動画を作ります。
1枚の写真からぐるぐる回る動画が作れるんですか?
そうです。ただ、普通の仕組みだと同じ写真を始めにも終わりに置くと動画が止まってしまうんです。このLoRAは、カメラが動くだけで被写体は一切動かないという動きを学習させて、止まるのを防いでいます。
なるほど。でもLoRAって何ですか?
画像を生成するAIの性能を、大きなモデルをやり直すことなく、ちょっとだけ書き換える技術です。大きな辞書の本に、新しい単語のページだけを差し込むようなイメージです。
辞書に新しいページを挟む感じですね。では、研究している人から見ると、これまでの技術とどこが違うんですか?
従来は同じ写真を両端に使うと動画が固まってしまい、別の手法だと最後がどのフレームになるか定まらずつなげられませんでした。この手法は両端を正確に固定しつつ、立体的な軌道を描く動きを教え込んでいるので、動画を長くつなげても継ぎ目が目立ちません。
両端がきちんとなるから、つなげても目立たないんですか。では、実際に組み込む側から聞きたいんですが、動かすのに何が要りますか。
学習ツールとしてostris/ai-toolkitというソフトと、その拡張機能が必要です。データにはインターネットから集めたGaussian splatsというデータを使っています。これは動かない立体の形を記録したもので、周りをカメラが回る様子を動画にしておいたものです。
Gaussian splatsって何ですか?そこがまだ掴めません。
立体の形だけを残して、色や影を消した状態です。紙でできた立体の模型を想像してください。模型の周りをカメラが回るだけで、模型自体は動かさない。その動き方だけをAIに覚えさせるのがこのデータです。
模型の周りを回るだけなんですね。最後に、まだ使えない部分や分からない点はありますか。
静止した3Dシーンから選ばれた高品質な人物ガウシアンスプラットを使い、各スプラットの周りにオービット動画をレンダリングしてデータセットを作成しました。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-モデル