MIRAが、オープンソースの音楽生成を商用システム並みの意図適合性能に引き上げた
この記事のポイント
- 関連スコアは意図を隠す
- 意図を基準に改善するエージェント
- オープンソースが商用に追いつく
どこで使えるか
意図の一致を自前で評価・改善したい人向け。商用モデルに依存せず改善可能 論文公開済み
スポンサーリンク
解説
かみくだいて説明します
Zekai Liuらの研究チームが、テキストから音楽を生成するAIの意図合わせを改善する手法MIRAを発表しました。単なる音の良し悪しだけでなく、ユーザーが求める楽器やリズム、曲の展開にどれだけ合致しているかを個別に測る仕組みです。
なるほど、一曲の通し点数ではなく、細かく項目を分けて評価するんですね。その項目は具体的にどう決めるんですか?
既存のプラットフォームに出回っている実際のリクエストを集めて、音楽の専門家がチェックしました。ユーザーが文章で書いた要望と、そこから読み取れる音楽的な意図を別々の項目として整理しています。
専門家が項目を作る手間がかなりかかりそうです。自動で項目を抽出する機能は入っているんですか?
項目の作成は専門家が手掛けますが、生成された音楽を項目ごとに判定し、外れた部分を修正する作業はAIが担当します。中身が見えない生成AIに対して、レシピ本を少しずつ書き換えては試し、正解に近づける方向へ探索を絞る仕組みです。
レシピ本を書き換えて正解を探す、つまり試行錯誤で曲を作り上げるんですね。その試行回数はどれくらいになるんですか?
試行回数は計算資源の上限内で決まります。外れた項目を修正する方向へ木構造で探索を続けます。これによって、同じ生成AIでも意図に沿った曲の生成成功率が上がります。
計算資源の上限を設けて探索を絞る、つまり無駄な試みを減らすことで効率を保つんですね。実際にどのくらい性能が上がったんですか?
一般公開のモデルにこの手法を適用したところ、SunoやMurekaといった商用システムと同等の性能を出しました。項目ごとの判定結果を見ると、楽器の指定やリズムの正確さが特に改善しています。
一般公開のモデルが商用システムと肩を並べる結果が出たのは大きいですね。開発者が組み込む場合、特別な環境は要るんですか?
MIRAは、決まった回数の試行の中で、内部構造を見ないまま使う生成器に対してプロンプトの修正を探していくエージェントです。プロジェクトページで詳細を見られます。
外部のモデルをそのまま使って評価と修正を回せるんですね。最後に、今後の展開で何がまだ見えていないんですか?
評価項目は音楽専門家の手によるもので、これにより項目を意図の出どころや音楽の観点ごとに個別採点できます。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。