StepAudio 3 Musicが、5分半の楽曲を計画ベースで生成できるようになった。
この記事のポイント
- 5分30秒の曲をテキストで生成
- ABC記譜でコードやリズムを計画
- Suno V5.5に次ぐQuality Elo 1105
数字で見る
この記事に出てくる数字
| コードブックエントリ数 | 65536 |
|---|---|
| Quality Elo | 1105 |
どこで使えるか
5分30秒の楽曲をテキストで生成したい人向け。ABC記譜でコードやリズムを計画 GitHubページでデモ公開済み
動画を見る
スポンサーリンク
解説
かみくだいて説明します
2026年9月16日にarXivに公開されたStepAudio 3 Musicは、最大で5分30秒までの楽曲をテキスト指示で生成する大規模モデルです。
5分30秒も作れるんですか。作る側の技術者から見ると、これは既存の仕組みを置き換える話ですか。
既存の仕組みを置き換えるというより、音声を 50-Hz のストリームに直し、65536 種類の記号で扱う新しい設計です。最終的に 48-kHz の音声を出力します。
音声を数字の列に直して、それから曲を作るんですね。ただ、数字の列だとリズムや和音が崩れそうですが、そこはどう管理しているんですか。
ABC 記法という楽譜の書き方を中間計画に使っています。曲を作る前に和音やリズムの配置をまず決め、その情報を生成の文脈に組み込む仕組みです。
ABC 記法という聞き慣れない言葉が出て、そこがまだ掴めません。もう少し分かりやすく言うとどうなりますか。
楽譜の一種です。音符の高さやリズムをアルファベットと記号で表して、モデルがまず全体のアレンジをスケッチしてから、実際の音を並べていくイメージです。
スケッチしてから音を並べるんですね。AI を使う側から見ると、実際に自分で歌った声に伴奏を付けてもらうことはできますか。
できます。乾燥したボーカルデータから伴奏を生成する機能があり、さらに既存の曲を別のスタイルで作り直すカバースート合成も対応しています。
自分の声を置いて伴奏を付けたり、好きな曲を別の曲風に書き換えたりできるんですか。
その通りです。学習には直接選好最適化という手法を使って人間の好みに合わせ込んでおり、Artificial Analysis Music Arena Vocals の preliminary リーダーボードでは Quality Elo 1105 を記録し、Suno V5.5 や Mureka に次ぐ位置づけです。
直接選好最適化は具体的に何を調整しているんですか。
モデルが生成した曲を人間が評価したデータを使い、好まれる特徴を直接反映させる手法です。専門的な用語が続きましたが、全体として音楽生成の制御精度を上げたモデルと言えます。
では、最後に今後の展開について聞かせてください。
具体的な公開スケジュールや商用利用の条件については、そこはまだ分かっていません。当面は技術報告書で公開された仕様に基づいた検証が進む見込みです。
出典
この記事のもとになった情報
- arXiv:StepAudio 3 Music Technical Report
- 公開日:2026-09-16
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。