EXAONE Demandが公開。需要予測で36のモデルを22データセットで上回る性能。
この記事のポイント
- 需要系列は既存データセットに少ない
- 1130万系列とアダプターで学習
- 22データで36モデルを上回る
数字で見る
この記事に出てくる数字
| シリーズ数 | 11.3M |
|---|---|
| 観測数 | 48.4B |
| データソース | 73 |
どこで使えるか
需要予測の基盤モデルを自前で組む人向け。アダプターで4つの需要クラスに対応。 arXivで論文公開済み モデルの重み公開は記載なし
動画を見る
スポンサーリンク
解説
かみくだいて説明します
需要予測の分野って、在庫切れや季節変動のデータが不足しがちで、私の専門分野でも既存モデルだと精度が出ないんですよね?
確かにその通りです。需要データは短い履歴や頻繁なゼロ値、在庫切れによる打ち切り現象など、一般的な時系列データとは異なる性質を持っています。
だとすると、大規模データで学習する一般向けの時系列基盤モデルでは、需要予測には対応しきれないってことですよね?
そうです。既存モデルは多様なドメインから学習しますが、需要特有の事象を記録していない外部イベントやデータに表れない振る舞いを捉えきれないのが現状です。
そこでarXivに公開されたEXAONE Demand 1.0です。需要特化のコーパスと、需要対応型のアダプターを組み合わせた新しいアプローチが提示されています。
そのアプローチって、具体的にはどういう仕組みなんですか?
一般ドメインのバックボーンを学習中に固定したまま、滑らか・断続的・エラティック・ランプの4クラスに対応する低ランクブランチを接続します。入力の8つのスケールフリー統計量を読むルーターが、各ブランチの寄与度を動的に決定する仕組みです。
4つのタイプに合わせて専門的な枝分かれが走るんですね!まるで専門医のセカンドオピニオンみたいで納得です!
正確にはバックボーンは固定されたまま、アダプター部分だけが必要に応じて重みを調整する設計です。
改善効果はどのくらいあるんですか?
73ソースから集めた1,130万本の系列と484億の観測値、それに合成データで学習したモデルが、22のデータセットで36の既存TSFMを凌駕しています。実データと合成データの組み合わせが、合成データ単独よりもさらに精度を向上させています。
36モデルを凌駕って、かなりの差なんでしょうか?
実データと合成データの組み合わせが、合成データ単独よりさらに良い結果を出しています。
でも、4つの需要クラスに最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
その通りです。8つの統計量に基づくルーティングは汎用性を犠牲にする面があり、設計コストと計算リソースの増大は否めませんが、需要予測という特化領域では有効な妥協点と言えます。
実際の試し方はどうすればいいんですか?
22のデータセットで36のTSFMを上回る結果が出ています。実データと合成データの組み合わせが特に有効でした。
22のデータセットで検証しましたが、需要データ特有の外部イベントや在庫切れによる制限への対応が課題です。
22のデータセットで36のモデルを上回り、実データが合成データよりさらに効果的でした。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。