金融ボラティリティ予測に線形時間エンコーダを使う HAN-Mamba、推論コストを下げる話

論文

金融ボラティリティ予測に線形時間エンコーダを使う HAN-Mamba、推論コストを下げる話

スポンサーリンク

HAN-Mambaが公開。パラメータ33%減で精度向上、推論は線形時間で高速。

この記事のポイント

  • 従来は二次attentionエンコーダーだった
  • Mambaエンコーダーに置き換えた
  • 240バケ拡張でOptiver0.1927

どこで使えるか

高頻度ボラティリティ予測を自前で組む人向け。推論コストを抑えつつ精度を上げたい場合。

スポンサーリンク

解説

かみくだいて説明します

Mihai Bogdan Deaconuらの研究チームが 2026年10月8日に arXiv に公開した HAN-Mamba は、金融市場の価格変動を予測する新しいモデルです。従来モデルを 33% 少ないパラメータで上回り、精度が向上したということです。
精度が向上したんですね。従来のモデルと比べて、どこが新しくなったんですか?
各時間スケールのデータを取り込む部分で、計算量が多い Transformer を省き、selective state space という仕組みに入れ替えた点です。専門的には選択的状態空間モデルと言いますが、要するに情報を選別して記憶するフィルターのようなもので、値動きが長く続く性質と、突然変わる性質の両方に対応しやすくしたということです。
情報を選別するフィルターですね。実務で使う場合、計算リソースはどれくらい抑えられるんですか。
誤差の数値ではHAN-Mambaが0.1942で、従来のHAN-Tが0.1965でした。さらに高速なデータを取り込む範囲を60から240まで広げても誤差が0.1927に抑えられ、注意機構の仕組みでは頭打ちになる範囲でも誤差が下がっています。パラメータ数を33%減らしながら精度を上げているということです。
リアルタイム運用が可能になるわけですね。実際のシステムに組み込むには、何が足りないんですか。
論文では Optiver Realized Volatility Prediction というベンチマークで検証した結果が報告されていますが、実際の取引システムへの組み込み方法や追加要件について、そこはまだ分かっていません。
では、複数の時間スケールのデータをどう統合しているんですか。
短期、中期、長期のデータをそれぞれ別のエンコーダーで処理し、最後に 3 つのトークンだけを扱うアテンション機構で統合しています。アテンションを統合部分だけに残したため、計算コストを大幅に削減しながら、異なる時間スケールの情報を正確に重み付けできているということです。
時間ごとに処理を分けて、最後にまとめて判断する仕組みなんですね。
その通りです。構成要素を一つずつ変えた検証でも、エンコーダーの入れ替えが性能向上の主因であり、階層構造の考え方は他の系列モデルにも応用可能であることが確認されています。統合部分のアテンション機構が最適な設計であるという結論も出ています。
最後に、実用化へのスケジュールは決まっているんですか。
今後の予定は論文に書かれておらず、分かっているのは、エンコーダの入れ替えが階層構造を保ったまま効果を出し、注意機構を使う統合の仕組みが引き続き適切だと確かめられたことだけです。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文