不規則な間隔のデータを扱う QiYao-I、時系列予測の精度を上げる手法

論文

不規則な間隔のデータを扱う QiYao-I、時系列予測の精度を上げる手法

スポンサーリンク

QiYao-Iが、不規則な間隔の時系列予測で既存手法を凌駕する性能を出した

この記事のポイント

  • 従来手法は規則的な時系列を前提としていた
  • 時間と変数の関係を捉える仕組みを導入した
  • 時系列基盤モデルとエンドツーエンド手法を上回る

どこで使えるか

不規則な間隔の時系列予測を自前で組む人向け。時間マニホールド注意で不規則性吸収 arXivで公開済み コード・重みの公開は記載なし

スポンサーリンク

解説

かみくだいて説明します

林峰王さんを筆頭著者とする研究チームが、不規則なタイミングで記録される複数の時系列データを予測する新しい基礎モデル、QiYao-Iを発表しました。既存のモデルは決まった間隔でデータが揃うことを前提に作られていたため、計測のタイミングがバラバラな現実のデータには対応が難しかった点を改良しています。
計測のタイミングがバラバラだと、データ同士の関係を読み取るのが難しくなるんですか?
はい。気温と湿度のように項目によって計測のタイミングがずれていると、従来のモデルは情報を整理できずに精度が落ちていました。そこでこのモデルは、実際の時刻を学習可能な特徴量の空間に変換して、attentionの層に補正値を差し込む仕組みを導入しました。専門用語ではマニフォールド注意機構と呼びますが、これは時刻の差を地図上の距離に置き換えて処理する考え方です。
時刻の差を距離に置き換えるというのは、飛んでいる部分を近さと見なすということなんですか?
その通りです。駅と駅の間を歩く時間と、電車で移動する時間を同じ距離として扱えるようにするイメージで、データが飛んでいる部分も空間上の近さとして捉えることで、タイミングが揃っていなくても項目同士の影響関係を正確に読み取れるようになります。
なるほど。研究している人から見ると、このやり取りの仕組みは既存のモデルとどこが違いますか?
周波数を考慮した動的変数相互作用機構を使い、非同期に記録された観測のもとで変数間のメッセージ受け渡しを選択的に行うことで、不規則な多変量時系列の予測を扱うモデルです。
実装が楽になるのは確かに助かりますね。テストの結果はどうなっていますか?
現実のデータセットを使ったベンチマークで、時系列の基礎モデルや個別に作る予測モデルを上回る精度を達成しています。特にゼロショットやフューショットの設定では、学習データがほとんどない状態でも汎用性が高く、新しいデータセットに即座に対応できる能力が確認されています。
ゼロショットと少数ショットの設定でも、既存モデルより高い性能と強い汎用性を示したと報告されています。
不規則な時系列データと多変量間の非同期な関係に対応し、ゼロショットや少数例でも高い汎用性を示すことが実験で確かめられています。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文