Cross-Subject Affect Regressionが、個人差を補正して感情軌道を推定する手法を提案。
この記事のポイント
- ラベルなし対象者の感情軌道予測は従来困難とされた
- 共有構造と個人構造を分解しゼロショットで推定した
- 同系統手法より精度が高いが個人差の上限は残る
数字で見る
この記事に出てくる数字
| EEGNet MAE | 60.6 |
|---|---|
| ASAC-Net MAE | 55.0 |
どこで使えるか
個人差を補正して感情軌道を推定したい人向け。ラベル不要で対象者ごとにスケーリング arXivで公開済み 実装コードの記載なし
スポンサーリンク
解説
かみくだいて説明します
Xuan Wang さん、Bing Wang さん、Shuai Chang さん、Hao Yuan さん、Xinbo Qi さん、Xinyue Zhang さんたちの研究チームが、脳波と血中酸素計測から感情の動きを秒単位で推定する手法を公開しました。評価スケールは 1 から 255 の範囲で、この値をそのまま予測するゼロショットの形です。
新しい被験者のデータだけを使って、感情の値を当てはめるわけですね。そのとき、個人差をどうやって補正しているんですか。
感情の軌道を、動画を見た全員に共通する部分と、個人ごとの部分に分解します。個人ごとの部分は、ラベルがなくても測れる脳波の指標、アルファ帯域のチャンネル間同期という信号だけで推定し、共通の軌道をその人の中心値の周りで引き伸ばしたり縮めたりします。
アルファ帯域のチャンネル間同期って、具体的にどんな信号なんでしょうか。
脳の中の違う場所が、同じリズムで同期して動く度合いです。例えば合唱団で、指揮者の合図なしに全員が同じテンポで拍子を刻んでいる状態に近いと思ってください。そのテンポのズレが、その人の感情の振れ幅の目安になります。
共通の軌道を引き伸ばすときの目安が、そのズレだけだと。別の指標でも精度は上がらなかったんですか。
複数のモデル構造や特徴量、予測の目標を系統的に変えて試しましたが、このアルファ帯域の同期指標を超える信号は見つかりませんでした。精度は、2 つの評価バッチで全体平均の誤差が 25.96 と 22.80 でした。同じ条件で報告されている EEGNet の 60.6、ASAC-Net の 55.0 を大きく下回ります。
誤差が 22.80 まで下がっている。この手法は、実際に感情推定ツールを作る側の現場で使える段階なんでしょうか。
動画を見ながらのリアルタイム推定ではなく、あくまで実験室の条件で同じ動画を見せて評価した上での結果です。コードの公開状況や、動画以外の刺激での検証結果については、そこはまだ分かっていません。
では、個人ごとの補正を別の人にも適用するときは、その人の脳波データが必ず必要になるんですか。
はい。ラベルがなくても、推定対象者の脳波と血中酸素の記録が要ります。動画を見てもらった際の信号があれば、その人の個別の軌道が計算されて、最終的な感情の値が出ます。
最後に、この手法が今後どう発展していく見込みですか。
アルファ帯域の同期が最適かどうかは、モデル構造や特徴表現、予測対象を体系的に探索した結果、これ以上改善する信号は見つからなかったとされています。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。