ALS患者のVFI推定システムが、P-wordsでR2 0.9、S-wordsでR2 0.8の精度を達成した
この記事のポイント
- MND患者の言語流暢性指数を自動推定できる見込みを示した
- WhisperXとSileroで推定システムを作った
- P単語R2 0.9、S単語R2 0.8
数字で見る
この記事に出てくる数字
| P-words R2 | 0.9 |
|---|---|
| S-words R2 | 0.8 |
どこで使えるか
MND患者の言語流暢性指数を自動推定したい臨床関係者向け。ASRと一時停止モデルで高精度に推定可能 論文の手法で公開済み MND患者の独自データセットを使用
スポンサーリンク
解説
かみくだいて説明します
Bahman Mirheidari さんの研究チームが、運動ニューロン疾患の患者さんの言語流暢性指数を、音声認識の技術で自動推定するシステムを発表しました。
言語流暢性指数というのは、言葉をどれだけスムーズに出せるかを見る指標なんですか?
はい。言語流暢性指数は、特定の文字やカテゴリーでどれだけの単語を言えるかを数える検査で、認知機能の変化を測る大切な目安になります。
発話が不自由だと、検査の点数に直接響いてしまうんですね。
そうです。発話の困難さが同時に起こると評価が難しいため、ECASのVFIを自動推定するシステムを提案しました。
そこで音声認識のモデルで区切りを刻むんですね。
音声認識の WhisperX と、無音を検出する Silero を組み合わせ、発話の区切りを細かく刻むことで、検査の点数を予測しています。
従来の手法を大きく上回る精度だったんですか?
臨床的に意味のある特徴量が最も良く、音韻流暢性課題で R2 0.9、NRMSE 0.05 を記録しました。意味流暢性課題でも R2 0.8、NRMSE 0.08 でした。的当てで言えば、的の中心にほぼ当たっている状態です。
実際の検査結果と推定値が、的の中心のように近い値が出るんですね。
正確には、実際の点数と推定された点数のズレが非常に小さいことを示しています。従来の手法を大きく上回る精度です。
公開されたデータセットとモデルで動くんですか。
公開されたデータセットとモデルで動作し、従来の手法を上回る性能を示しています。
まだ解けていない部分があるんですか?
発話の乱れと認知機能の低下を完全に分離する部分は今後の検証が必要で、そこはまだ分かっていません。
最後に、実用化の見通しはどうなりますか?
自動音声分析によるVFI推定は、実用化の見込みがあると確認されました。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。