精神科の質問紙を音声から採点する COMPASS 2.0、項目の構造的偏りを検出する話

論文

精神科の質問紙を音声から採点する COMPASS 2.0、項目の構造的偏りを検出する話

スポンサーリンク

COMPASS 2.0が、質問紙の構造的偏りと個人信号を区別する手法を実装した

この記事のポイント

  • 質問票の構造が個人信号か不明
  • 275人の面接で構造解析を実施
  • 自己報告との一致は残るも限定

数字で見る

この記事に出てくる数字

参加者数 275
調査数 34

どこで使えるか

精神科問診の構造的偏りを抑えたい人向け。面接データで構造解析を実施 論文公開済み 臨床面接データは非公開

スポンサーリンク

解説

かみくだいて説明します

Baihan Lin さんが arXiv に発表した COMPASS 2.0 という研究で、話し声から精神科の質問紙を採点する言語モデルの仕組みを再検証しました。275 人の臨床面接データを対象に、モデルが出すスコアが本人の自己申告と一致する理由が、質問の文章の似通い方によるものか、それとも個人の特徴を捉えているかを見分けるフレームワークを導入しています。
話し声から症状を推し量るモデルが、実は質問紙そのものの丸写しになっている可能性があるというのは、確かに気になる点ですね。
そうです。質問の文章が似ているだけでスコアに相関が生まれ、心理的な信号ではない共分散が生じていました。そこで文脈の似た項目同士がどう絡むかを幾何学的に比較する手法を導入し、モデルの出力と自己申告の構造を厳密に分けています。
幾何学的に比較するというのは、質問の並び順や答えの組み合わせを空間上の点と点で結んで距離を測るイメージですね。
正確にはその通りで、各項目の答えを座標軸の点に置き換えて、モデルが出した点と本人が記入した点の形がどれだけ重なるかを数値化しています。質問紙の設問が空間上で同じ向きを向いていれば、モデルも同じ向きを向くという仕組みです。
275 人のデータで実際に測った結果、モデルの出力は自己申告よりも設問の文章に似ていたということですね。では、モデルが捉える苦痛の度合いと自己申告のスコアは、どのくらい近い値になるんですか。
登録前に公表した分析計画に沿って確認したところ、設問の文章以外に構造的な一致は見つかりませんでした。34 種類の質問紙と RDoC という枠組みでも同様の傾向を確認しており、苦痛の度合いを軸にモデルの出力を評価するのが適切だと報告しています。
苦痛の度合いを軸に評価するというのは、症状の分類よりも本人のつらさの総量を重視する使い方ですね。では、この検証手法は他の言語モデルにも組み込みやすい設計なんですか。
そのフレームワークは、異なるモデルや言語への適用性については触れられていません。要旨には、34の尺度やRDoCフレームワークを対象とした検証分析が記載されています。
このフレームワークで構造と個人信号の一致を区別した結果、言語モデルの出力が設問構造に依存していることが明確になりましたね。
構造の一致と個人信号の一致は別物だと位置づけています。質問紙の設問構造とモデルの出力構造が同じでも、本人の答えを別人のものに差し替えたときに一致が崩れなければ、初めて個人を捉えていると判断する流れです。
最後に、臨床現場で使える判断の目盛りとしては、具体的な数値や基準がまだ示されていないということですか。
具体的な閾値や数値基準は記載されていません。構造の一致と個人信号を分ける論理は示されていますが、臨床現場で使える判断の目盛りについては、そこはまだ分かっていません。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文