LLMが言語的表現で不確実性を人間と異なる数値で捉えていることが判明した
この記事のポイント
- LLMの言語的不確実性の定量化は数値ベースが主流
- 心理文献のコーパスでLLMと人間のマーカーを比較
- 数値レベルが異なるが、最適化アルゴリズムで差異を特定
どこで使えるか
不確実性の表現を数値で評価したい人向け。人間の感覚とズレを定量的に比較できる arXivで公開済み アルゴリズム名はMETHODNAME
スポンサーリンク
解説
かみくだいて説明します
Jinhao Duan さんたちの研究チームが、人工知能が「おそらく」や「十分 likely」などの言葉で示す自信の度合いが、人間とは大きくずれていることを明らかにしました。
言葉で伝える不確実性のことですね。人間が「わからない」と自覚する仕組みと、機械が計算で出す答えでは、どこが異なるんですか?
人間は自分の知識の限界を自覚するメタ認知の働きで、言葉の重みを調整しています。研究チームは心理学の文献から人間の基準を整理し、その尺度で複数のモデルの出力を測りました。
人間の辞書を作って、機械の答えを照合する感じですね。機械が出す数値と、人が感じる確率の差は明確に出るんですか?
明確な数値差が確認されています。そこで開発したのが METHODNAME という手法です。モデルが実際に正解を出した割合に合うように、各言葉が担う確率の重みを最適化で割り出します。
正解率から逆算して重みを決めるんですね。確率の重みという仕組みがまだ掴めません。もう少し具体的にどう働くんですか?
試験で正解した問題にたぶんという言葉で答えた場合、人間は高い確信として捉えますが、モデルは内部で異なる数値を保持していることがあります。METHODNAMEは、各言葉がどれだけの確率を表すべきかを、モデルの出力から見つけ出します。
内部の数値と外側の言葉の間にズレがあるわけですね。この手法を使うと、開発現場ではモデルの信頼性をどう評価し直せるんですか?
言葉ごとの自信の差が体系的に可視化されます。従来の繰り返しサンプリングに頼らないため、計算コストを抑えながら、人間と機械の信頼表現のミスマッチを直接比較できます。
繰り返し試行せずに、言葉一つ一つの重みを最適化するわけですね。では、この手法が実用化されるまでの課題は何かあるんですか?
心理学の文献に基づく基準が、すべての言語や文化圏で通用するかどうかは、そこはまだ分かっていません。
最後に、開発現場でこの手法をどう組み込むのが現実的か、教えていただけますか?
実際のモデルに直接組み込む手順はまだ策定されておらず、そこはまだ分かっていません。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。