Verbalized Confidenceが、2025年以降のモデルで log-probability よりも信頼できる指標になった
この記事のポイント
- 従来のログ確率より信頼度が劣るとされてきた
- 2025年以降のモデルでは信頼度がより良い指標
- ただし精度だけの評価ではこの変化は見えない
数字で見る
この記事に出てくる数字
| 対象LLM数 | 18 |
|---|
どこで使えるか
論文公開済み
スポンサーリンク
解説
かみくだいて説明します
Yu-Chung Hsiaoが報告した論文によりますと、LLMが答えの自信を言葉で伝えるバーバリゼッド・コンフィデンスが、2025年以降のトップモデルではログ確率よりも安定した評価指標になることが、SummEval、AggreFact、HelpSteer2の3つのデータセット、およそ18種類のモデルで確認されました。
以前は粗いと言われていたものが良くなったということですね。作っている技術者はこれまでログ確率を基本にしていましたが、これはもう置き換えていい話ですか。
正確には、2025年以降にリリースされたモデルに限って置き換えていいという話です。論文ではこれを互換性のシフトと呼んでいます。GPTファミリーの上位モデルに限って言えば、ログ確率ベースのG-Evalよりも、言葉で出す自信度がタスクの主観性に強い柔らかい指標になるということです。
主観性にも強いというのは、審査する側が基準の違いで点数がぶれにくいということですね。2025年より前のモデルと新しいモデルで何が違ってきますか。
新しいモデルは、論文が追加した過信を戒める指示と自分自身で議論させる仕組みをほとんどコスト増なしで受け入れられます。過信を戒める指示は、モデルに自信が足りない場合は素直に分からないと答えていいと伝えることで、無理に高い自信度を出させるのを防ぎます。
分かりました。自分自身で議論させる仕組みの方は、もう少しやさしく言うとどうなりますか。
正確には、モデルに自分の答えをもう一度見直すよう促し、最初の推論と矛盾する点があれば修正させるステップです。まるで担当者が提出した書類を別の担当者がチェックするような流れです。
段階的に表すことで、正解率だけでは見えない部分を捉えられるということですね。研究している人から見ると、これまで何ができていなかった部分が、この柔らかい指標で解決するんですか。
モデルが正解をどのくらい信頼しているかを段階的に表すので、正解率だけでは見えない審査の質を捉えられます。従来のログ確率優先の審査官の基準が、2025年以降のモデルでは通用しなくなったという互換性のシフトが起きています。
信頼度が低い部分だけ人間が最終確認を挟む仕組みになるということですね。AIを自分の仕事で使っている人から見ると、審査官としてモデルを組み込む際の判断材料がどう変わるんですか。
組み込む際の判断材料は、硬い正解・不正解の出力から、信頼度の段階を含む柔らかい出力に切り替わります。これにより、モデルの出力をそのまま鵜呑みにするのではなく、信頼度が低い部分だけ人間が最終確認する仕組みを挟みやすくなります。
最後に、この柔らかい指標を全てのモデルで使えるようになる見通しは、どうなっていますか。
2025年以降のモデルでは、この指標が標準的なものになりつつありますが、2025年以前のモデルではまだ適用に課題が残っています。モデルの世代を超えて、この指標をより広く使う方向に進むと見ています。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。