LLM が同じクエリでも実行ごとに答えが変わる話

論文

LLM が同じクエリでも実行ごとに答えが変わる話

スポンサーリンク

実行ごとに答えが変わる割合が最大24%。計画が変更を指数関数的に増幅する。

この記事のポイント

  • 温度0でも実行ごとに判定が変わる
  • 120万回のモデル呼び出しをログに記録して再分析した
  • 投票は分散を減らすも完全には消えない

数字で見る

この記事に出てくる数字

タスク最大変更率 24.0%

どこで使えるか

実行結果の安定性を重視する開発者向け。計画が微細な差異を増幅する構造を理解している人向け。 論文の公開は記載なし 温度0での実行変動を測定

スポンサーリンク

解説

かみくだいて説明します

Oktie Hassanzadehたちの研究チームが、arXivに論文を発表しました。セマンティック・クエリ処理と呼ばれる人工知能の判定仕組みで、同じ質問を繰り返すと答えが少しずつ変わることを、およそ120万回の呼び出しで計測しました。
同じ質問を繰り返すのに、答えが変わるんですか? 人工知能は計算機なのに、なぜ揺らぐんですか?
判定の基準がきわめて狭いところで揺れている行ほど、答えが変わりやすいからです。温度は人工知能が答えを出すときの迷いの許容範囲で、0にすると最も確からしい答えだけを返す設定になります。
温度の許容範囲、まだ掴めません。もう少しやさしく言うとどうなるんですか。
料理で例えると、温度を0にすることは塩気をきっぱり決めることです。少し足りなくても多くなくても、一番標準的な味だけを出す設定になります。この設定で5回実行したところ、モデルによって0.07パーセントから10.2パーセントの行が出力を変え、あるタスクでは最大24.0パーセントまで変動しました。
標準的な味だけ出す設定、ですね。では、実際のシステム比較のベンチマークでは、どのくらい結果が覆っているんですか?
SemBenchの公開結果では、テキストの判定が21パーセント入れ替わりました。LRO-Benchの推奨実装をテストした28件のうち、16件はベンチマークが実行した回数では決着がつかない状態です。答えが入れ替わる行同士は、人工知能同士で意見が割れている場所で、同じ実行の中身でも実行を跨いでも同じ頻度で食い違いました。
実行を跨いでも同じ頻度で食い違うんですか。では、この揺らぎを減らすために、投票やカスケードという手法を試した結果はどうだったんですか?
投票は変動を減らしますが、完全に消すことはできませんでした。カスケードは複数の人工知能を順番にチェックする仕組みで、最初の人工知能が自信を持てない行を、次の人工知能がもう一度判定し直す作業に近いです。この手法は保証を維持したまま、答えが変わる行の割合を抑えることができました。
報告ルールと設計ルール、ですね。では、開発者がこの論文をどう使うのが現実的ですか。
開発者は、同じ質問を複数回実行して答えの安定度を報告する必要があります。ユーザー側は、人工知能が迷っている行ほど答えが入れ替わることを前提に、重要な判断には複数の実行結果を参照する仕組みを組み込むことになります。
迷っている行ほど入れ替わる、ということですね。最後に、この変動は温度を上げればもっと大きくなるんですか。
温度0での変動は、モデルやタスクによって0.07%から24.0%と幅があります。これはモデル同士の意見が異なる行ほど起きやすく、投票では完全には消えません。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文