LLM の推論で多様性を保つ Chopthin-Consensus Power Sampling、答え合わせの精度を上げる話

論文

LLM の推論で多様性を保つ Chopthin-Consensus Power Sampling、答え合わせの精度を上げる話

スポンサーリンク

Chopthin-Consensus Power Samplingが答え合わせの精度を最大 10.6 ポイント上げた

この記事のポイント

  • 既存SMCは重み均等化で多様性を失う
  • Chopthinで重み比を制限し多様性を保持
  • 15設定中13でカバレッジ向上、14で精度向上

数字で見る

この記事に出てくる数字

絶対精度向上 10.6pp
CCPSの精度一致 14/15

どこで使えるか

推論の多様性を維持して正解率を上げたい人向け。学習不要で既存モデルに適用可能 GitHubで公開済み 10.6ppはCCPS全体の成果。Chopthin単独の数字は別

スポンサーリンク

解説

かみくだいて説明します

Minoo Ahmadi さんたちの研究チームが、大規模言語モデルの推論を向上させる新しい手法、Chopthin-Consensus Power Sampling を arXiv に公開しました。この手法は、15 個のテスト設定のうち 13 個で正解候補の範囲を広げ、最終的な正解率を最大で 10.6 ポイント引き上げる結果を出しています。
10.6 ポイントも上がるんですか。既存の手法では何ができていなかったんですか。
従来は重みを均等にして、確率が低い答えの枝をどんどん切り捨てていました。まるで道に迷った旅人が、確からしくないルートを見つけた瞬間にその足跡を消してしまうようなものです。チームは切り捨てる代わりに、最も確からしいルートと最も確からしくないルートの差に上限を設け、確率が低いルートもそのまま次の段階に持ち越す仕組みにしました。
確率が低いルートも残すんですね。その状態でどうやって最終的な答えを決めているんですか。
残った答えを、意味が同じかどうかでグループに分け、同じ意味の答えを最も多く出しているグループを採用します。意味は違っても文字が同じ答えは一緒にして、最終的には複数の異なるルートが支持する答えを正解として返す仕組みです。
複数のルートが同じ答えを支持したら、それが正しいと判断するわけですね。実際に動かすのに、特別な計算環境は要りますか。
学習済みのモデルに追加の学習を施さず、推論時の処理だけを変える手法です。モデルそのものを書き換える必要はないため、既存のシステムに組み込む際の負担は比較的軽くなります。ただし、複数のルートを並行で処理するため、従来の単一推論よりも演算量は増えます。
なるほど。では、3 つのモデルと 5 つのベンチマークで測った結果ですが、対象となるモデルの規模が大きくなっても、同じように性能が保たれますか。
論文では3つのオープンウェイトモデルで検証しており、規模の違いによる明確な劣化は報告されていません。ただし、今回使われたモデル以外のアーキテクチャでは、どこまで効果が保たれるかまでは測定していません。そこはまだ分かっていません。
仕組みは分かりますが、コードは公開されていますか。自分で組み込んで試すことはできますか。
はい、開発チームがGitHub上でソースコードを公開しています。リポジトリはgithub.com/MinooAhmadii/chopthin-consensus-power-samplingです。
最後に、この手法は実務の現場で使われている推論フレームワークに、すぐに取り入れられそうですか。
コードはgithub.com/MinooAhmadii/chopthin-consensus-power-samplingで公開されています。主要な推論フレームワークへの組み込みについては、コミュニティからの検証を待つ必要があります。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文