DDRGが Qwen2.5-7B で推論精度を 8.65 ポイント上げた
この記事のポイント
- 中間の主張の不一致が投票で残る
- グラフ整合で主張レベルの不一致を特定し修正
- 5ベンチで直接回答より精度向上。ただし修正は限定的
数字で見る
この記事に出てくる数字
| ベンチマーク数 | 5 |
|---|
どこで使えるか
推論の途中で主張がずれるのを直したい人向け。修正は限定的 arXivで論文公開済み
スポンサーリンク
解説
かみくだいて説明します
Haotian Liuらの研究チームが、2026年10月14日にarXivへ論文を提出しました。大規模言語モデルが複数のステップで考えるタスクで、途中の答えがずれている場合でも、最後の答えだけを見て多数決を取る従来の手法を改良し、Qwen2.5-7Bでおよそ8.65ポイント、Llama3.1-8Bでおよそ15.83ポイントの正解率向上を実現しました。
最後の答えだけを見て多数決を取る手法では、途中のステップで間違えたまま放置されていたんですね。グラフでつなげてズレた場所だけ直す仕組みだと。
従来の多数決では、途中の主張が食い違っても修正されませんでしたが、今回のDDRGという手法では、各ステップの主張をグラフというネットワークのように繋げて、どこでズレが生じたかを正確に突き止めます。そしてズレた部分だけを、答えを知らない検証役にかけて、正しい道筋に戻す仕組みです。
なるほど、初期の推論を増やしたり学習し直したりする必要はないと。では、作る人にとって、このグラフを構築する部品は簡単に使えますか。
重くはありません。初期に生成した推論のリストを増やしたり、モデル自体を再学習したりする必要はなく、既存の推論をそのまま使いながら、局所的な修正だけを1回だけ行います。例えば、長い文章の途中の1文だけを書き換えて、その先を自然に繋げ直すようなイメージです。
既存の推論をそのまま使うので、計算量を増やさずに精度を上げられると。
直接答えを出す手法より大きく上回り、思考の連鎖や他のグラフベースの手法、そして従来の多数決でも全て上回る結果でした。ただし、これは5つのベンチマークで測ったマクロ平均の精度であり、全てのタスクで同様の数字が出るとは限りません。
確かに!5つのテストで平均して大きく伸びたんですね。では、修正が1回だけというのは、もし途中のステップが複数回間違っていたらどうなるんですか。
修正は1回だけなので、複数回ズレが生じた場合や、検証役がズレを認めなかった場合は、従来の多数決の答えをそのまま返します。修正の条件を満たさないケースでは、手を加えない設計です。
条件を満たさなければ無理に直さないと。では、実務で使うAIに組み込む場合、公開されているコードやモデルはありますか。
論文には手法の仕組みと実験結果が詳しく書かれていますが、コードや学習済みモデルの公開については、そこはまだ分かっていません。実装には、推論のグラフを構築する部品と、答えを隠して検証する部品を自分で繋げる必要があります。
実装には自分で部品を繋ぐ必要があると。最後に、この手法の今後の展開はどのようになりますか。
現時点では5つのベンチマークでの検証が中心であり、より複雑な推論タスクへの適用や、修正回数を増やす拡張性については、そこはまだ分かっていません。まずは論文の内容を丁寧に追ってみてください。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。