弱モデルの内部状態から判断して強モデルに任せる LEASH、コストを下げる手法

論文

弱モデルの内部状態から判断して強モデルに任せる LEASH、コストを下げる手法

スポンサーリンク

弱モデルの内部状態の不確実性で強モデルへの切替を判断する

この記事のポイント

  • 弱モデルだけでは失敗する場面があった
  • 弱モデルの隠れ状態で不確実性を推定
  • Qwen3.5-35Bで73.66%。ただしOSWorldのみ

どこで使えるか

弱モデルの失敗を避けたい人向け。追加学習不要でコストを下げられる

スポンサーリンク

解説

かみくだいて説明します

Qingni Wangらの研究チームが、コンピューター操作を担うAIエージェントの枠組み、LEASHを発表しました。長い作業をこなす際、高性能なモデルを常に使うのは費用がかさみ、低性能なモデルだけではミスが出ます。そこでLEASHは、普段は低性能なモデルが動いて、不確実性が高まったときだけ高性能なモデルに切り替える仕組みです。
AIエージェントは、普段から使うソフトウェアを自分で操作する仕組みですよね。切り替えるタイミングをどう判断するんですか?
低性能なモデルが内部で持つ不確実性の信号を使います。具体的には、モデルが今生成している内部状態と、過去に成功したときや失敗したときのデータを比較します。失敗に似たデータが出てきたら、切り替えが必要だと判断するわけです。切り替え後も高性能モデルが迷わないよう、影のように見守る仕組みも組み込んでいます。
内部状態の比較って、推論の過程を詳しく見ているんですか。そこがまだ掴めません。
推論の過程を毎回詳しく見ているわけではありません。地図なしで歩くようなものです。成功したルートと失敗したルートの記憶を比べながら進んで、今いる場所が失敗したルートに似てきたら、案内役を呼ぶイメージです。普段の動作の中で既に生まれているデータだけで判断します。
追加の訓練が不要で、普段の動作中のデータを使うんですね。作る側からすると、既存のモデルに組み込むのは難しい話ですか。
そうです。追加の学習や専用モニターの設置が不要です。OSWorldという環境で4つのモデルバックボーンで試した結果、ランダムに切り替える方法より、成功率が6.55点から11.94点向上しました。
成功率はほぼ同じなのに、費用だけ減らせるわけですね。
Qwen3.5-35B-A3Bというモデルで試したところ、1タスクあたりの費用はおよそ0.4117ドルです。常に高性能モデルを動かすClaude Opus 5と成功率がほぼ同じ72.90対73.66を記録しながら、推論コストを19.2%削減できています。
では、現場の技術者が実際に組み込むのは難しい話ですか。
追加の学習が不要で、既存の動作中に生まれるデータを活用する設計なので、組み込みの手間は従来の方法より軽いです。ただ、切り替え後の見守り機能は、高性能モデルがブラックボックスAPIの場合でも使えるよう設計されていますが、特定の環境への最適化具合については、そこはまだ分かっていません。
最後に、今後この仕組みは標準的に使われる見込みですか。
OSWorld上での実験では、弱モデル単独やランダムエスカレーションを上回り、Qwen3.5-35B-A3Bで73.66%の成功率を達成しました。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文