拒否されたステップを世界の状態に合わせて書き直す WSG、7分野の合成データで学習した推論手法

論文

拒否されたステップを世界の状態に合わせて書き直す WSG、7分野の合成データで学習した推論手法

スポンサーリンク

WSGが、拒否されたステップを世界の状態に合わせて書き直す手法として7分野で学習され、30Bクラスのオープンモデルでプロプライエタリモデル並みの成功率を達成した

この記事のポイント

  • プランナーが拒否で止まる
  • 合成世界で226Kの軌跡を学習
  • 7ベンチで30B級がプロ級に

数字で見る

この記事に出てくる数字

ドメイン数 7
Trajectory数 226K
モデル規模 30B

どこで使えるか

拒否で止まるプランナーを直したい人向け。世界の状態に即した書き直しで成功率を上げる 論文の公開は記載なし 学習データは226K Trajectory

スポンサーリンク

解説

かみくだいて説明します

AIエージェントが複雑なタスクでつまずく時、次の一手で成否が分かれますよね?
確かにその通りです。計画が現実に紐付いていないと、拒否された瞬間にループに陥ります。
でもプロンプトで指示を出しているだけなのに、なぜ同じ拒否を繰り返してしまうんですか?
言葉だけを置き換えているからです。世界には物理法則や論理的依存関係があり、プロンプトだけではその制約を事前に記述できません。
そこでarXivで公開されたWorld State Generatorです。7つのドメインで合成世界を構築し、約226Kの失敗と修復データを抽出して学習させています。
そのアプローチって、具体的にはどういう仕組みなんですか?
計画を言語ではなく検証可能な世界の状態として出力します。拒否が起きるとそれをルールと解釈し、残りの状態をそのルールに従うように書き換えます。
失敗をルールとして吸収して計画を曲げるんですか!
実際の性能向上はどのくらい見込めるんですか?
7つの公開ベンチマークで、約30Bパラメータの2つのオープンモデルのエンドツーエンド成功率がプロンプトを上回り、専用モデルに匹敵する水準に達しています。
でも、特定の方式に最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
その通りです。7つの領域で合成世界を構築し、各領域のルールをプログラムで強制してデータを抽出しています。
実際の試し方はどうすればいいんですか?
公開コードをクローンして、まず7ドメインの合成環境で動作確認をしてから、実タスクに適用してみてね。
7つの公開ベンチマークで、世界と計画を同期させる発想が有効なことが示されました。
失敗を成長の燃料にする未来が待ち遠しいですね!

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文