ModularRSIが、エージェントのループをモジュールごとに改善する汎用的な自己改良手法として提案された
この記事のポイント
- 進化データは外部から集めた2000件
- TB2.0とSWE-Bench Verifiedで検証
- 進化タスクは評価ベンチと別
数字で見る
この記事に出てくる数字
| モジュール数 | 5 |
|---|---|
| 進化タスク数 | 2,000 |
どこで使えるか
論文に記載あり、コード公開は不明 TB2.0とSWE-Bench Verifiedで評価
動画を見る
スポンサーリンク
解説
かみくだいて説明します
Siwei Wu たち研究チームが arXiv に公開した ModularRSI は、AI エージェントの操作枠組みを、失敗と成功の比較から自動的に改善する仕組みです。既存の方法では枠組み全体を一括で修正していたため、関係のない部分まで絡まり、未知のタスクへの応用が難しくなっていました。
未知のタスクへの応用が難しかったんですね。では、枠組みをどうやって改良するんですか。
枠組みを 5 つの機能に分けて、それぞれ独立に改良します。エージェントの動作ループ、ツールの使い方、観察した情報の管理、会話の文脈の管理、そしてタスク完了の判定です。一つ一つの部品だけを狭い範囲で修正し、最後に統合して矛盾を解消します。
5 つの部品に分けて直すんですか。では、どの部品が特に伸びやすかったんですか。
部品ごとの詳細な結果までは示されていませんが、全体としてTB2.0とSWE-Bench Verifiedで未知の分野を含むタスクに一貫して改善が見られ、改良された枠組みは異なる基盤モデル間でも転移しました。
異なるモデルにもそのまま使えるんですか。では、改良に使うデータは評価で使う問題と被らないんですか。
改良に使う 2,000 個の実行タスクは、評価で使う問題群とは完全に別の外部ソースから集めました。同じタスクの成功例と失敗例を対比し、複数のタスクにまたがって繰り返される弱い部分を特定してから部品を修正します。
成功と失敗を対比して直すんですか。では、修正の範囲はどれくらい狭いんですか。
各モジュールは制限された修正範囲の中でしか変更できません。全体を一括で最適化すると関係ない仕組みまで絡みますが、モジュールごとに独立させるのは、自動車のエンジンだけ修理して、サスペンションは触らないようなイメージです。どこが変わったのかの特定と検証がしやすくなります。
エンジンだけ直すイメージですね。では、現場の技術者がこの仕組みを直接動かすには、何が必要になりますか。
実装手順や環境指定については論文には書かれていません。代わりに、TB2.0やSWE-Bench Verifiedで改善が確認されています。
最後に、実用化のスケジュールはいつ頃になるんですか。
実用化に向けて、まず外部ソースから2,000の進化用タスクを収集し、評価ベンチマークと重ならないように準備しています。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。