JAZが、メモリや自己改善を外部系なしで実現した。
この記事のポイント
- メモリや自己改善に専門系システムが必要だと思われていた
- エージェントループだけの最小限フレームワークJAZを設計した
- 従来の手法より精度が高く低コスト。ただし外部システムなし
どこで使えるか
メモリや自己改善を外部系なしで組む人向け。ループだけで精度とコストを両立。 arXivで公開済み 外部システム不要
スポンサーリンク
解説
かみくだいて説明します
LLMエージェントって、結局ツールを呼び出して結果を見るループを回すだけですよね?
確かにその通りです。現在のエージェント開発も、ツール呼び出しと結果観察を繰り返すループ設計が標準になっています。
でも、私が見る限り長期の記憶や自己改善みたいな複雑なタスクだと、ループだけじゃ足りないんじゃないですか?
確かに、メモリシステムや自己改善システムといった追加のエンジニアリングが求められるのが現状です。
arXivで公開されたJAZというフレームワークが、最小限のループだけでそれらをどう処理するかを試みた研究です。
JAZのアプローチって、具体的にはどういう仕組みなんですか?
核心はinvokeという単一のプリミティブです。LLMが任意のコードを記述でき、その中に再帰的なinvokeを含められます。LLMが見える入力はすべて実行環境の変数として扱われ、関数呼び出しのように振る舞います。
外部システムを設けず、コード変数だけで状態を管理するんですね!
最小限の設計で本当に性能が出るんですか?
長期記憶が求められるStuLifeのテストでは、従来のメモリ特化型フレームワークLettaを8%上回り、コストは50%です。自己改善タスクのAppWorldでも、ACEを4%上回る性能を低いコストで達成しています。
外部システムなしでこれだけ差がつくのは驚きです!
開発オーバーヘッドを大幅に削減しながら、実測で明確な性能差を出しています。
でも、特定の方式に最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
確かに、メモリや自己改善のような専門的なシステムが必要なワークフローでも、最小限の枠組みで対応できる可能性を探っています。
実際の試し方についての質問です。
公開コードはGitHubで入手可能です。まずはinvokeの基本的な呼び出しから始めて、コード変数での状態管理を体験してみてください。
JAZのinvokeは外部システムなしで、メモリや自己改善ワークフローを8%、4%上回る性能を示しています。
開発の敷居が下がり、エージェントの未来が広がりますね!
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。