Provenant Memoryは更新履歴を残し、コミットミス回復率を100%に引き上げた
この記事のポイント
- 更新値の上書きで履歴が消える
- P-Memで更新履歴を追跡
- 100%だがretrieval精度は同等
どこで使えるか
更新履歴を残し間違いを回復したい人向け。CRUD型メモリで上書き不可を解消。 arXivで公開済み 実装コードの公開は記載なし
スポンサーリンク
解説
かみくだいて説明します
長期タスクをこなすLLMエージェントのメモリ管理、結局直近の情報ばかりが優先されて古いデータが混ざり混線してしまうんですよね?
確かにその通りです。従来の仕組みは記録をすべて蓄積し、問い合わせ時に検索して組み立てるため、更新されたはずの値が再び読み込まれる陳腐化問題が常につきまといます。
書き込み時に上書きすれば解決するんじゃないですか?
単純なCRUDメモリだと上書きは確実ですが、一度書き換わると前の状態が完全に消えるため、誤更新が起きた時点で復元不能になってしまいます。
そこでarXivに公開されたMemory of Memory、通称MoMの提案です。書き込み時に現在の値を確定させつつ、追い出された値も追跡情報として残す設計を正式に定式化しています。
そのアプローチって、具体的にはどういう仕組みなんですか?
コアは型付きプロヴェナンスグラフです。各キーに対してアクティブフロンティアが現在の値を一枚だけ公開し、置き換えられた値はグラフ上の履歴として残ります。型付き演算が新しい観測を支持、更新、対立、却下、取り消し、解決のいずれかに分類して処理します。
古いデータが消えずに履歴として連結されるんですね!
その履歴の扱いが、更新時の誤り回復率をCRUDメモリが0%のところを100%まで引き上げているんですか?
実際の性能改善効果はどの程度なんですか?
読み取りトークンを約4分の1に削減しながら、最強の検索ベース記憶と同等の精度を達成しています。グラフ誘導のターン刈り込みで知識更新時の陳腐化回答率を19.4%から10.9%に削減し、改訂チェーンではクエリ時読み取りが25%に崩れる中、100%を維持しています。
上書き型メモリとのエラー復旧率の差はどれくらいなんですか?
追い出された値を保持するため、CRUDメモリが0%だった誤更新の回復を100%で達成しています。
でも、特定の方式に最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
その通りです。ただし、CRUDメモリでは100%対0%の回復力や、19.4%から10.9%への stale-answer 率削減など、明確な利点も示されています。
実際の試し方はどうすればいいんですか?
型付きプロヴェナンスグラフのアクティブフロンティアが各キーに一つの現在値を公開し、型付き操作が既存値を補強、更新、争い、却下、撤回、解決するかを判断します。
アクティブフロンティアが読みの効率化と更新の鮮度改善を実現し、CRUDメモリでは不可能なコミット誤りの回復も示します。
更新の履歴を全部残しながら正確に追えるなら、次の世代のエージェント開発に確実に役立ちますね!
出典
この記事のもとになった情報
- arXiv:MoM: Memory of Memory
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。