タスクごとに最適ながんばり方を学ぶ PRISM、マルチエージェントの連携設計を改善する話

論文

タスクごとに最適ながんばり方を学ぶ PRISM、マルチエージェントの連携設計を改善する話

スポンサーリンク

PRISMが、タスクごとの最適トポロジー生成を改善した。

この記事のポイント

  • SFTではクエリごとの優劣が分からず偏る
  • 教師が解いた兄弟グラフの情報で学習
  • 6ベンチで全ベースラインを上回る

数字で見る

この記事に出てくる数字

ベンチマーク数 6

どこで使えるか

トポロジー生成が偏るのを直したい人向け。教師シグナルでクエリごとの最適設計を実現 論文のリンクからコード入手可 教師モデルは展開時に利用不可

スポンサーリンク

解説

かみくだいて説明します

Phuong Tuan Dat, Qi Li, Xinchao WangらがarXivに公開したPRISMは、AIが複数いるときに誰が誰に話しかけるかを決めるネットワーク構造を自動設計する手法です。6つの異なるベンチマークで既存の手法をすべて上回る性能を確認しています。
AIが協力する構造を自動で作るんですね。従来の手法では何が問題だったんですか?
従来の手法は正解の構造が並んだデータセットから学習しますが、データセットには構造の良し悪しの順位がついていません。そのため学習が進むとデータセットに多く含まれる構造に偏ってしまい、それぞれのタスクに合った構造を作れなくなっていました。
多い構造ばかり選ぶと対応できなくなるんですね。特別な情報を使う仕組みはどうなっているんですか?
PRISMでは教師モデルが、そのタスクを解いた別の構造であるSiblingグラフの情報を使います。この情報を取り込むためにゼロ初期化低ランクブランチという仕組みを導入し、生徒モデルが自分で生成した軌道の上で教師の判断に合わせて学習を進めます。
専門用語が多くてまだ掴めません。もう少しやさしく言うとどうなりますか?
正確には、最初は全く反応しない回線を用意しておき、学習が進むにつれて必要な情報だけを通すフィルターを作るイメージです。通常の回線だと余計な情報まで入って学習が乱れますが、このフィルターなら必要な情報だけを正確に渡せます。
ノイズを遮断して必要な情報だけ渡すんですね。6つのベンチマークで試した結果、どれくらい向上したんですか?
すべてのベンチマークで、評価した既存の手法をすべて上回りました。教師モデルを一致させた制御実験でも、この特別な情報を使うことが性能向上に直結していることを裏付けています。
現場でAIを組み込む技術者から見ると、部署のシステムにすぐ組み込める話ですか?
論文にはコードが公開されていますが、教師モデルが使うSiblingグラフは実際の運用時には手に入らない前提です。そのため現状は研究段階の手法であり、運用時にどう代替するかはそこはまだ分かっていません。
では、今後の展開について教えてください!
ゼロ初期化の低ランクブランチで教師グラフの情報を活用し、展開時には不要なSiblingグラフなしで各クエリに適したトポロジーを生成します。
最後に、研究現場への影響について一言お願いします!
6つの多様なベンチマークで全てのベースラインを上回り、教師モデルの制御実験も貢献を支持しています。コードも公開されています。
あわせて、先月にはLLMマルチエージェントシステムにおけるコラボレーショントポロジーの生成に取り組む別の研究も出ています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文