音声 AI の応答を止めることなく思考する手法、推論速度とタスク達成率を上げる話

論文

音声 AI の応答を止めることなく思考する手法、推論速度とタスク達成率を上げる話

スポンサーリンク

Continuous-Time Language Agentsが、応答を止めずに思考することで待ち時間が19%短縮。

この記事のポイント

  • 従来は応答前に沈黙があった
  • 軽量オーケストレーターで思考を並列化
  • ストリーミング完了率は48%から73%

数字で見る

この記事に出てくる数字

パイプライン遅延削減 19%
対象レジームでの遅延削減 半分
ストリーミング完了率 48%→73±5%

どこで使えるか

待ち時間を減らしたい人向け。思考と応答を並列化し、応答前の沈黙を解消する arXivで公開済み 73±5%はon-policy RL適用後の結果

スポンサーリンク

解説

かみくだいて説明します

Bojie LiさんとNoah Shiさんが、Continuous-Time Language Agentsという論文を発表しました。音声のAIが話を聞く前に考えるのをやめ、聞きながら考え、話しながらも考え続ける仕組みを実証し、パイプラインの遅延を全体で19%、対象となる場面では半分まで短縮したと伝えています。
なるほど、常に考え続けているんですね。作り手からすると、今までの音声AIと比べて、実際に組み込む際に何が要らなくなるんですか。
正確には、音声モデルを特別に作り変える必要はなく、テキストのモデルに割り込みと再開を制御する軽い仕組みを乗せるだけで実現します。つまり、音声の部分を飛ばしてテキストのモデルだけで動かせるので、専用の音声回路や追加の学習が要らなくなります。
テキストのモデルだけで済むなら、開発の手間は確かに減りますね。評価の面では、120の場面を使って試したんですか。
その通りです。120の対話場面を事前に決めた合否基準で測り、さらにストリーミングの軌道では正確さに厳密にスコアを付ける二つのトラックを用意しました。その結果、LLMが判定者になると連続して考える方が有利と出ますが、別の判定者で測ると逆転し、むしろ正しく完了する要件が減ってしまうことが分かっています。
判定者の見方で結果が変わるなら、開発者は本当に困りますね。では、考え続けることを正しく導くには、具体的にどう信号を出せばいいんですか。
三つの段階で信号の出し方を変えました。一つ目は検証可能な目標を設けることで、考え続けることが不利から有利に転じます。二つ目は報酬の形を均一にせず、省略されがちな多段階のツール操作を優先する形に整えることです。三つ目は学習の手法で、好みだけならトレードオフになりますが、型に沿った報酬でオンライン学習をすると、すべての正確さの軸が同時に上がり、ストリーミングの完了率を48%から73+/-5%まで引き上げました。
48%から73+/-5%になったのは、型に沿った報酬のおかげなんですね。そこがまだ掴めませんが、型に沿った報酬というのは、結局何を基準に測っているんですか。
分かりにくい点ですね。つまり、答えが合っているか間違っているかを機械が判定できる形で測るということです。人がいい悪いでつけるのではなく、正解と一致するかどうかを数値で出し、その数値だけを学習の目標にします。
数値で出せるものを目標にするなら、開発者が迷いにくいですね。多段階のツール操作を優先するというのは、具体的にどういう場面を指しているんですか。
検索や計算、ファイルの読み書きなど、複数の手順を順番に繋げて行う作業のことです。報酬を均一にすると、AIは短い回答を優先してしまい、必要な手順を飛ばすようになります。型に沿った報酬では、その飛ばしを防ぎ、手順を最後まで繋げる方を正解とみなします。
手順を飛ばさずに最後まで繋げる方が正解になるんですね。最後に、この仕組みは他の音声AIでもすぐ使えますか。
制御の仕組み自体は軽いですが、検証可能な目標と型に沿った報酬の組み合わせが全てのモデルで同じ結果を保証するわけではなく、特に大きいモデルや別のモデルでの再現は確認できています。どこまで標準的に組み込めるかは、まだ見通しが立っていない部分です。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文