arize-phoenixが、エージェントの失敗をエラーとしてマークするようになった
この記事のポイント
- エラー終了をエラーとして検出
- bashツールスパンをマーク
- 非ゼロ終了コードのみ
数字で見る
この記事に出てくる数字
| SQLAlchemy対応 | 2.1 |
|---|
どこで使えるか
エージェントのbash実行失敗を自動検知して可視化したい人向け GitHubリリースページで公開済み
スポンサーリンク
解説
かみくだいて説明します
GitHub の mikeldking が、2026-10-01 に arize-phoenix の v20.17.0 を公開しました。AI の動作を追跡するツールのアップデートで、エージェントがコマンドを実行した際のエラー判定や、実験データの並び替え機能が強化されています。
開発者が AI の流れを可視化するツールの新バージョンですね。エージェントが外部コマンドを走らせたときに、現場で使われている従来のエラー判定のやり方は置き換わるんですか?
終了コードが 0 以外だった場合に、自動的にエラーとしてマークするルールが追加されました。これまでコマンドの実行結果は記録だけでしたが、今回は数値で判定されるので、開発者は個々のログを確認しなくても失敗地点を特定できます。
ログを自動で振り分けてくれるので、開発者の手間は確かに減りますね。では、実験データの並び替え機能はどのように変わりますか。
GraphQL と REST API の両方で、sequence_number と sort_dir が使えるようになりました。実験のリストを番号順や逆順に並べ替える際、これまでアプリ側で手動で並べ替えていた作業が、API 側で完結します。本棚の本を背表紙の番号順に並べるように、システム側が自動的に整理してくれるイメージです。
システム側が自動的に整理してくれるので、開発側の工数が減りますね。では、コストの計算部分にも手が入ったんですか。
はい。コストスコアリングで、グループで開くパターンや、エスケープされたドルマークで終わるパターンが正しく評価されるようになりました。
特殊な記述でも正確に値段が計算されるわけですね。ただ、エスケープされたドルマークって具体的にどうなるんですか。そこがまだ掴めません。
文字列の中にドルマークを出すとき、前に特別な記号を付けて区別する書き方がありますね。例えばコストの単位を表す記号をそのまま出力するケースです。従来はそれを特殊な命令と誤認してスコアをゼロにしていましたが、今回は通常の文字列として処理し、正確に数値を返すように修正されています。
コストのスコアリングで、通常は文字列として処理されるパターンが対象となります。
SQLite上でSQLAlchemy 2.1を使えるようにする対応です。他のデータベースでの対応状況は要旨からは分かりません。
SQLite を使っている場合にだけ更新すればいいわけですね。最後に、このアップデートで気をつける点はありますか。
graphql-core のバージョン 3.3 以上を上限として制限する対応が入りました。これより新しいバージョンを使うと動作に支障が出る可能性があるため、環境の依存関係を固定しておく必要があります。それ以外に、実験データの JSON や CSV 出力でエラーが出ていた件も修正されていますので、過去のデータを再エクスポートする際には問題なく取得できる見込みです。
出典
この記事のもとになった情報
- GitHub:arize-phoenix: v20.17.0
- 公開日:2026-10-01
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。