VeriFine、自己改善を続ける AI の判定基準を進化させる harness

論文

VeriFine、自己改善を続ける AI の判定基準を進化させる harness

スポンサーリンク

VeriFineが、運転とロボットナビでポリシーと判定の両方を自己改善させた

この記事のポイント

  • 固定ジャッジが自己改善を阻害
  • 政策・カリキュラム・ジャッジを共進化
  • 運転・ロボナビで自己改善を確認

どこで使えるか

自己改善を続けたい人向け。固定ジャッジの壁を共進化で突破する arXivで公開済み コードの公開は記載なし

スポンサーリンク

解説

かみくだいて説明します

Zewei Zhouらの研究チームが2026-10-07に出した論文で、ロボットや自動運転の判断能力を自ら高める仕組み「VeriFine」を紹介しました。判断を評価するAIと、判断するAIを同時に進化させ、失敗のパターンが変わっても追いつけるようにしたものです。
評価するAIと判断するAIが一緒に育つんですか? 現場で使う技術者から見ると、いまのAI開発のやり方を変える話ですか。
変える話です。従来の開発では評価基準は固定で、AIが新しい失敗をするたびに基準側が手直しが必要でした。VeriFineでは評価基準側もAIと同じように学習し、失敗を細かく診断して次の訓練データを選び直します。進まなくなった段階で人間の判断を借りて基準を合わせ込む仕組みになっています。
人間の判断を借りて合わせるんですか。それは具体的にどれくらいの頻度で動くんですか。
正確には頻度ではなく、進捗が頭打ちになった時点で動く設計です。自動運転のシミュレーターとロボットの移動実験で、強化学習と教師ありの微調整を繰り返すうちに、判断能力も評価能力も同時に上がりました。失敗パターンが移り変わる中でも、評価側が追従していることになります。
評価能力も一緒に上がるんですか。研究している人から見ると、従来の評価手法と比べてどこが新しいんですか。
従来の手法は評価モデルが固定で、AIが新しい失敗をしても基準側が追いつけず、訓練の伸びしろが狭まるのが課題でした。VeriFineでは基準側も共進化させるため、新しい失敗をいち早く見つけて訓練に反映できます。実験では運転とロボット移動の両方で、政策と評価の両方の能力が連続的に向上しました。
共進化というのは分かりにくい言葉ですね。もう少しやさしく言うとどうなりますか。
分かりにくい点ですね。例えばテストの先生と生徒が一緒に勉強するイメージです。先生が問題を出して採点するだけでなく、生徒の苦手な部分を分析して次の授業計画を立て、先生自身も採点の基準を生徒の実態に合わせて更新します。両者が互いにフィードバックを繰り返してレベルを上げていく仕組みです。
先生と生徒の例えで掴めました。では、安全に関わる部分はどう評価されるんですか。
空間の位置関係や因果関係、安全を考慮した判断を評価に組み込んでいます。自動運転で信号を待つか進むか、ロボットが障害物を避けて通るかといった物理的な推論を基準に、人間の判断とAIの判断のズレを修正していきます。
物理的な推論を基準にズレを修正するんですか。AIを使う側から見ると、実務で導入する際に何が準備として必要になりますか。
進捗が頭打ちになったときは人に判断を仰ぎ、意見の違いを擦り合わせながら審査の基準を物理的な推論に合わせて調整していく仕組みがあり、実験は運転とロボットの移動のタスクで行っています。
最後に、実環境への適用は見通しが立っているんですか。
実環境への適用については、運転やロボットナビゲーションのタスクで自己改善が継続的に達成されたことを示しています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文