物理法則に基づいた危険回避を評価するReactHuman、家庭用ロボットに適用する話

論文

物理法則に基づいた危険回避を評価するReactHuman、家庭用ロボットに適用する話

スポンサーリンク

ReactHumanの評価で、モデルは約3回に1回危険を処理しきれなかった。

この記事のポイント

  • 従来は動画の質問応答や長期的なタスクのみ
  • 240Hzシミュで17イベン1000シーンで評価
  • モデル規模に関わらず約3件に1件失敗

数字で見る

この記事に出てくる数字

イベント数 17
シーン数 1,000
シミュレートレート 240Hz

どこで使えるか

家庭用ロボットの実装や評価を自前で進める人向け。シミュレーションと物理法則に基づく安全性の検証ができる Hugging Faceで公開済み 17イベント、1000シーン、240Hzシミュレーション

スポンサーリンク

解説

かみくだいて説明します

Yizhan Li さん、Jianxin You さん、Mengyang Xiong さん、Yinhuan Chen さん、Zicheng Zhao さん、Dekun Wu さん、Dongqing Zhang さん、Bang Liu さんのチームが、人工知能が突然の危険にどう反応するかを測る評価基準、ReactHuman を公開しました。17 のイベントの種類に、およそ 1000 の再現可能なシミュレーションシーンが含まれており、物理法則に基づいた 240Hz の剛体シミュレーションで正解を作り出しています。
なるほど、実際に危険が起きた瞬間の判断を測るんですね。これまでの評価と比べて、どこが新しくなっているんですか。
従来は動画を見て質問に答える形か、長い時間がかかるナビゲーションが主でしたが、今回は皿が滑るのを受け取るや包丁が落ちるのを避けるなど、即座に安全を確保する行動に焦点を当てています。合理性、安全性、物理法則への適合度を測る 5 つの指標で評価しており、7 つの代表的なモデルで試したところ、およそ 3 つに 1 つの危険で判断を誤っていました。
3 つに 1 つは確かに気になりますね。現場でこの評価基準を使ってモデルを改善する場合、手元で動かすのは難しいですか。
公開されているデータセットとコードを使えば、ご自身のご環境でも評価を実行できます。ただし、物理シミュレーションを厳密に再現する必要があるため、計算資源はそれなりに必要になります。
物理シミュレーションを厳密に再現する環境で、計算資源を使って評価できます。
物事を、壊れない硬いブロックのように扱う計算方法です。現実の空気抵抗や柔らかい変形は無視して、衝突や重力の動きだけを正確に計算します。泡で作られた金床や鉄で作られたリンゴのように、外見と物理法則が逆になる物体を使ったテストも含まれています。
外見と動きが逆転する例ですね。AI を組み込む側にとって、次の開発でどこを重点的に変えるべきだと示しているんですか。
外見を信じて動きを無視する傾向や、正しい行動を選んでも、捕まるべき地点をメートル単位で外しているケースが確認されました。さらに興味深いのは、モデルの規模を大きくしても、これらの失敗が減らないという点です。
規模を大きくしても改善しないというのは意外です。外見を信じて動きを無視する傾向があるというのは、開発者が特に注意すべき点ですね。
物理法則を正しく理解した上で、即座に安全な行動に移せる能力がまだ不足していると考えられています。この基準は、その部分の弱点を細かく診断するツールとして、あるいは学習のヒントとして使えると位置づけられています。
最後に、この研究の今後の展開について伺います。
規模拡大だけでは解決しない課題が浮き彫りになったため、今後、物理的に grounded で安全を考慮した実体エージェントに向けた、きめ細かな診断とスケーラブルな学習シグナルの提供が焦点になると見られます。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文