SynILが、ノイズ混じりのデータからロボットに学習させる手法として、自動評価で性能を上げた。
この記事のポイント
- 手動選別やヒューリスティクスに依存
- 自己教師型で遷移レベルの報酬を生成
- BCより大幅。ただし環境報酬同等は一部
どこで使えるか
ノイズ混じりのデータからロボットに学習させたい人向け。手動選別不要で自動評価できる arXivで公開済み
スポンサーリンク
解説
かみくだいて説明します
田中裕人さんらの研究チームが、ロボットが人の動きをデータから学ぶ新しい手法、SynILを発表しました。
人の動きをデータとして読み取って、ロボットに教えるんですね。ただの真似じゃなくて、ロボットが自分で動きを工夫するんですか?
教室で先生の手本を見て練習するイメージです。実際に動いて試すのではなく、すでに記録された動画やセンサーデータだけを元に、ロボットが自分で学習します。
すでに記録されたデータだけだと、もしそのデータにミスがあったらどうなるんですか?
手本の動きに雑音や無駄が入っていると、ロボットは間違った癖を覚えてしまいます。そこでSynILは、ラベルなしで自動評価する仕組みを導入しました。人間の筋肉や関節が連携して動く仕組み、モーターシナジーに着目し、それを数値化するアルゴリズムを組み込んでいます。
連携して動く仕組みで評価する、と。
そうです。複数の人が重たい箱を運ぶときを考えます。一人だけ力任せに押すより、全員が息を合わせて動いたほうが楽に動けますよね。SynILはその息の合い方を数値化して、動きの上手い下手を自動で判断します。
息の合い方を数値化して上手い下手を判断する、と。実際のテストではどれくらい差が出たんですか?
歩行のテスト、D4RLと、作業のテスト、Robomimicで確認しました。SynILが独自に導き出した評価点は、本来の正解の評価点と強く一致しました。
正解の評価点と強く一致した、と。
正確には、強く一致しただけでなく、従来の手法を上回りました。Behavior Cloningを上回り、正解の報酬で訓練した手法と同等か、場合によってはそれを超える結果を出しました。
最後に、正解の報酬で訓練した手法と同等かそれを超える、と。実際の現場で使えるようになるのは、まだ先ですか。
手本の質を自動で見極められるようにすれば、人の手で事前に選んだり作業ごとに工夫したりしなくて済むから、拡張性の制限が解消できるってわけだ。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。