動作指示の言い回しで成功率が変わる VLA の問題、推論前に文を書き換える手法

論文

動作指示の言い回しで成功率が変わる VLA の問題、推論前に文を書き換える手法

スポンサーリンク

Rephrase Before You Actが VLA の成功率を 16〜27% 相対的に引き上げた

この記事のポイント

  • VLAsは指示の言い回しに敏感
  • LLMで言い換えルールを抽出
  • 凍結π₀が12タスクで16〜27%向上

数字で見る

この記事に出てくる数字

成功率変動 100%→2%
最大スイング 61ポイント
改善率 16〜27%

どこで使えるか

VLAの成功率を安定させたい人向け。学習不要でモデルを選ばない 論文公開済み(arXiv) コード公開の記載なし

スポンサーリンク

解説

かみくだいて説明します

Mikey Wattsららの研究チームが、画像を見て命令をこなすビジョン・ランゲージ・アクションモデルについて報告しました。命令の言い回しをただ一語変えただけで成功率が数十ポイントも変動することが判明したのです。
一語の違いで成功率が100%から2%に落ちるなんて、かなりシビアな話ですね。これはモデルが言葉を理解する能力が足りないから起きるんですか?
能力が足りないわけではありません。むしろ画像だけを見るモデルは言葉の揺らぎに強いのに、行動させる部分に渡した途端にその強さが受け継がれないのが問題です。訓練データにない新しいタスクとの差が21点あるのですが、言い回しだけでほぼその差が埋まることも示されています。
言い回しだけで21点の差が埋まるなら、モデルの性能差ではなく指示の出し方が鍵だということですね。では、現場で使う技術者から見ると、この直し方は実際に組み込みやすいんですか?
組み込みは比較的簡単です。訓練に使ったタスクの命令をいろいろ言い換えて成功率を測り、そこから大規模言語モデルに10 から 20 個の直しルールをまとめさせます。すると配布時に新しい命令が来ても、そのルールに従って一度だけ言い換えてからモデルに渡すだけで済みます。
10 から 20 個のルールで済むなら、管理も楽そうですね。ただ、この直しルールは訓練データにない新しい命令にも効くんですか。
効きます。12 の unseen タスクで16 から 27 パーセントの向上が見られました。特に訓練データにない新しいタスクでの伸びが顕著です。別のモデルと環境でも再現し、成功率は93.6%から97.8%まで上がっています。再訓練も不要で、未知の命令にもゼロショットで適用できます。これは新しい命令が出てきたときに、事前の練習なしにそのまま対応できるということです。教科書の見本を一度も見ていない生徒が、同じ解き方の問題に突然直面したときのように、型番や手順を覚え直す必要がない状態です。
再訓練が不要で未知の命令にも対応するというのは、開発の手間が大幅に減りますね。ただ、この直しルールを作るのに使う大規模言語モデル自体の性能が結果に左右される心配はないんですか?
いいえ、そんな心配はありません。ルールを導出する段階で大規模言語モデルを使っていますが、この方法は再訓練が不要で未知の命令にも対応し、十二の保持タスクで改善が見られています。
最後に、この直しルールは他の種類のロボット制御モデルにもそのまま応用できる見込みですか。
要旨には「applies zero-shot to unseen tasks and instructions」とあり、他のアーキテクチャへの適用可能性が不明とされている訳ではない。また「今後の研究課題」という記述も要旨にない。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文