MagiCが 15 モデルの視覚推論を分析し、表面的なパターン依存の限界を明らかにした
この記事のポイント
- 視覚推論か表面パターンか不明だった
- 5,500弱教師900人力のベンチを新指標で評価
- MagiScoreで限界を可視化。ただし15モデルのみ
数字で見る
この記事に出てくる数字
| 弱教師QA例数 | 5,500 |
|---|---|
| 人間注釈例数 | 900 |
| 評価モデル数 | 15 |
どこで使えるか
視覚推論の限界を自己分析したい人向け。15モデルの比較分析結果が使える arXivで論文公開済み 7B〜70Bの15モデルを4次元で評価
スポンサーリンク
解説
かみくだいて説明します
Chengfei Wu さんたちの研究チームが、大規模な視覚言語モデルの推論能力を評価する benchmark、MagiC を公開しました。およそ 5,500 件と 900 件の問題で 15 種類のモデルを調べたところ、多くのモデルが視覚情報を正しく使えていない傾向が明らかになりました。
視覚情報を使えていないというのは、画像を見ながら答えるテストで、実際には画像を無視して答えを出しているということなんですか?
そうです。例えば問題文の文字だけを読んで正解を選んでいるケースが多く、画像に書かれているヒントを踏まえて推論を積み上げていません。正確には、画像の一部を囲む境界ボックスと、モデルが導き出した理由が一致していない状態です。
文字だけ頼って正解を選んでいるんですね。開発する側からすると、この benchmark で点数を取るためにモデルを訓練すれば、実務でも画像をちゃんと見るようになりますか。
必ずしもそうとは限りません。わざと誤ったヒントを混ぜたテストでは、モデルの判断が急激に崩れる結果が出ています。つまり画像の表面的なパターンに依存している段階で、実務で求められる堅牢さには届いていません。
わざと間違ったヒントで揺さぶるテストなんですね。自分で出した答えを振り返って修正する力はどうでしたか。
自己修正の能力はモデルによって差が大きく、推論の過程を細かく測る StepSense という指標で見てみると、モデルごとに明確な差が出ました。最終的な正解率だけでなく、推論の段階ごとの質を数値化する MagiScore も導入しています。
正解率だけでなく、推論の段階ごとの質を数値で見るんですね。これまで何ができていなかったんですか。
従来の評価では最終的な答えが合っているかだけを見ていました。MagiC では推論の妥当性や画像との整合性、自己修正の能力を別々に測るため、どこでつまずいているかが具体的に分かるようになりました。
弱点を特定して訓練データを選ぶ目安になるんですね。実際にモデルを使う側は、この結果をどうやって改善に結びつけられますか。
公開された問題と指標で、画像のどの要素に頼っているか診断し、弱点を特定します
改善に結びつける具体的な手順が分かるんですね。では、次はどうなりますか。
15モデルの最終回答の正解率、推論の有効性、グラウンディングの忠実性、自己修正能力の4つの次元で評価しました。
最後に、実務で使えるレベルまであとどれくらいだと見られていますか。
正確な時期はまだ分かっていませんが、推論の質を測る指標が標準化されれば、開発現場での改善サイクルは確実に早くなります。
あわせて、今月にはマルチモーダルモデルにおけるステップバイステップの推論が視覚的証拠と適切に紐づいているかを課題とする別の研究も出ています。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。