TecoPromptが OxfordPets で 50% ノイズ下、精度を 0.775 から 0.843 に引き上げた
この記事のポイント
- few-shotでノイズが最適化を乱す
- OT候補の時間的安定性で信頼検証
- 7データセット、OxfordPetsで0.843
どこで使えるか
ラベル半数の非対称ノイズ下で精度を上げたい人向け。OT候補をKエポックで安定確認して書き換え arXivで公開済み CLIPのセマンティック空間を使用
スポンサーリンク
解説
かみくだいて説明します
Zeyi Shao さんたちの研究チームが、画像と文章を理解する AI モデルの学習手法について arXiv に論文を発表しました。ラベルの書き間違いが半数あっても精度を大幅に回復させる手法です。
書き間違いが半数あっても回復するんですか。この手法は、モデルを作る側の人がそのまま組み込めるものですか。
組み込み自体は可能です。論文では CLIP というモデルの内部で、正しいラベル候補を Optimal Transport という数学的な手法で探します。例えば大勢の人がいる会場の中で、正しい答えだけを静かに選り分けるイメージです。ただ候補を出すだけでは不十分で、何回かの学習サイクルを通じてその候補が変わらないか、つまり時間軸で安定しているかをチェックします。安定している場合だけ、古いラベルを新しい候補に書き換えます。
時間軸で安定しているかどうかを見て、変わらなかったら書き換えるんですね。その書き換えたラベルは、どうやってモデルの学習に使われるんですか。
書き換えたラベルは、三つのグループに分けて使います。正解と分かっているデータ、中途半端に noisy なデータ、そして明らかに noisy なデータの三つです。それぞれのグループに合わせて誤差を測る値、つまり損失関数を三つ用意し、合計してモデルに教えます。これによって、モデルが noisy なデータに偏って学習する確認バイアスという問題を減らします。
三つのグループに分けて誤差を測るんですね。その分、学習にかかる時間はどれくらい増えるんですか。
そこはまだ分かっていません。論文には学習時間の比較データが含まれておらず、精度の向上に焦点が当てられています。
精度重視の検証なんですね。では、この手法が有効なのは、ラベルの書き間違いがどのくらいの割合からなんですか。
論文の実験では、対称ノイズと非対称ノイズの両方で検証しています。例えば OxfordPets というデータセットでは、非対称ノイズが 50% の状態で精度が 0.775 から 0.843 に上がりました。七つのデータセットと Food101N で同じ傾向が見られています。
半数の書き間違いでもそこまでの数字が出るんですか。その場合、書き換えられていないラベルはそのまま使われているんですか。
書き換えられていないラベルはそのまま残ります。論文の手法では、K エポックという学習の区切りの中で候補が安定しているかを確認し、さらに指数移動平均という直近の値を重視する重み付けで信頼度を超えた場合だけ書き換えます。条件を満たさないラベルは初期のままで学習に進みます。
最後に、研究している人から見ると、どこがまだ解けていないんですか。
実世界のデータに生じる自然なノイズへの対応がまだ解けていない部分です。論文で使ったのは人工的に混ぜたノイズなので、実際の現場でそのまま使えるかは今後の検証を待つ必要があります。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。