MRI基盤モデルはデータセットごとに画像内容を別方向にエンコーディングし、新しいデータセットで精度が落ちる
この記事のポイント
- MRI基盤モデルの精度低下原因が不明
- 17データセット8手法で内容符号化を測定
- 3DINOとSAM-Med3Dのみ転移成功
数字で見る
この記事に出てくる数字
| 公開データセット数 | 17 |
|---|---|
| 表現モデル数 | 8 |
どこで使えるか
異なるデータセット間でモデルを転用したい人向け。内容の符号化方向が一致しないと精度が落ちる GitHubでコード公開済み 3DINOとSAM-Med3Dのみ転移可能
スポンサーリンク
解説
かみくだいて説明します
Minh Sao Khue Luuらの研究チームが、脳MRIのAIモデルが新しいデータセットで精度を落とす原因を調べました。17の公開データセットと8つのモデルで検証したところ、モデルはデータセットごとの撮影条件を認識していますが、見慣れないデータセットではほとんどのモデルが失敗することが分かりました。
原因は撮影条件の違いではないんですか?
確かに従来の説では、モデルがどこで撮影されたかという情報だけを覚えていると考えられていました。しかし今回の検証では、撮影場所の情報を除去する4つの手法を試しても、モデルの精度は一向に改善しませんでした。実は画像の内容そのものが、データセットごとに異なる方向に記憶されていることが原因です。
4つの手法で情報を消したんですね。
そうです。INLPやLEACE、CORAL、敵対的学習という手法で、データセット固有の情報を消去してみましたが、いずれもシーケンスの転移精度は向上しませんでした。
手法を変えても改善しないというのは、根本的な仕様に関わる話ですね。
正確には、学習の仕方がデータセットごとに異なる方向に固定されているため、表面的な情報だけを消しても中身の記憶の向きが変わらないということです。
なるほど。研究している人から見ると、どこが新しい発見だったんですか?
これまではデータセット間のズレを改善することばかりが研究されてきましたが、根本的に異なる方向に学習している以上、ズレを修正する手法では限界があるという点です。汎用画像で事前に学習した3DINOとSAM-Med3Dの二つだけが、データセットを跨いで正確に画像の内容を捉えることができました。脳に特化して学習したモデルは、未学習のモデルと同等の精度しか出せませんでした。
脳に特化している方が精度が下がるんですか。
はい。専門領域に絞って学習したBrainIACとBrainFMは、何も学習していないモデルと同等の性能でした。汎用データで広く学んだ方が、異なるデータセットへの適応力が高いという逆転の結論です。
現場の技術者が実務に組み込む場合、どのモデルを選べばいいんですか?
実務で使う場合は、汎用モデルの3DINOかSAM-Med3Dの中から選ぶことになります。コードは公開されていますので、手元で動作確認を行うことも可能です。ただし、他の手法が一律で効果を示さなかった点は、実装時に手法の選択を慎重に行う必要があるという目安になります。
最後に、実用化の時期はいつ頃見込まれるんですか?
実用化の時期は要旨に書かれておらず、脳特化のBrainIACやBrainFMは未訓練のネットワークと同程度の精度にとどまったと述べられている。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。