皮膚病変の分析をパターン分析で支える MDSkin-Net、ゼロショットでの性能向上

論文

皮膚病変の分析をパターン分析で支える MDSkin-Net、ゼロショットでの性能向上

スポンサーリンク

MDSkin-Netは PH2 でメラノーマ判定 97.84%、セグメンテーション 92.38% を達成

この記事のポイント

  • 臨床知識を欠くマルチタスク枠組み
  • パターン分析の事前知識で学習
  • PH2でAUC97.84%、ただしDSCのみ

数字で見る

この記事に出てくる数字

DSC(PH2) 92.38%
AUC(PH2) 97.84%
DSC(ISIC18) 88.92%

どこで使えるか

皮膚病変の判定精度を上げたい人向け。臨床知識を組み込み、ゼロショットでも高精度を維持する。 arXivで論文公開済み モデル重みの公開は記載なし

スポンサーリンク

解説

かみくだいて説明します

皮膚病変のAI診断って、セグメンテーションと分類を同時にやろうとすると精度が落ちるんですよね?
確かにその通りです。複数タスクを共有アーキテクチャで回すと、それぞれの専門性が干渉し合うのは現場でよく報告されています。
既存の手法は、臨床知識を無視してネットワークだけ結合しているんですか?
そうです。マクロなABCD則を注入する手法もありますが、ダーモスコピー専用で設計された微小構造の分析フレームワークではないため、臨床現場との乖離が否めません。
arXivに公開されたMDSkin-Netは、ダーモスコピー固有のPattern Analysis priorをCNNとTransformerのハイブリッド構造に組み込んだ手法です。
そのアプローチって、具体的にはどういう仕組みなんですか?
中心となるPAGAMは、iECAでチャネル重みを調整し、MSSAで多解像度の空間情報を抽出し、BAAで非対称性をバイアスとして捉えます。
微小な病変の輪郭と色調の偏りを同時に重み付けするんですね!
PAGAMの3つの事前知識が、病変領域の特定と分類の両方を支えています。
実際の数値はどの程度改善したんですか?
ISIC 2017で学習し、PH2のゼロショット評価ではDSC 92.38%、メラノーマAUC 97.84%を達成しています。ISIC 2018テストセットでもDSC 88.92%です。
単一タスクの専門モデルと比べても遜色ないんですか?
分類はベースラインと同等ですが、セグメンテーションは単一タスク専門家がわずかに上回ります。ISIC 2017ベンチマークでは分類AUC 91.60%、セグメンテーションDSC 84.72%を記録しています。
でも、特定のデータセットに最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
その通りです。ISIC 2017ベンチマークでは、セグメンテーション精度は単一タスクの専門モデルに及ばない結果となっています。
実際の試し方はどうすればいいんですか?
論文ではISIC 2017の学習データのみで訓練し、外部データなしでPH2やISIC 2018のテストセットでゼロショット評価を行っています。
検証は複数の規模のコホートにわたって一貫して汎化することを示しています。
ゼロショット評価でロバストな転移を実現しています。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文