3D Gaussian Splatting で分光CTを再構築し、材料分解も行う SpectralCTGaussians

論文

3D Gaussian Splatting で分光CTを再構築し、材料分解も行う SpectralCTGaussians

スポンサーリンク

SpectralCTGaussiansが分光CTの体積再構築で最高PSNR

この記事のポイント

  • 従来の手法は1ステップで直接RGB分割できなかった
  • エネルギー依存の基礎関数と各ガウスの組成分率を学習
  • 単一チャネルのガウス数で全エネルギーを記述

数字で見る

この記事に出てくる数字

PSNR best
Gaussian数 1channel相当
エネルギーチャネル 全チャネル

どこで使えるか

分光CT再構築と物質分解を単一の表現で同時に行いたい人向け arXivで公開済み

スポンサーリンク

解説

かみくだいて説明します

医療画像処理の分野では、被曝量を減らしながら詳細な組織情報を得られるマルチエネルギーCTが注目されていますよね?
確かにその通りです。従来のCTでは単一の線量しか扱えなかったため、異なる物質の区別が難しいという課題がありました。
既存の再構成手法だと、エネルギーごとのデータを別々に処理するから、計算コストが膨大になってしまうんですよね?
はい。本手法は全エネルギーチャネルを単一の共有表現で記述し、必要なガウス点の数は単一チャネルの手法と同等です。
arXivで公開された本手法は、3DガウススプラッティングをスペクトルCTに適用し、各ガウス点に物質組成の割合パラメータを追加しています。
そのアプローチって、具体的にはどういう仕組みなんですか?
各ガウスに基底材料の割合を追加し、エネルギー依存の基底関数と合わせて減弱を定義します。光電吸収やコンプトン散乱などの物理モデルを前方モデルで最適化し、全チャネルを同時に処理します。
一つのモデルで全エネルギーを同時に学習するんですね!
物質分解は平均シフトクラスタリングで係数を処理し、直接RGB画像として可視化できます。
従来の手法と比べて、具体的にどこが改善されたんですか?
従来の再構成アルゴリズムや既存の学習ベース手法をすべて上回り、新規視点合成で従来手法を凌駕し、スペクトルCT体積再構成ではピーク信号対雑音比が全比較対象中で最高値を記録しています。また、全エネルギーチャネルを単一の共有表現で記述しながら、ガウス点の数は単一チャネル手法と同等に抑えられています。
計算量を増やさずに画質と分解能の両立を実現したんですか?
はい、物質分解においても従来のパイプラインを上回るピーク信号対雑音比で光電吸収基底を回復し、ワンステップで直接RGB物質セグメンテーションを実現しています。
でも、特定のデータセットに最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
実際には、独自に用意した合成データセットと基準となる実データセットで評価していて、従来の手法や学習を使った手法とも比べています
実際の試し方についての質問です。自分で動かすことはできますか?
実データと合成データで従来の手法や最先端の学習ベース手法と比較し、新しい視点の合成やPSNRで優位性を示しています。
従来の手法や最先端の学習ベース手法と比較し、新しい視点の合成やPSNRで優位性を示しています。
3D ガウシアンで CT の物質分解が一段階で進みますね!

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文