PhysioAIがKiMoReで99.03%、Hard-67で94.64%、UI-PRMDで87.44%の認識精度を出した。
この記事のポイント
- リハビリ動作はデータが小さく個人差も大きい
- 臨床辞書の記述をCLIPで埋め込み目標に投影
- 推論時は骨格入力だけで動作認識が可能
どこで使えるか
理学療法動作の自動評価を自前で実装したい人向け。臨床知識を埋め込み目標に投影し個人差にも強い arXivで論文公開済み 推論時は骨格入力のみ。CKDは訓練時のみ使用
スポンサーリンク
解説
かみくだいて説明します
Jie Cao さんらの研究チームが、リハビリの運動を骨格データだけで判別する PhysioAI を発表しました。臨床の知識を学習時の手引きに使う仕組みで、KiMoRe で 99.03%、Hard-67 で 94.64%、UI-PRMD で 87.44% の正解率を記録しています。
既存の判別手法は日常動作向けに作られているので、リハビリ特有の細かい動きや患者さんの動きの乱れには対応しきれなかったという話ですね。学習時に使う臨床の知識は、具体的にどこから持ってくるんですか。
構造化された臨床知識辞書というリハビリの専門用語集から取得しています。辞書の説明文を CLIP という画像と文章を同時に扱うモデルで数値に変換し、骨格モデルが狙うべき正解の位置として学習時に配置します。モデルが動くときはこの辞書の情報は使わず、骨格データだけを入力すれば判断できます。
正解の位置として配置するというのは、先生が患者さんの動きに対して毎回手取り足取り添削する代わりに、答えの座標を事前に地図にマークしておくイメージでしょうか。そこがまだ掴めません。
正確には地図というより、練習問題の解答欄にあらかじめ正解の番号を振ることに近いです。骨格モデルは番号を見て自分が出した動きが正しい位置に来ているか確認しながら重みを調整します。推論の段階ではその番号は使わないので、実際の診断では余計な情報を一切通さずに骨格データだけで判断します。
患者さんの動きが標準からずれる場合でも、そのずれた動き自体を臨床知識がカバーできるということですね。現場で使う技術者から見ると、この辞書に登録されている知識は既に公開されているんですか。
技術者の方は、臨床の辞書の内容をCLIPで数値化し、骨格モデルの学習パイプラインに接続する2段階を構築する必要があります。辞書は公開資料を基に作られていますが、接続の仕組みは論文に開示されています。
正解率の伸び幅は 0.27 点から 2.87 点、UI-PRMD では 1.33 点程度だと聞きましたが、その差は実用に耐えるレベルの違いなんですか。
統計的な誤差の範囲を超える明確な差です。特に個人差が大きいテストで出ているため、臨床現場での信頼性向上に直結します。ただし、他のリハビリデータセットへの転用効果はまだ測れていません。
推論が骨格データだけで完結する点は開発側の負担を減らせますね。では、実機で動かすときのデータ形式の統一は進んでいるんですか。
骨格データはKiMoReやUI-PRMDで評価されていますが、実機での連続運用テストについては、そこはまだ分かっていません。
最後に、臨床現場でこの仕組みが使えるようになるまでの見通しを教えてください。
実用化の時期についてはまだ分かっていませんが、臨床現場でこの仕組みが使えるようになる見通しとして、構造化された臨床知識がトレーニング時の教師信号として有効であることが示されています。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。