3Dの姿勢推定モデルにプライバシー保護を組み込んだ手法と、その攻撃耐性を評価した話

論文

3Dの姿勢推定モデルにプライバシー保護を組み込んだ手法と、その攻撃耐性を評価した話

スポンサーリンク

Kinematics-Induced 3D HPEが、個人レベルのプライバシー保護と攻撃耐性評価を統合した。

この記事のポイント

  • 同人物の記録で個人特定リスク
  • 骨格考慮のセンサー融合と差分プライバシー
  • MM-Fiで3プロトコル。ただし公開は採択後

どこで使えるか

個人特定リスクを評価・低減したい人向け。公開は採択後 論文受理後にソースコード公開予定 MM-Fiデータセットで評価済み

スポンサーリンク

解説

かみくだいて説明します

2人の研究者、Kaushik Bhargav SivangiさんとFani Deligianniさんが、arXivに3次元の人の姿勢を推定する新しいフレームワークを発表しました。映像カメラとレーザー距離センサー、ミリ波レーダーの3つのセンサーを組み合わせ、骨格の動きを基準にデータを統合して正確な姿勢を予測する仕組みです。
3つのセンサーを一緒に使うんですね。作る人から見ると、それぞれのセンサーのデータを合わせるのに、どれくらいの計算量が必要になるんですか?
計算量そのものの数値はまだ示されていませんが、関節の位置を各センサーごとに合わせた上で、骨格構造を反映させてからセンサーごとの情報を適応的に集約する段階を踏みます。つまり、無駄に全部を同時に処理するのではなく、動きのタイミングに合わせて必要な情報だけ重みをつけて取り込む形です。
動きのタイミングに合わせて必要な情報だけ取る、ということですね。では、プライバシー保護の部分は、研究している人から見ると、従来の手法とどこが違いますか?
従来の手法は記録単位の分析になりがちでしたが、今回は個人単位のプライバシー監査と学習を同時に組み込んでいます。具体的には、攻撃者が姿勢データからその人が学習データに含まれているかを推測する黒箱攻撃を想定し、情報漏えいの程度を数値で評価した上で、行動と時間の分布に基づいてサンプリングを行う差分プライバシーを適用しています。
攻撃を想定して、その漏えい量を数値で測ってから保護を入れるんですね。そこがまだ掴めません。行動と時間の分布に基づいてサンプリングというのは、具体的にどうやるんですか?
分かりやすく言うと、データセットの中から個人の情報を取り出すとき、特定の行動や特定の時間帯に偏らないように重みをかけて選ぶ方法です。例えばある人がよく歩くデータばかりだと、その人の行動パターンが特定されやすくなります。そこで集団全体の行動比率に合わせてサンプリングを行い、特定の個人のパターンが突出しないように調整しています。
特定の人のパターンが突出しないように重みをつける、ということですね。では、この手法を実際に動かすには、MM-Fiというデータセット以外でも使えますか。
評価はMM-Fiデータセットで3つの実験プロトコルで行いましたが、他のデータセットでの検証結果についてはそこはまだ分かっていません。ソースコードは論文が受理された後に公開する予定とあります。
3つの実験で検証して、コードは受理後に公開になるんですね。では、このフレームワークが実用化されるには、まずどこが解決する見込みですか。
個人単位のプライバシー保護と高精度な姿勢推定の両立が課題でしたが、今回のフレームワークはセンサー融合と差分プライバシーを一体化させた点に位置づけがあります。公開されるソースコードをもとに、他のデータセットでの検証や計算効率の改善が進められる見込みです。
最後に、この研究の次のステップとして、研究者側が注目している点はどこですか。
論文の要旨には、ソースコードは論文が受理された後に公開される予定とあるのみで、他のデータセットへの適用や軽量なセンサー構成での検証、実環境での計算負荷、異なるセンサー組み合わせへの対応については一切言及がない。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文