CSCWDが、ラズパイ5で82ミリ秒の遅延で小さな物体を検知する精度を上げた
この記事のポイント
- 軽量検出器では解像度情報が失われる
- 超層間知識蒸留で教師の空間表現を転移
- ラズパイ5でも遅延増えず検出精度向上
数字で見る
この記事に出てくる数字
| mAP@0.5 | 50.17% |
|---|---|
| パラメータ数 | 2.58M |
| 推論速度 | 12.15fps |
どこで使えるか
エッジデバイスでリアルタイム推論したい人向け。モデル軽量化後も検出精度を維持 arXivで公開済み YOLO11n-CSCWDは教師モデル依存
スポンサーリンク
解説
かみくだいて説明します
小型ドローンや鳥をリアルタイムで検出する際、エッジデバイスで動く軽量モデルだとどうしても小さな物体が見逃されがちですよね?
確かにその通りです。解像度を落とすと高周波の詳細が失われ、わずか数ピクセルの微小物体は検出パイプラインから完全に消えてしまいます。
既存の手法だと、モデルを軽くするのと精度を保つのは両立不可能だったんですか?
従来の同一スケール特徴蒸留は同じピラミッド層同士で情報を伝達するため、学生モデルの浅い層が教師の高分解能特徴を直接吸収できず、性能が頭打ちになっていました。
arXivで公開されたCSCWDという学習時フレームワークが、この構造的な壁を跨ぐアプローチを採用しています。
そのアプローチって、具体的にはどういう仕組みなんですか?
教師モデルのP2層から学生モデルのP3層へ、特徴アライメントを介して空間情報を横断的に転写します。比喩で言えば、ベテランが直近の工程で得た詳細なメモを、次の担当者に途中経過で共有するイメージです。
なるほど、層をまたぐことで情報損失を防ぐわけですね!
深層ピラミッドでは従来通り同一スケール蒸留を維持し、推論時のモデル構造は一切変更しません。
実際の数値改善効果はどれくらいあるんですか?
Drone-vs-BirdデータセットでmAP@0.5が50.17%、リコールが59.73%を達成し、ベースラインのCA-YOLO11nをmAPで2.92ポイント、リコールで3.55ポイントそれぞれ上回りました。
推論速度はどうなったんですか?
Raspberry Pi 5上でNCNN-FP16を動かした際、2.58Mパラメータの学生モデルが82.32ミリ秒のエンドツーエンド推論遅延、つまり12.15フレーム毎秒を記録し、ベースラインと同等のメモリ使用量を維持しています。
でも、特定のドローンデータセットに最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
確かにゼロショット評価でDUT-Anti-UAVデータセットでも精度が向上し、実データでも有効です。
実際の試し方はどうすればいいんですか?
ラズベリーパイ5でNCNN-FP16を使い、640x640解像度で82ミリ秒の推論時間で50%以上の精度が出ます。
推論コストを増やさずに微小物体の検出精度を上げられるのは、現場にとって大きな前進ですよね!
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。