Yolo v5m の検出精度を測る話 悪天候下でのドローン探知

論文

Yolo v5m の検出精度を測る話 悪天候下でのドローン探知

スポンサーリンク

YOLOv5mは霧で検出精度が大きく低下。霧対応学習で回復するも、極端な霧では限界。

この記事のポイント

  • 霧濃度別の影響を測る手法がなかった
  • 10段階の合成霧で検出性能を計測
  • 全濃度で向上するが極端な霧では限界

数字で見る

この記事に出てくる数字

mAP減少率 96%
mAP向上幅 +0.320
クリア空低下 9.1%

どこで使えるか

霧の中でのドローン検出を自前で構築する人向け。霧の強さを段階的に評価できる arXivで論文公開済み コード公開の記載なし。モデルはYOLOv5mベース

スポンサーリンク

解説

かみくだいて説明します

Gur Levy Birkental さんらの研究チームが、ドローンを上空から検知するシステムが霧の中でどれだけ性能を落とすか、10 段階の濃度を制御したベンチマークを arXiv に公開しました。クリアな空で訓練した YOLOv5m と、霧の画像も混ぜて訓練したモデルを比べた結果、最も濃い霧では検知精度がおよそ 96% まで落ち込みます。
96% というと、ほぼ見つけられなくなるということですね。霧が薄い段階から急に性能が落ちるんですか。
はい、霧の濃さを表す数値がおよそ 0.05 から 0.10 の間で、一気に検知が難しくなります。専門用語で mAP と呼ばれる総合的な検知スコアで測ると、この範囲で大半の失速が起きています。例えば、遠くで小さな点としてしか見えないドローンを、曇りの日に車のヘッドライトで探すようなものだと思ってください。光が霧に散乱すると、最初はかすかに霞む程度でも、ある瞬間を境に完全に白く塗りつぶされてしまいます。
境目がかなり狭い範囲で起きるんですね。霧がある画像だけで訓練したモデルなら、クリアな空でも同じように見えなくなるんですか。
霧の画像だけで訓練したわけではなく、クリアな画像と霧の画像を混ぜて訓練したモデルです。クリアな空での精度は 9.1% だけ下がるものの、霧の中でも最大で 0.320 ほどの検知スコアを回復できます。つまり、普段の飛行では少し見にくくなる代わりに、霧の中でも諦めずに探せる範囲が広がります。
霧が非常に濃い状態では、それでも検知が難しくなるということですね。実務でこのシステムを使う場合、どの程度の霧までを安全圏として設定すればいいんですか。
具体的な距離や濃度の数値は、発表された内容には含まれていません。そこはまだ分かっていません。ただ、信頼性が失われる範囲が非常に狭いことと、最も濃い霧では性能が完全に回復しないことは明確です。従来のように霧があるかないかだけでテストすると、実際の運用リスクを過小評価してしまう恐れがあります。
では、今回のデータセットについて教えてください。これまで使われていたデータと何が違うんですか。
今回使ったのは Anti-UAV300 というデータセットです。これまで天候を単にありとなしで区別していただけの研究と違い、合成した霧を 10 段階の濃さに分けて評価しています。雨の被害が最も extreme とされていた以前のベンチマークと比較しても、霧による精度の落ち込みの方が激しいことが数値で裏付けられました。
雨よりも霧の方が検知には厳しい条件なんですね。この 10 段階のテスト結果を、実際にドローンを飛ばす現場の訓練にどう活かすことができますか。
霧の画像を学習データに追加することで、検知可能な濃度の基準を引き上げられます。現場では、これまで霧があると判断して飛行を中止していた範囲を、モデルが対応できる濃さまで安全圏として広げられる可能性があります。
最後に、この研究チームは今後、どのような検証を進める予定ですか。
霧に対応させて学習したモデルでも、どの濃さの霧でも検出精度は上がり、明瞭な画像での精度低下もわずか9.1%に抑えられますが、それでも最も濃い霧では性能の崩壊自体は防げていません。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文