HSI-Roadの路面を6分類に再ラベルしたデータセットと、RGB・NIRの組み合わせを評価した話

論文

HSI-Roadの路面を6分類に再ラベルしたデータセットと、RGB・NIRの組み合わせを評価した話

スポンサーリンク

HSI-Roadが路面の 6 分類ラベルと RGB・NIR 組み合わせの評価結果を得た。

この記事のポイント

  • HSI-Roadデータセットに6クラスのラベルを付与
  • 192×384解像度でRGBとNIRを比較評価
  • NIRはRGBに補完情報を提供し得る

数字で見る

この記事に出てくる数字

NIRチャンネル数 25ch

どこで使えるか

路面素材の判別を自前で実装する人向け。RGBとNIRの組み合わせが有効。 arXivで論文公開済み データセットと評価コードは記載なし

スポンサーリンク

解説

かみくだいて説明します

Imad Ali Shah たちの研究チームが、道路の表面を判別するデータセット HSI-Road のラベルを付け直した論文を arXiv に公開しました。背景、アスファルト、コンクリート、砂利、水、芝生の 6 つの分類を新たに設け、6 種類のモデルで比較した結果、赤外線と可視光を合わせたデータが同じ解像度なら最も安定して正確に判別できることが分かっています。
なるほど。同じ解像度で比べたとき、赤外線だけより合わせた方が強いんですか。
はい。同じ 192×384 の画素数で並べた場合、赤外線と可視光を縦に重ねた RGBN_stk が、赤外線単独より 6 種類すべてのモデルで上回り、アスファルトやコンクリートなど 5 つの分類で可視光単独よりも良い数値を出しています。ただ、可視光をそのまま使った RGB_ori が一番良い数字を出しているのは、画素数が合わせたデータのおよそ 12 倍あるからです。
画素数が 12 倍違うと、もはや条件が同じではないですね。では、同じ条件にするための登録処理は、実際にモデルを作る側が使えるものですか。
論文には登録パイプラインと対応する注釈が公開されているとあります。ただ、コードの具体的な入手方法や、別のデータセットへの転用方法については、そこはまだ分かっていません。
水が最も安定して数値が上がっていたんですね。では、その理由については論文の中で詳しく説明されていますか。
論文では赤外線が可視光とは別の情報を提供すると報告しています。水が最も安定して数値が上がったとありますが、なぜ水に特に出やすいのかの詳しい理由までは触れていません。
なるほど。ところで、数値の出し方にある IoU と F1 っていうのは、具体的に何を測っているんですか。
簡単に言うと、モデルがここはアスファルトですと言った部分と、実際にアスファルトだった部分がどれくらい重なっているかを百分率で表したものです。例えば、地図の上に透明なシートを置いて、正解の場所と自分の印がどれだけ一致しているかを測るのと同じです。
透明なシートで重なる面積を測るんですね。分かりやすいです。
最後に、この 6 分類のラベル付けは、自動でできるんですかそれとも人手でやっているんですか。
論文のタイトルに手動でラベル付けしたと明記されていますが、作業に要した時間や、判断が分かれた部分の処理方法については、そこはまだ分かっていません。
なるほど。
RGBoriが最高性能でも12倍の画素数があり、同等解像度ではRGBNstkが優れており、空間解像度の重要性とNIRの補完性が示されています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文