WhisperやQwen3-ASRの誤変換を減らすLLMフィルタ、警察無線の文字起こし精度を上げる話

論文

WhisperやQwen3-ASRの誤変換を減らすLLMフィルタ、警察無線の文字起こし精度を上げる話

スポンサーリンク

WhisperとQwen3-ASRの誤変換を減らすLLMフィルタが、警察無線の文字起こし精度を上げた

この記事のポイント

  • BPCのラベル品質が不明
  • LLMで誤りを除くフィルタ導入
  • BaltimoreとChicagoでWER低減

どこで使えるか

ノイズの多い警察無線の文字起こし精度を上げたい人向け コードの公開は記載なし

スポンサーリンク

解説

かみくだいて説明します

警察の無線通信って、ノイズがひどすぎて文字起こしが難しいですよね?
確かにその通りです。現場の判断過程を理解するには、正確な文字起こしが不可欠です。
人手でラベル付けするのはコストが掛かりすぎませんか?
その通りで、既存の自信度スコアではノイズの多い領域の品質を区別できないという壁があります。
arXivで公開された本研究は、外部のLLMを判定役として使うフィルタリング手法を提案しています。
そのLLM判定って、具体的にはどういう仕組みなんですか?
生成された転写文が文脈として自然かをLLMの知識で検証し、不自然なデータを除外する仕組みです。
外部モデルで品質管理するんですね!
GPUメモリを効率的に割り当て、モデル間の同期オーバーヘッドを最小限に抑える構成です。
精度はどの程度向上するんですか?
内部の信頼度スコアと比べ、文脈に合わない転写文を的確に除外し、学習データの品質を有意に向上させています。
従来の手法と比べて明確な差があるんですか?
内部の信頼度指標では見逃していた低品質な疑似ラベルを、外部のLLMで判断して取り除いています。
でも、特定の方式に最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
確かに。内部の信頼度指標では高品質と低品質の疑似ラベルを区別できず、外部のLLMによるフィルタリングが必要でした。
実際の試し方はどうすればいいですか?
外部のLLMでフィルタリングし、信頼できない文字列を排除します。
WhisperとQwen3-ASRの2モデルで検証しました。
this手法、次の研究の方向として有望らしいです

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文