TutlAitが公開。約20.9時間のモロッコ・タマジフト音声と方言ラベル。
この記事のポイント
- ラベル付き音声データが不足していた
- クラウドで収集し地域アクセントを付与
- 13384ファイル。ただし小規模方言は少ない
数字で見る
この記事に出てくる数字
| ファイル数 | 13,384 |
|---|---|
| 収録時間 | 20.9時間 |
| データ量 | 3.01GB |
どこで使えるか
モロッコ・タマジフトの音声認識や翻訳を自前で試す人向け。地域アクセントラベル付き。 arXiv論文で公開済み 地域別内訳あり。16kHz mono WAV
スポンサーリンク
解説
かみくだいて説明します
Mohamed-Amine Chadi さんたちの研究チームが、モロッコのアマズィグ語、通称タマザイトの音声データセット「TutlAit」を公開しました。13,384 本の音声ファイルを集め、合計 75,231 秒、およそ 20.9 時間のデータです。アラビア語の文字起こしと、話者の地域アクセントのラベルを付けています。
データセット「TutlAit」を公開したんですね。13,384 本もの音声を、どうやって集めたんですか。
専用の Web アプリを使って、一般のボランティアに録音と文字起こしを依頼しました。画面にアラビア語の文を表示してタマザイトで読んで貰う Text-to-Audio と、タマザイトの音声を流してアラビア語で書いて貰う Audio-to-Text の二つの手順があります。
Text-to-Audio と Audio-to-Text は、それぞれ読む方向と書く方向を逆にした作業なんですね。ボランティアはスマートフォンで録音するんですか。
ブラウザ上で直接録音できます。集めた音声はすべて 16kHz のモノラル WAV に変換し、SHA-256 という仕組みで重複ファイルを自動で弾いています。
16kHz のモノラル WAV は分かりますが、SHA-256 で重複を弾くというのは、まだ掴めません。もう少しやさしく言うとどうなりますか。
正確には、ファイルに固有の数字の指紋を付けて、同じ指紋が既に登録されていたら受け付けない仕組みです。手作業で同じ録音を二重に入力しても、システムが自動で見分けます。
自動で見分けられるなら、データの品質管理は楽になりますね。リフやカビレのデータが 20 本台というのは、やはり少なすぎますか。
アトラス地方が 9,956 本、スース地方が 3,378 本です。リフ地方が 22 本、カビレ地方が 28 本と、少数のデータも含まれています。
アトラスとスースに偏っているのが分かります。このデータを使って音声認識のモデルを作る場合、リフやカビレの少ないデータはどう扱うんですか。
そこはまだ分かっていません。研究チームは音声認識や翻訳、アクセントの識別に使えると述べていますが、実際のモデルへの組み込み方や精度については、これ以上の詳細は公開されていません。
最後に、ボランティアが集めたデータは、今後いつでも自由に使えるんですか。
研究チームは再利用を前提に公開していますが、商用利用の条件や、データセットの更新スケジュールについては、そこはまだ分かっていません。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。