合成データの数を決めるのは難易度でないと示した研究、AI監視の訓練データ設計

論文

合成データの数を決めるのは難易度でないと示した研究、AI監視の訓練データ設計

スポンサーリンク

合成データは難易度でなく監視対象で必要量が決まる

この記事のポイント

  • 合成データがいくつ必要か不明だった
  • 14分布4モデルで学習曲線を追跡
  • 半獲得サイズは概念と分布で42-45%説明

数字で見る

この記事に出てくる数字

合成サンプル数 10-590
分散の割合 42-45%
中央値サンプル数 7-11

どこで使えるか

合成データの量を決めたい人向け。概念と分布で半獲得サイズが42-45%説明される 評価スイート・生成セットを公開済み モデル・プロンプトの詳細は記載なし

スポンサーリンク

解説

かみくだいて説明します

arXivに Ankush Checkervartyが発表した研究によりますと、人工知能のモデルを監視する装置が、10-590個の合成データで訓練曲線を追跡したところ、必要な数はモニターする内容で決まり、データ一つひとつの難しさではないと分かりました。
なるほど。モニターする内容というのは、具体的にはどのようなものなんですか?
危険な場面を見守るもの、人に危害を加える返答を弾くもの、そして指示に従わない返答を拾うものの三つです。このうち危険な場面と危害を弾くものは、Gemma-3-27B-ITというモデルで80個のデータがあれば十分でしたが、指示に従わないものを見る方は、それの数倍が必要でした。
80個で十分になるものと数倍必要になるものの差が、なぜ生まれるんですか?
答えはデータの広がりです。危険な場面を監視する方は、ある種類のデータから他の種類のデータへ、ほぼ完全に知識が移ります。例えば型違いのタイヤでも、同じ溝のデザインなら一つで他の車種にも使えるようなものです。一つのデータ種だけで、他の全てをカバーできるのです。逆に指示に従わないものを見る方は、一つの種から他の種へはほとんど移らないため、多くの種類のデータを準備しなければなりません。
一つのデータで全部カバーできるのか、それとも一つずつ増やさないといけないのか、それが差になるわけですね。では、この結果は実際に人工知能を組み込む現場で、どう役立てられるんですか?
従来は同じ種類のデータを深く集めるより、いろいろな種類のデータを広く集める方が効率が良いとされてきました。今回の研究では、必要なデータ数を決める要因のうち、モニターする内容と評価する分布が42-45%を占め、データを作る人工知能やプロンプトの細かさは10%未満でした。
データを作る人工知能やプロンプトの細かさは、影響が10%未満なんですね。では、この研究で使われたデータや評価のセットは、一般に公開されるんですか?
はい。評価のセット、開発用のデータ、そして生成した合成データの三つを、研究チームが公開しています。これにより、他の研究者が同じ条件で検証できるようになります。
公開されるんですね。最後に、この監視装置の精度は、実際のユーザーの会話データでも確認されているんですか?
はい。小さなモデル三つと、開発用の実際の会話データでも、危険な場面が最も少ないデータ数で済むという順番は変わらなかったと報告されています。
実際のデータでも同じ結果が出たんですね。
モニターする内容によって必要データ数が決まり、有害な応答の検出は高リスクより多くのデータが必要ですが、これは異なるモデルや実データでも確認されています。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文