AI のバイアス検査でモデルを比較する話、10の検査ツールと10のモデルで検証

論文

AI のバイアス検査でモデルを比較する話、10の検査ツールと10のモデルで検証

スポンサーリンク

10の検査ツールがモデルのバイアスで順位を一致させなかった

この記事のポイント

  • 十のツールで十の模型を審査
  • 順位付けは偶然と変わらない
  • ツールが異なる概念を測るため

数字で見る

この記事に出てくる数字

検出成功数 8/10
順位相関 W=0.07
過剰補正件数 273/278

どこで使えるか

モデルのバイアスで順位を付けたい人向け。ツールが異なる概念を測るため一致しない。 GitHubでコード・データ公開済み 分析コードはソースから全数値を再計算可能

スポンサーリンク

解説

かみくだいて説明します

William Guey たちの研究チームが、人工知能のモデルに偏見があるかどうか調べる 10 種類のツールを 10 種類の最先端モデルにかけた結果、偏見の検出はできるもののモデル同士を順位付けする一致は Kendall's W=0.07 で偶然と同じ水準だったと報告しています。
10 個も比べたんですね。作る側から見ると、どのツールを選べばいいか迷いそうです。
実際 10 個のうち 8 個が偏見を明らかに検出できていますが、ツールによって測っている中身が違います。例えば強制選択式のツールは女性や労働者階級に有利になるように答えをずらす傾向があり、自由文章生成のツールは従来の固定観念に沿った答えを返すので、同じモデルでもツールが変われば順位が入れ替わります。
測るもの自体が違うなら順位を比べる意味がなくなりますね。研究する人から見ると、どこがまだ解けていないんですか。
ツールが測る対象をどう定義するかです。弱いモデルを混ぜた確認実験ではツール単体での再現性は取り戻せましたが、ツール間の順位一致は一向に改善しませんでした。つまり、異なる概念を測っている可能性が示唆されており、一つの数字でモデルの善し悪しを決められないのが現状です。
違う概念を測っているというのは、例えば同じ物を測る定規が 10 本あって、目盛りが違うということですか。
正確にはそれ以上に根本が違います。体重を測る体重計と、身長を測る測定器で同じ人を測っているようなものです。数値は出てきますが、どちらが正しい順位かを決める基準自体が別物なので、ツールを一つに絞ってモデルを並べるのは物理的に無理です。
だとすると規制で順位を使うのは危険ですね。人工知能を使う側として、現場で実際にどのくらい困っているんですか。
規制が求める順位付けをそのまま当てはめると偏見の方向さえ逆転する可能性があります。自由文章で出た答えと強制選択で出た答えでは同じモデルが正反対の評価になるケースが報告されていて、強制選択では 273/278 の採用判断で女性や労働者階級に有利に偏りました。一つのツールだけで順位を決める運用は、この論文の結論から支持できません。
方向が逆転するというのは、ツール次第で善悪が変わるということですね。では、次は順位を比べる方法についてですが、コードは公開されているんですか。
全ての生データと分析コードが GitHub に公開されています。論文で報告している数字をソースデータから全て再計算できる状態です。
自分で確かめられるのは安心ですね。最後に、今後この問題はどうなっていくんですか。
ツール間の不一致は解消しない見込みです。測る対象が別物である以上、モデルを単純に並べる運用は当面変わらないでしょう。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文