HarmBenchは有害拒否を単一属性として測れていない。
この記事のポイント
- HELM Safetyのスコアは単一属性を測っていない
- HarmBenchを2つの心理測定で検証した
- 範囲限定一致でフラグは消えるが完全ではない
数字で見る
この記事に出てくる数字
| 対象データセット数 | 4 |
|---|---|
| 心理測定テスト数 | 2 |
どこで使えるか
安全評価の数字を比較する人向け。属性が混ざらないか確認してから使う 公開論文として入手可能 モデル比較には注意が必要
スポンサーリンク
解説
かみくだいて説明します
2026-10-09にChristopher M. Stewartらの研究チームが、人工知能の安全性を測る指標について問題点を指摘しました。複数の試験をまとめて一つの数字にしているため、同じ点数でも中身が全く違う模型を、見分けていない可能性があります。
点数が同じでも中身が違うって、どういうことなんですか。
安全性を測る試験では、危険な指示を出したときに断る傾向、有害拒否という性質を測ろうとしています。しかし対象にした4つの試験セットのうち3つは、ほとんどの模型が満点に近い点数を取っていて、差がつけられていない状態でした。全員がすでに答えを知っているテストを受けているようなものです。
3つは差がつかないんですね。残りの1つ、ハームベンチという試験セットではどうでしたか。
そこを2つの統計的な手法で調べました。一つは多変量項目反応理論という分析で、試験の問題が本当に一つの性質だけを測っているか確かめます。数学のテストで図形の面積と計算の速さが混ざっていないか、問題ごとに分解してチェックする作業です。結果、一つの性質ではなく、複数の性質が混ざり合っている可能性が強く示唆されました。
複数の性質が混ざっているなら、模型の得意な部分が見えなくなりますね。開発元ごとに点数が変わる問題もあったんですか。
あります。項目機能の違いを見る分析で、同じ断る能力でも、開発元が異なる模型で点数がずれる問題が見つかりました。百人が受ける試験で、ある問題だけ特定の学校出身者にだけ有利になっていないかチェックするものです。開発元ごとの差は範囲を限定して比べ直すと目立たなくなりますが、それは数字をまとめてしまったことで生じる集約効果です。
集約効果って、数字を混ぜ合わせたことで本当の差が埋もれるということですね。だとすると、模型を選ぶ側はどの数字を信じればいいんですか。
一つの数字を、一つの性質を表すものとして使う前に、その数字が本当に一つの性質を測っているかどうかを証明する必要がある、というのがこの研究の結論です。平均で繋げると飽和している部分も隠れ、別の行動が混同されてしまいます。
研究している人から見ると、この指標は今後どう変わっていくんですか。
個別の性質ごとに試験を分けるべきかどうか、あるいはどの範囲で比べ直すのが適切かは、そこはまだ分かっていません。
最後に、模型の開発元が自主的にこの分析手法を取り入れる動きはありますか。
開発元ごとの対応方針については、そこはまだ分かっていません。
出典
この記事のもとになった情報
- arXiv:Searching for "Harmful Refusal": A Psychometric Audit of an AI Safety Benchmark
- 公開日:2026-10-09
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。