Qwen2.5 7Bの拒否能力は、難易度で AUROC 低下が 0.003 から 0.276 に拡大
この記事のポイント
- 英語訓練モデルの有害性表現が翻訳後も残ると考えられていた
- 9言語でEasyとHardの否定例を比較して転移を測った
- Easyでは高転移するが、Hardでは低リソース語で崩壊する
どこで使えるか
多言語拒否の評価を組む人向け。Easy否定例だけだと転移を過大評価する arXivで公開済み
スポンサーリンク
解説
かみくだいて説明します
LLMの安全アライメントって、基本的に英語で訓練されていますよね?
確かにその通りです。英語圏のデータで拒否能力を鍛えていますが、以前の研究では有害性検出が他言語でもほぼ完璧に転移すると報告されていました。
転移しているなら、なぜ低リソース言語で拒否ミスが起きるんですか?
従来は単なるキャリブレーションの問題だと考えられていて、有害性そのものの表現が言語を超えて保たれていると解釈されていました。
arXivに公開された最新論文では、この結論が評価に使うネガティブ例の選び方に依存していることが示されています。
そのアプローチって、具体的にはどういう仕組みなんですか?
無関係な harmless プロンプトを使う Easy Negative では転移が成立しますが、XSTest のような表面類似の Hard Negative を使うと、言語リソースが少ないほど検出性能が急落します。
表面の似ている悪意のあるリクエストと見分けがつかなくなるんですか!
翻訳品質の差 chrF を制御しても影響は残りますし、トークナイザーの拡張性が一部説明できますが、全てではありません。
性能低下の具体的な数値はどれくらいになるんですか?
Qwen2.5-7B-Instruct で確認したところ、Easy Negative での AUROC は 0.98 を超えますが、Hard Negative に切り替えると英語で 0.003 の低下だったものが、高リソースで 0.017、中リソースで 0.042、低リソースで 0.276 まで低下します。
低リソース言語でのAUROC低下幅が0.276と大きくなると、リソース格差が実用上の課題として明確に見えますね。
その通りで、Easy Negative だけの評価では有害性表現が翻訳後も保たれていると結論づけるのは危険だと示しています。
でも、評価指標を変えただけなら、結局根本的な解決にはなっていないんじゃないですか?
ご指摘の通りです。モデルの安全性が上がる話ではなく、評価の見直しです。無関係な無害文で測ればほぼ完璧に転移して見えますが、有害な依頼に似せた無害文で測ると、低リソース言語では崩れてしまうんです。
実際の評価ではどうやって試せばいいんですか?
XSTest contrast prompts を hard negatives として使うと、低リソース言語で転移が崩壊します。easy negatives だけだと表現が保持されていると誤認する恐れがあります。
対象は資源量の異なる三つの階層にまたがる 9 言語で、資源の少ない言語ほど転移が崩れる傾向は Aya Expanse でも再現しています。翻訳の質やトークンの切り方だけでは説明しきれないそうです。
偽りの安全から本物の安全へ、評価基準の進化に期待します!
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。