LoRA付きLLMのバックドアを除去するNull-Space Projection、推論の費用を下げる話

論文

LoRA付きLLMのバックドアを除去するNull-Space Projection、推論の費用を下げる話

スポンサーリンク

Null-Space Projectionが、LoRA付きLLMの攻撃成功率を10%未満に下げた。

この記事のポイント

  • 既存手法は前提が厳しく実用に限界があった
  • LoRA更新を各層の入出力チャネルで射影した
  • ASRを約100%から10%に削減し能力を保持

数字で見る

この記事に出てくる数字

攻撃成功率 100%→10%

どこで使えるか

バックドア混入LoRAを修正したい人向け。再学習不要で一般能力とタスク能力を保持 論文公開済み LoRAモデルのバックドア除去に特化

スポンサーリンク

解説

かみくだいて説明します

Jianwei Liらの研究チームが、2026年10月1日付でarXivに論文を発表しました。LoRAという手法で学習させた大規模言語モデルに、意図せず悪意のあるバックドアが仕込まれるリスクへの対策として、Null-Space Projectionという手法を提案しています。攻撃成功率を、およそ100から10未満に下げながら、モデルの元々の能力と、学習で得た新しいスキルはそのまま残すことに成功したとしています。
攻撃の成功率を100から10に下げたんですか。LoRAで学習したモデルに、別の学習をやり直すことなく、その場ですぐに対応できるということですか。
そうです。従来の手法は、攻撃に使われた特定のトリガーの情報や、正常な学習データの参考、あるいはモデルの再学習が必要でしたが、それらを一切使わずに済みます。手法の名前にもあるNull-Space Projection、つまりNull空間への射影という処理で、モデルの各層や heads の入出力チャンネルに、直交するNull空間を構築します。そこにLoRAの更新分を投影することで、悪意のある部分だけを取り除く仕組みです。
直交するNull空間に更新を投影する、というのは少しイメージが掴めません。もう少しやさしく言うと、どうなるんですか。
例えば、掃除機で部屋を掃除するときに、ホコリだけ吸い取って、家具やカーペットはそのまま残すようなイメージです。モデルが覚えた情報の中から、攻撃に関連する方向だけを特定して、それと垂直の方向に情報を整理し直します。そうすれば、悪意のある部分だけを消して、本来使うべき機能は残せます。
埃だけを吸い取って、家具はそのままにするんですね。では、この手法はテキスト分類の1層から、生成タスクのフルパラメータの大規模言語モデルまで、段階的に規模を拡大して検証したんですか。
正確にはそうです。アブレーションスタディと呼ばれる検証を段階的に進め、最初はテキスト分類の単一層から始め、最終的には生成タスクを行うフルパラメータの大規模言語モデルまで適用範囲を広げました。データ選定と特徴の近似処理を丁寧に行うことで、高忠実度のバックドア方向を抽出しています。
高忠実度のバックドア方向を抽出する、というのはまだ難しい言葉です。具体的に、どれくらいの規模のモデルで試したんですか。
そこはまだ分かっていません。論文ではモデルの具体的なパラメータ数や、使用したデータセットの名前は明記されていません。ただ、攻撃成功率が100未満から10未満に下がったという数値と、ベースモデルの性能が保たれているという結果は、複数の設定で確認できているとしています。
具体的なモデル名やデータセットの明記がないんですか。では、この手法を実際の開発現場で使う場合、計算資源や時間面でどれくらい負担がかかるんですか。
再学習なしで不審なパラメータを修正できるとしており、各層やヘッドごとにNull空間を作る処理そのものにかかる時間やメモリの量については述べていません。
再学習は要らない一方で、各層の入力と出力の方向にNull空間を作る計算は挟まるわけですね。この手法について、ほかに触れておきたい点はありますか。
要旨は実用化のスケジュールや実環境での検証結果には触れていません。今後の発展に期待します。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文