LLM の内部変化とタスク重要度を分離する研究、ファインチューニング後の層ごとの役割

論文

LLM の内部変化とタスク重要度を分離する研究、ファインチューニング後の層ごとの役割

スポンサーリンク

ファインチューニングで内部表現が大きく変わる層と、タスクに重要な層は異なる。

この記事のポイント

  • ファインチューニングで内部がどう変わるか不明
  • EAPで特定した成分と層の変化を比較
  • 結果は層ごとに偏る。ただし他タスクには移らない

どこで使えるか

内部変化と重要性が異なる層にあることを確認したい人向け。モデルの解釈性や制御性を高めたい場合に役立ちます。 arXivで公開済み コードの公開は記載なし

スポンサーリンク

解説

かみくだいて説明します

LLMのファインチューニングって、結局モデルの内部がどう書き換わっているのか、結局ブラックボックスですよね?
確かにその通りです。ファインチューニングは広く使われていますが、モデルがタスク固有の振る舞いをどこに、どのように格納しているかはこれまで明確になっていませんでした。
重要なパーツがどこにあるか分かれば、学習の効率も上がりませんか?
理論的にはその通りですが、重要なパーツの場所が分かっても、学習中にその部分が実際にどう変化するかは別問題です。論文では、重要なパーツの分布と、学習で大きく変化する層の間には相関が低いことが示されています。
そこでarXivで公開された新論文が、内部表現の変化と因果的重要性を分離して検証しています。
そのアプローチって、具体的にはどういう仕組みなんですか?
EAPで特定された重要なパーツのレイヤー分布と、ファインチューニングで最も大きな変化があったレイヤーの関係を調べます。両者の間には相関が低いことが示されています。
部品の層と大きく変わる層は、ほぼ相関がないんですね!
EAPで特定された重要成分が特定の層に集中していることが分かっています。
具体的にどの程度、場所と変化のズレが出たんですか?
因果的に重要なコンポーネントは特定レイヤーに集中しますが、ファインチューニングで最も大きな変化を起こしたレイヤーとの相関はほぼありません。また、性質が異なるタスク間ではEAPの一致度が高くても性能移転は見られず、高い一致度がある場合に別のタスクの性能が低下する逆転現象が確認されました。
重要なパーツが重なっているほど、逆に干渉し合うんですか?
因果的に重要なパーツの分布と、学習中の表現変化のズレ、そしてタスク間干渉の両方が明確に示されました。
でも、特定のアーキテクチャに最適化しただけなら、結局根本的な解決にはなっていないんじゃないですか?
なるほど。一方のタスクでファインチューニングすると、EAPで特定される成分が重複している別のタスクのパフォーマンスがむしろ低下する可能性があるんです。
実際の開発現場でどう試せばいいんですか?
マルチタスク学習で異なる性質のタスクを組み合わせると、EAPで特定される成分の重複があるにもかかわらず、逆に性能が低下する可能性があります。
マルチタスク学習におけるタスク間のオーバーラップが性能向上につながらない可能性が示されています。
タスクが異なる性質なら転移しないのは意外ですが、マルチタスク学習の設計には注意が必要ですね。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文