SFT-as-contextが、専門能力の低下を最大 2.2 ポイントに抑えつつ汎用能力を維持。
この記事のポイント
- SFTで汎用能力が低下する
- 親モデルにSFT応答をコンテキストとして与える
- 19組で汎用能力を維持し専門能力も維持
数字で見る
この記事に出てくる数字
| AIME 2024 差 | 2.2ポイント |
|---|
どこで使えるか
専門と汎用を両立させたい人向け。学習不要で親モデルの汎用能力を維持 arXivで公開済み 19ペア・11ベンチマークで検証済み
スポンサーリンク
解説
かみくだいて説明します
Kenan Tangらの研究チームが、2026年10月8日に大規模言語モデルの学習手法について論文を発表しました。専門的なタスクに特化させて学習する際、元の汎用的な能力が失われる問題を、追加の学習なしに解決する方法です。親モデルが特化モデルの回答を参考資料として使い、その場で判断する仕組みになっています。
追加の学習なし、ということは親モデルをそのまま使うということですか?
そうです。特化させたモデルは新しいスキルは身につきますが、元々の能力が低下してしまうため、両方が必要な質問には対応できなくなります。そこで親モデルに特化モデルの回答を参考として読み込ませることで、特化モデルに近い性能を維持しつつ、元の能力も失わないようにしています。19組のモデルペアで試したところ、AIME 2024とLiveCodeBenchでは特化能力の差が2.2ポイントと2.1ポイント、汎用能力の差は平均で2.2ポイント以内でした。
差が2.2ポイント以内なら実用上は遜色ないと言えそうです。では、技術者が組み込む際に特別な準備は要るんですか?
特別な準備は要りません。既存の親モデルに、特化モデルが出力した回答をテキストとして渡すだけで動きます。小さいオープンソースモデルの回答を、強力なクローズドソースモデルの参考資料にする実験でも、どちらか一方だけで使う場合よりも性能が向上しました。11個のベンチマークで検証しており、参考資料として渡す回答の品質次第で、親モデルの判断がどう変わるかまで確認できています。
小さいモデルの回答を大きいモデルが参考にする、という発想は確かに面白いですね。研究している方から見ると、どこが新しい成果になるんですか?
特化能力と汎用能力の両立が難しい点を、理論的な裏付けで示した点です。ベイズの枠組みで、特化能力の誤差は特化モデルに、汎用能力の誤差は親モデルにそれぞれ限定できることを導きました。モデルがSFTの回答をどこまで参考にするか確認したところ、役に立つ回答には注意を向け、関係ない回答には向かないことが分かりました。
そこがまだ掴めません。役に立つ回答には注意を向け、関係ない回答には向けない、というのは具体的にどうなるんですか?
本を読むときの蛍光ペンのようなものです。親モデルが特化モデルの回答を読むとき、重要な部分に蛍光ペンを引いて強く意識し、関係ない部分はさらっと流すように処理しています。これにより、参考資料の中から必要な情報だけを正確に取り出せるようになります。
蛍光ペンで重要な部分だけ拾う、というイメージですね。では、この手法は他の学習手法と組み合わせて使えるんですか?
いいえ、使えます。小さなオープンソースモデルの応答が、強力なクローズドソースモデルの性能を向上させることが示されています。
他にも試せる応用がありそうですね。最後に、実用化に向けて何がまだ見えていないんですか?
親モデルがSFTモデルの回答に注意を向け、有用な応答にはより注目し無関係なものには注目しないことで、インコンテキストラーニングを通じてSFT応答を活用していることが示唆されています。
出典
この記事のもとになった情報
- arXiv:SFT-as-Context Mitigates Forgetting in Supervised Fine-Tuning
- 公開日:2026-10-08
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。