Qwen3.5 のマルチ教師学習で教師ごとの影響を均す手法、複数スキルを統合する話

論文

Qwen3.5 のマルチ教師学習で教師ごとの影響を均す手法、複数スキルを統合する話

スポンサーリンク

DN-MOPDは Qwen3.5 のマルチ教師学習で、指示スキルの影響を抑えて数学の性能を回復させた

この記事のポイント

  • MOPDで数学の専門家が活かされなかった
  • 各領域のフィードバックをばらつきで正規化
  • 6ベンチで平均向上。ただし固定重みでも同等

数字で見る

この記事に出てくる数字

モデルサイズ 3
ベンチマーク数 6

どこで使えるか

数学の専門性を活かしたマルチ教師学習を組む人向け。指示スキルの影響を抑える正規化が要る arxivで公開済み

動画を見る

スポンサーリンク

解説

かみくだいて説明します

Xin Liらの研究チームが2026-09-29に公開した論文では、複数の専門モデルを統合する手法の改善案が示されました。指示に従う能力のフィードバックが数学のそれより数倍広がり、生徒モデルが数学の専門性を十分に習得できていませんでした。
複数の専門モデルを一つにまとめるわけですね。その際、どの専門家が教えるかを決める仕組みは従来通りで、強さを調整するのが新しいんですか?
そうです。どの専門モデルが回答するかは従来通りルーティングで決めますが、各領域のフィードバックが生徒モデルに与える影響の強さを、領域ごとの広がり具合で割り直すのがDomain-Normalized MOPDです。例えば音響機器の音量調整で、あるチャンネルだけ音が大きすぎるとき、他のチャンネルのゲインを下げて全体を均す作業に似ています。
音量調整に似えるんですね。では、作る側から見ると、この手法で得られた重みの数値は、他のモデルにそのまま転用できるんですか。
転用できます。Qwen3.5の3つのサイズのモデルで検証したところ、6つの公開ベンチマークで平均スコアが向上し、数学の専門モデルが持っていた性能の大半を取り戻すことができました。
3つのサイズすべてで改善したそうです。固定の重みで試した場合、Domain-Normalized MOPDが測定した数値に近い値でも同等の性能が出たということです。
正確には、Domain-Normalized MOPDが測定した重みに近い固定値を使っても同等の性能が出ます。つまり、領域ごとのフィードバックの広がりを実測して数値を導き出す過程は、結局のところ指示に従う能力のフィードバックを下げることと同等の効果を持つということです。
指示に従う側の強さを下げるのが鍵だったんですね。では、研究する人から見ると、数学以外の分野でも同じように広がり具合が偏っているんですか。
そこはまだ分かっていません。今回の検証は数学と指示従順の2領域に限定しており、他の分野への適用については測定データが不足しています。
なるほど。では、作る側にとって、この知見を現場のモデル開発に即座に反映させるのは容易ですか。
容易です。ルーティングの仕組みはそのまま残し、領域ごとのフィードバックの広がりを実測して数値で割るだけで済みます。専門モデルを組み合わせる際、どのモデルが教えるかだけでなく、フィードバックの強さをどう決めるかが重要だという知見が得られました。
最後に、今後の展開で何がまだ見えていない点を教えてください。
教える強さを領域ごとに測って揃えるやり方は、指示に従う力の助言を抑えるのが効いていて、測った値に近い固定の重みでも同じくらいの結果になると確かめました。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文