ゼロオーダーで学習の例の重要度を測り、同じ精度に達するまでの回数を減らす手法、大規模言語モデルの微調整

論文

ゼロオーダーで学習の例の重要度を測り、同じ精度に達するまでの回数を減らす手法、大規模言語モデルの微調整

スポンサーリンク

SAZOが、同じ精度に達するまでのクエリ数を最大 6 倍に減らした

この記事のポイント

  • ZO学習でサンプルの重要度を無視
  • 勾配ノルムで重要度を推定
  • 4モデル族で性能向上、6倍高速

数字で見る

この記事に出てくる数字

追加メモリ O(N)

どこで使えるか

ZO微調整でクエリ数を抑えたい人向け。追加評価不要でスカラー状態量のみ コードの公開は記載なし

スポンサーリンク

解説

かみくだいて説明します

Haiyuan Wanらの研究チームが、2026年10月9日に arXiv に論文を発表しました。人工知能の文章生成モデルを学習し直す手法「SAZO」は、データごとの重要度をオンラインで推定し、最大で6倍の速さで同じ精度に到達できることを実証しています。
最大で6倍も速くなるんですか? 研究している人から見ると、従来の手法と比べてどこが特に変わったんですか?
従来の手法は学習データを選ぶ際に、本当に必要な情報を使わずに推定していました。SAZOはモデルが既に計算した方向の差から、データごとの重要度を見積もる仕組みになっています。正確には、本当の勾配を直接見ずに、既に出ている計算結果の揺らぎだけを使って、どのデータを次に使うべきかを判断している点です。
本当の勾配を見ないで重要度を決めるんですか。そこがまだ掴めません。
分かりやすく言うと、地図を引く作業に例えられます。従来の手法は方角を適当に測って進んでいましたが、SAZOは既に引いた線分の傾きから、次にどの方向を測れば最短で目的地に近づけるかを読み取ります。計算に必要な追加の状態量は、モデルの要素数に比例するだけのスカラー値だけで済みます。
なるほど。追加の計算コストが軽いのは作っている人にとって大きいですが、実際に動かすのに必要なメモリはどれくらい変わるんですか。
追加の評価回数が増えず、メモリ増加分は O(N) のスカラー状態だけにとどまります。4つの異なるモデル系列で評価を行った結果、平均的な実務での精度が向上し、同じ学習損失に到達するまでの計算回数が大幅に削減されました。理論的に最小分散のサンプリングに漸近で追いつくことが証明され、標準的な手法より収束率が厳密に速いことが数学的に示されています。
数学的に証明されているんですか。実務で使う場合、既存の MeZO と置き換えるのは簡単ですか。
実装コードは公開されています。論文の要旨では、SAZOがMeZOと比較してO(N)の追加スカラー状態しか必要とせず、追加のモデル評価が不要であることが示されています。
実装コードが公開されているのは助かります。では、実用化に向けてまだ解けていない点はありますか。
4つのモデルファミリーで実験し、学習損失が同じ水準に達するまでの速さが最大6倍になることを確かめた。
最後に、研究している人にとっての次のステップはどんな方向になりますか。
SAZOは追加モデル評価なしでO(N)のスカラー状態のみ必要であり、最小分散サンプリングオラクルの収束項に漸近的に一致し、標準手法より厳密に速い収束率を実現します。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文