学習の順序でモデルが覚える約束を変え、学習率スケジュールがその仕組みを分けた
この記事のポイント
- データ順序でモデルが規約にコミットする
- 学習率スケジュールで順序効果を分離
- 能力は保存されるが規約非依存では見えない
数字で見る
この記事に出てくる数字
| シグマ値 | 12.29σ |
|---|---|
| 割当範囲 | 0.04~0.87 |
| 定数率時の割当差 | 0.2221 |
どこで使えるか
順序効果の影響を制御したい人向け。学習率スケジュールの選択が結果を分ける 論文全文はarXivで公開済み 数値は実験結果の一部。実装コードの公開は記載なし
スポンサーリンク
解説
かみくだいて説明します
東京大学のWenhui ChenらがarXivに発表した研究で、AIモデルの学習順序がモデルの能力そのものではなく、どちらの正解の書き方を採用するかというコミットメントを変化させることが示されました。
能力は変わらないんですか。では、研究している人から見ると、順序がどう影響するんですか。
順序が変わると、モデルが覚える正解の表記が変わります。十通りの順序で同じデータ量を回した結果、12.29σの差が観測されますが、表記を区別しない評価基準では正確にゼロと見なされます。
12.29σの差が観測されるんですか。でも、表記を区別しない基準でゼロというのは、まだ掴めません。もう少しやさしく言うとどうなりますか。
正確には、テストの答えの書き方が二つあるとします。順序を変えても、答えの書き方だけを問うテストでは点数は同じですが、どちらの書き方を好むかという傾向だけが順序で変わるということです。
傾向だけが変わるんですか。では、作る人から見ると、この結果をどう学習の設計に生かすんですか。
十二通りの設定で合計の正解率は9.7%の範囲内で一定ですが、二つの表記のどちらを優先して覚えるかという配分は0.04から0.87まで変わります。この一定性は減衰型の学習率で読み取った結果で、定数の学習率だとノイズが大きくなります。
配分の差がそれだけあるんですか。では、減衰型を使うと実際にどう変わるんですか。
定数では配分の幅が0.2221でコントラストが11.63倍、崩れ方は単調に変化し、減衰型のコサインでは十個の条件が二つの明確なグループに収まります。
十個が二つにまとまるんですか。では、その偏りを完全に消す方法はありますか。
プロンプトに使う表記を明示的にマークすると、その偏りは解消され、合計の正解率が上限の87.5%に達します。ただし、この数値は減衰型の学習スケジュールを使った場合の測定結果です。
表記をマークするだけで解消するんですか。では、定数で学習率を維持した場合も同じようにマークすれば解消しますか。
そこはまだ分かっていません。定数で学習率を維持する場合はノイズが大きいため、正確な評価が難しいと論文にはあります。
なるほど。では、次に注目すべき点はどこですか。
要旨には、順序効果の分離と、減衰スケジュール下での保存則の記述がある。これらを踏まえ、減衰スケジュール下での保存則について問う形にする。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。