再学習で忘却を防ぐノイズ最適値、タスク構造がある場合に有効な話

論文

再学習で忘却を防ぐノイズ最適値、タスク構造がある場合に有効な話

スポンサーリンク

再学習不要の継続学習で、ノイズ量に最適値があることがシミュで確認された。

この記事のポイント

  • 保持が逆U字になる条件を特定
  • 共方向の復元力が最適を生む
  • 共有構造がある場合に限定

数字で見る

この記事に出てくる数字

最適ノイズ sigma^2

どこで使えるか

共有構造のある継続学習を組む人向け。タスク数が増えると効果が減衰する シミュレーション結果のみで実装コードは記載なし BrainScaleS-2は別論文。実装は未公開

スポンサーリンク

解説

かみくだいて説明します

Gunner Levi Howe 氏が arXiv に発表した研究で、継続学習の仕組みにランダムなノイズを混ぜると、以前のタスクの記憶が一定の量まで向上し、それを超えると逆に悪化する、山型の関係が確認されました。
ノイズを混ぜるだけで記憶の定着が変わるんですか。混ぜる量はどのくらいがちょうどいいんですか。
ちょうどいい量はタスクごとの干渉の大きさで決まります。干渉が大きいほど、最適なノイズの量は増える傾向があり、既存の測定結果でもその方向性は確認されています。ただし指数の正確な値は現在の計算グリッドでは解けていません。
干渉が大きいほど多くのノイズが必要だと。同じ大きさの力でも方向が揃っていないと効果が出ないんですね。
あります。記憶を戻そうとする方向が、以前の重みと揃っている必要があります。同じ大きさの力でも、ランダムな方向だと効果はなく、間違った目標に向かって力を加えると逆に記憶が損なわれます。
方向がずれると逆効果だと。では、そのノイズと重みの関係をどう動かすんですか。
注入するノイズの分散sigma^2に、アンカーゲインを結びつける一行のルールで動きます。従来のOrnstein-Uhlenbeck AdaptationやMESUはこの結びつきを実装していません。
分散とゲインを結びつける一行のルールだと。従来の手法がこれを実装していないからこそ、最適な量が違ってくるんですね。
分散はノイズがどれくらいばらけるかを示す数値です。例えば的を外れた矢印が的の中心からどれくらい離れるかを決める幅と同じです。この幅をゲインで調整することで、ノイズが記憶を揺るがす代わりに、かえって定着を助ける方向に働きます。
的の幅を調整して、揺るがす代わりに定着を助ける方向に働くんですね。ランダムに並び替えたタスクでは効果がなくなるんですか。
共通するタスクの構造がある場合に限られます。ランダムに並び替えた MNIST では効果がなく、構造の違いが境界を決定しています。タスク数が増えると利点は持続しますが弱まり、回転の族ではその傾向を説明できません。
構造が共通している場合だけ効いて、タスク数が増えると弱まるんですね。最後に、このルールは実際に動く環境で使えますか。
現在の論文はシミュレーションだけの検証です。ハードウェア上での実装は別の論文で報告されていますが、この研究からはハードウェアに関する主張はしていません。実環境への適用については、そこはまだ分かっていません。

出典

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-論文