RLCPが推薦リストの多様性を最大 5.21 倍に高めた。
この記事のポイント
- 固定スレートで多様性不足
- 閾値で行動セットを適応
- 19構成で多様性最高。ただし深さは同等
数字で見る
この記事に出てくる数字
| 実験設定数 | 19 |
|---|
どこで使えるか
推薦リストの多様性を上げたい人向け。閾値で行動セットを適応。 arXivで公開済み コード公開の記載なし
スポンサーリンク
解説
かみくだいて説明します
推薦システムの研究チームが、表示するアイテムの数をセッションごとに自動で調整する手法を発表しました。Wenwen Siらが10月7日にarXivに投稿した論文では、候補のリストを不要なものを切り捨てながら最適化する強化学習の枠組みを提案しています。
推薦システムで使う候補の数を、毎回変えるという話ですね。固定ではなくて。
そうです。これまで多くのシステムは、スレートサイズという表示枠を一度決めるとそのまま使い続けていました。スレートサイズというのは、本屋の陳列棚の段数みたいなものです。しかしユーザーが求めている物の数はセッションの中で増えたり減ったりします。そこで critic という判定モデルの点数と、オンラインで更新されるしきい値を使って、残す候補の数を動的に決めています。しきい値は買い物かごの容量の目印のようなもので、選んだリストの中に正解に近い目安のアイテムが含まれているかどうかという二値のフィードバックから更新されます。
しきい値が二値のフィードバックで動くんですね。では、切り捨てを繰り返しても報酬が落ち込まないという保証は出ているんですか。
出しています。値の損失を、外しすぎによる損失と選びすぎによる損失の二つに正確に分けました。これは例えば、必要な本を棚から外しすぎて在庫が空になることと、要らない本まで残して棚が溢れることの二つに区別するようなものです。この分解から、学習パラメータが完全に収束しなくても、セッション全体で得られる報酬の上限が有限で抑えられることを示しています。
棚の空と溢れの二つに区別できるんですか。研究している人から見ると、この分離が実際にどう測れるんですか。
実験データで確認できます。公開データセット KuaiRand-Pure と MovieLens 1M で、二つの RLCP の実装を四つの強化学習の基礎手法と比較しました。19の組み合わせすべてで、少なくとも一方の RLCP がカタログ多様性で最も高い値を出しています。最も強い基礎手法の1.11倍から5.21倍に達し、セッションの深さも同等以上で、保持するリストサイズはむしろ小さく抑えられています。
19パターンすべてで多様性がトップという結果ですね。では、現場の技術者がこの手法を組み込む場合、計算量や実装の手間はどれくらい変わるんですか。
そこはまだ分かっていません。論文では理論的な上限と実験結果のみが示されており、実装に必要な演算コストや既存システムへの組み込み難易度についての記述はありません。
実装コストまでは明記されていないんですね。
はい。いまのところ、しきい値の更新や他の推薦タスクへの広がりについては何も言われていません。
代理目標の正確性に関する仮定が気になりますね。
出典
この記事のもとになった情報
※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。