本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

Top-$k$パレートバンディット:多目的スレート選択における超体積後悔

記事の要約

本論文では、各ラウンドでエージェントがk個のアームからなるスレートを選択し、半バンディットフィードバックの下でd次元報酬ベクトルを観測する確率的多目的バンディット問題を扱う。目的はパレートフロンティアを共同で近似する小さなアクション部分集合を維持することであり、支配超体積によって形式化される。近似超体積後悔(α=1-1/e)を定義し、楽観的な限界寄与推定に基づく貪欲アルゴリズムTHV-UCBを提案、ギャップフリーおよびギャップ依存の後悔限界を導出する。

ソースarXiv Machine Learning著者: Nicolas Gutowski, Fabien Chhel, Alexandre Letard, Sylvain Lamprier
Top-$k$パレートバンディット:多目的スレート選択における超体積後悔
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

多目的最適化の分野では、複数の競合する目標を同時に考慮する意思決定が重要である。従来のアプローチは単一の最適解を特定することに焦点を当てていたが、現実の応用(推薦システム、広告配信など)では、パレートフロンティアをカバーする多様な解集合を維持することが望まれる。このたびarXivに掲載された論文「Top-$k$パレートバンディット:多目的スレート選択における超体積後悔」は、この問題を確率的多目的バンディットとして定式化した。

問題設定:各ラウンドでエージェントはk個のアームからなるスレートを選択し、選択された各アームのd次元報酬ベクトルを観測する(半バンディットフィードバック)。目標は、パレートフロンティアを近似する小さなアクション部分集合を維持することである。著者らは、選択された部分集合によって支配される超体積を用いて目的を形式化し、最適なサイズkの部分集合に対するα近似超体積後悔を定義する。ここでα=1-1/eは、単調劣モジュラ関数に対する貪欲最大化の近似保証を反映する。

提案アルゴリズム:著者らはTHV-UCB(Thresholded Hypervolume Upper Confidence Bound)を導入する。この楽観的アルゴリズムは、各アームの限界超体積寄与の信頼上限に基づいて、貪欲にアームを選択する。理論解析により、インスタンスに依存しないギャップフリー後悔限界Ñ(d√(nkT))と、ギャップ依存の後悔限界Ñ(nk^(2.5)/Δ_min)を導出した。後者は、アームが十分に分離されるとTに対して対数多項式となる。

これらの結果は、様々な多目的応用において、小規模な部分集合を用いてパレートフロントを近似するための理論的基盤を提供する。論文は21ページ、7図、7表で構成され、著者らはコードとデータへのリンクも提供している。本研究成果は、推薦システム、自動意思決定、資源配分など、多目的な選択問題に応用可能であり、今後の研究の基盤となることが期待される。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • パレートフロンティア近似を目的とする多目的スレート選択バンディット問題を導入。
  • 支配超体積による目的の形式化と近似超体積後悔の定義。
  • 楽観的な限界寄与に基づく貪欲アルゴリズムTHV-UCBの提案。
  • ギャップフリー及びギャップ依存の後悔限界を提供し、小規模部分集合によるパレートフロント近似を理論的に裏付け。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。