多目的最適化の分野では、複数の競合する目標を同時に考慮する意思決定が重要である。従来のアプローチは単一の最適解を特定することに焦点を当てていたが、現実の応用(推薦システム、広告配信など)では、パレートフロンティアをカバーする多様な解集合を維持することが望まれる。このたびarXivに掲載された論文「Top-$k$パレートバンディット:多目的スレート選択における超体積後悔」は、この問題を確率的多目的バンディットとして定式化した。
問題設定:各ラウンドでエージェントはk個のアームからなるスレートを選択し、選択された各アームのd次元報酬ベクトルを観測する(半バンディットフィードバック)。目標は、パレートフロンティアを近似する小さなアクション部分集合を維持することである。著者らは、選択された部分集合によって支配される超体積を用いて目的を形式化し、最適なサイズkの部分集合に対するα近似超体積後悔を定義する。ここでα=1-1/eは、単調劣モジュラ関数に対する貪欲最大化の近似保証を反映する。
提案アルゴリズム:著者らはTHV-UCB(Thresholded Hypervolume Upper Confidence Bound)を導入する。この楽観的アルゴリズムは、各アームの限界超体積寄与の信頼上限に基づいて、貪欲にアームを選択する。理論解析により、インスタンスに依存しないギャップフリー後悔限界Ñ(d√(nkT))と、ギャップ依存の後悔限界Ñ(nk^(2.5)/Δ_min)を導出した。後者は、アームが十分に分離されるとTに対して対数多項式となる。
これらの結果は、様々な多目的応用において、小規模な部分集合を用いてパレートフロントを近似するための理論的基盤を提供する。論文は21ページ、7図、7表で構成され、著者らはコードとデータへのリンクも提供している。本研究成果は、推薦システム、自動意思決定、資源配分など、多目的な選択問題に応用可能であり、今後の研究の基盤となることが期待される。