跳到主要内容
AI News HubLIVE
站内改写2 分钟阅读

双向信息不对称下的上下文赌博机监督博弈

文章摘要

该论文提出一种上下文赌博机团队博弈,用来刻画人类监督AI代理时的双向信息不对称:人类私下知道自己的奖励函数,AI私下知道所提动作的质量。作者基于CIRL和监督博弈,给出团队最优与短视规则两种一次性刻画,并指出两者之差是一片可避免的伤害区域。

来源arXiv AI作者: Yunjin Tong
双向信息不对称下的上下文赌博机监督博弈
报告错误

纠错通道尚未开通,可先复制下方文章信息留存。

查看更正说明
直接读正文

这篇由 Yunjin Tong 于2026年6月30日提交到 arXiv 的论文,关注的是AI代理在运行过程中接受人类监督时出现的一种双向信息不对称。作者指出,在现实中,人类监督者往往私下知道自己的奖励函数,也就是她真正想要什么;而AI则私下知道它所提议动作的质量。这种不对称在自主机器人或软件代理先行勘察了人类无法直接评估的现场时尤为自然。

为了分析这一问题,论文在合作逆强化学习(CIRL)与监督博弈(Oversight Game)的基础上,引入了一个带有双向不对称信息的上下文赌博机团队博弈,并设计了一个包含 play、ask、trust、oversee 四种选择的交互接口。人类可以在AI直接执行动作、向AI询问、选择信任AI或亲自监督之间做出决定。

作者强调,采用赌博机结构的好处在于去掉了物理状态转移。这样一来,某些在完整部分可观测马尔可夫决策过程(POMDP)设定下只能作为猜想的一次性性质,可以得到精确刻画。不过,共同的信念在多个回合之间仍然是一个被动态控制的状态,因此重复交互中的信息更新依然复杂。

论文给出了两种一次性刻画。第一种是团队最优,即从人类与AI作为合作团队的全局角度出发的最优决策规则;第二种是行为上更自然的短视规则,即人类依据当前先验做出看似合理的判断。两者之间的差距被作者称为一片可避免的伤害区域。在这片区域中,AI私下知道所提议的动作是有害的,关闭或阻止该动作会有帮助,但短视的人类因为信任自己的先验而选择不去监督。

作者进一步论证,这一差距本质上源于监督沟通的非可信性:AI虽然知道动作有害,却无法通过可信的方式让人类相信并采取监督行动。论文还对这一差距如何在多轮交互中动态消解给出了部分分析,涉及被动学习与主动信号两种机制,并考虑了监督反应存在一个周期滞后的情形。该工作属于人工智能与计算机科学中的博弈论交叉方向,为理解人机合作中的信息不对称与监督失效提供了形式化框架。

展开要点与分析

文章情报

工程师进阶

要点

  • 把双向信息不对称引入运行时监督,建立带play/ask/trust/oversee接口的上下文赌博机团队博弈
  • 赌博机结构去掉物理状态转移,因而得到在完整POMDP下只能靠猜的一次性精确刻画
  • 团队最优与短视规则之差对应一片可避免伤害:AI知道动作有害且关闭有益,但人类信任先验而不监督
  • 该差距是非可信监督沟通的代价,论文还初步分析其通过被动学习与主动信号在多轮中动态消解

要点与分析由自动化流程生成,可能有误,请结合原始来源核实。