跳到主要内容
AI News HubLIVE
站内改写1 分钟阅读

OSCToM:强化学习引导的高阶心智理论对抗生成方法

文章摘要

论文提出OSCToM,通过强化学习、扩展领域特定语言和组合代理模型生成观察者与自我信念冲突的嵌套信念场景,以评测大语言模型的高阶心智理论能力。OSCToM-8B在信息不对称的FANToM基准上达到76%准确率,远超ExploreToM报告的0.2%,且数据合成效率提升6倍。

来源arXiv AI作者: Sharmin Sultana Srishty, Kazi Mahathir Rahman, Malaika Parizat Sakkhi, Samia Shahid Prianna, Shaikhul Islam Sinat
OSCToM:强化学习引导的高阶心智理论对抗生成方法
报告错误

纠错通道尚未开通,可先复制下方文章信息留存。

查看更正说明
直接读正文

大型语言模型在许多语言任务上表现出色,但在复杂社会情境中的心理理论(Theory of Mind,ToM)推理能力仍不均衡。现有基准,包括 ExploreToM,并不总能测试出这些情境之所以困难的递归信念与信息不对称。为此,一篇以 arXiv:2605.20423 提交的论文提出了 OSCToM(Observer-Self Conflict Theory of Mind,观察者—自我冲突心理理论),用于建模基于大语言模型的心理理论任务中的嵌套信念冲突。该论文于 2026 年 5 月 19 日提交,由 Sharmin Sultana Srishty 等五位作者完成,共 15 页、12 幅图(包含 15 张图像)、3 张表,归类于人工智能(cs.AI),ACM 分类为 I.2.7 与 I.2.6。

这项工作的核心案例,是观察者对另一智能体的看法与观察者自身信念状态发生冲突的情形。这类情形超出了简单的换位思考,需要递归的、多层次的推理。OSCToM 通过结合强化学习(RL)、一种扩展的领域特定语言以及组合式代理模型(compositional surrogate models)来生成观察者—自我冲突,从而为模型提供更具针对性的训练数据。

在实验中,OSCToM-8B 在所测试的系统中取得了最佳整体结果。它在 FANToM 上改进了 ExploreToM 报告的结果,并在 Hi-ToM 与 BigToM 上保持竞争力。尤其值得注意的是,在信息不对称的 FANToM 基准上,OSCToM 达到 76% 的准确率,而 ExploreToM 报告的结果仅为 0.2%。此外,该数据合成流程的效率提高了 6 倍,这表明有针对性的训练数据可以帮助较小的模型处理高级认知推理。

论文作者指出,现有基准未能充分覆盖递归信念与信息不对称这些关键难点,因此 OSCToM 的贡献不仅在于一个更强的模型,还在于一套用于生成高难度心理理论样本的对抗式数据合成方法。项目代码已在 GitHub 上公开(https://github.com/sharminsrishty/osct),论文全文可通过 arXiv 的 PDF、实验性 HTML 以及 TeX 源码获取,DOI 为 https://doi.org/10.48550/arXiv.2605.20423,其 DOI 正由 DataCite 进行注册。提交历史显示,该论文的 v1 版本于 2026 年 5 月 19 日 19:19:26 UTC 提交,文件大小为 3,465 KB。

展开要点与分析

文章情报

工程师进阶

要点

  • OSCToM专注于观察者视角与自身信念冲突的嵌套信念建模,超越简单视角采择。
  • OSCToM-8B在FANToM上达76%准确率,而ExploreToM仅0.2%。
  • 数据合成过程效率提升6倍,表明针对性训练数据能帮助小模型处理高级认知推理。

要点与分析由自动化流程生成,可能有误,请结合原始来源核实。