AI News HubLIVE
站内改写2 分钟阅读

ToolAnchor: 锚定反事实上下文以提升智能体工具使用能力

本文针对工具增强型大语言模型智能体在扩展工具集时面临的行为惯性问题,提出通过注入反事实锚定上下文来打破惯性,恢复失败轨迹。ToolAnchor框架利用教师模型假设反事实上下文,经学生回滚验证后,通过智能体后训练内化成功干预,在GAIA、BrowseComp和VDR-Bench等任务中表现优异,为动态工具适应开辟了新路径。

来源arXiv AI作者: Weiting Liu, Jieyi Bi, Wanqi Zhou, Jianfeng Feng, Yining Ma, Ai Han, Wenlian Lu

大型语言模型(LLM)智能体在结合工具使用后,在长周期任务中表现出色。然而,这些智能体通常是在固定工具集上进行后训练的,当需要引入新工具时,它们往往难以有效整合,而从头重新训练又通常不可行。针对这一工具集扩展问题,最新研究《ToolAnchor: Anchoring Counterfactual Context to Boost Agentic Tool-use Capability》揭示了核心障碍——行为惯性,即智能体即便获得新工具,仍倾向于依赖原有熟悉工具和固有推理模式。

研究者证明,在关键决策点注入反事实锚定上下文可以有效打破这种惯性,通过激发被抑制的智能体能力来恢复失败的轨迹。为了规模化应用这一发现,他们提出ToolAnchor框架,该框架使用教师模型来假设这些反事实上下文,然后通过学生模型展开回滚进行验证,最后通过智能体后训练将成功的干预内化。

广泛的评估涵盖了通用AI助手(GAIA)、文本搜索(BrowseComp)和视觉搜索(VDR-Bench)等任务,结果显示ToolAnchor在扩展工具集下始终表现出竞争力。这项工作弥合了静态后训练与动态适应之间的差距,为可扩展的智能体强化学习开辟了新道路。

ToolAnchor的核心创新在于其反事实锚定机制。不同于传统方法试图通过大量新数据重新训练模型,ToolAnchor仅在关键决策点插入精心构造的上下文,引导智能体尝试新工具。教师模型基于失败轨迹和成功案例,生成可能的反事实上下文;学生模型执行这些上下文下的动作,验证其有效性;最终,通过后训练将成功模式固化。这一过程无需全模型重新训练,显著降低了适应成本。

在实验部分,ToolAnchor在GAIA的多种任务中,当加入新工具后,成功率相比基线方法提升明显。在BrowseComp的文本搜索任务中,面对动态变化的工具组合,ToolAnchor同样保持了较高的检索准确率。VDR-Bench视觉搜索任务的结果进一步证实,该方法能有效应对视觉领域的工具变更。这些结果共同表明,反事实锚定上下文是一种通用且高效的适应性策略。

未来,研究者计划探索更复杂的反事实生成方式,以及将ToolAnchor应用于多智能体协作场景,进一步提升智能体在动态环境中的灵活性和鲁棒性。