跳到主要内容
AI News HubLIVE
站内改写2 分钟阅读

面向自动驾驶中共现目标检测的上下文感知特征融合

文章摘要

本文提出上下文中心特征融合(CCFF)框架,通过局部和全局注意力模块增强共现目标检测,在Cityscapes和BDD100K数据集上显著提升关系一致性,并改善小目标和稀有类别检测。

来源arXiv Computer Vision作者: Binay Kumar Singh, Niels Da Vitoria Lobo
面向自动驾驶中共现目标检测的上下文感知特征融合
报告错误

纠错通道尚未开通,可先复制下方文章信息留存。

查看更正说明
直接读正文

自动驾驶场景中的目标检测不仅要求精准定位,还需要理解同时出现的物体之间的上下文关系。在高度复杂的异构环境中,稀有类别、小尺度目标以及频繁出现的物体往往让标准检测框架难以应对。针对这一问题,论文提出了一种名为上下文中心特征融合(Context-Centric Feature Fusion, CCFF)的新框架,通过两个基于注意力的模块来增强模型对共现物体的感知能力。

CCFF 的核心在于将局部上下文与全局上下文进行融合。其中,局部上下文融合模块(Local Context Fusion Module, LCFM)采用 RoI 到 RoI 的自注意力机制来处理空间交互,重点针对小目标和部分被遮挡的物体,使模型能够更准确地捕捉这些难以检测对象之间的空间关系。而全局上下文注意力模块(Global Context Attention Module, GCAM)则利用物体共现先验,通过池化 top-K 的 RoI 特征生成全局上下文注意力令牌,从而避免像素级全局池化带来的计算开销。这种设计在保持效率的同时,为模型提供了对象层面的全局视野。

两个模块的结合产生了上下文化的嵌入表示,不仅提升了分类结果的准确性,也增强了对共现物体的检测能力。论文在 Cityscapes 和 BDD100K 两个数据集上对该方法进行了评估,结果显示在关系一致性方面有显著提升,类别级一致性策略(Category-level Consistency Strategy, CCS)分别达到 0.973 和 0.969。此外,该方法在小目标检测上取得了可观的增益,AP_S 达到 14.1%,并成功恢复了在大型数据分布中通常丢失的稀有类别,例如“Train”。

效率方面,研究报告显示该框架能够实时处理图像,仅带来 0.2 FPS 的开销,表明其在自动驾驶实际部署中具有较好的可行性。论文代码已在 GitHub 上开源,供社区复现和进一步研究。该工作发表于 CVPR 2026 Precognition Workshop,共 8 页,包含 3 幅图,属于计算机视觉与模式识别(cs.CV)领域。

从整体来看,CCFF 通过显式建模局部空间交互和全局共现先验,为解决自动驾驶目标检测中的小目标、遮挡和稀有类别问题提供了一种有效的思路。其融合策略避免了昂贵的像素级全局操作,在精度与实时性之间取得了平衡,为后续研究提供了可借鉴的框架和开源的实现基础。

展开要点与分析

文章情报

工程师进阶

要点

  • CCFF框架包含局部上下文融合模块(LCFM)和全局上下文注意力模块(GCAM),分别处理空间交互和共现先验。
  • 在Cityscapes和BDD100K上,类别级一致性策略(CCS)分别达到0.973和0.969。
  • 小目标检测AP_S提升至14.1%,并成功恢复稀有类别如“Train”。
  • 框架仅增加0.2 FPS开销,可实时处理图像,代码已开源。

要点与分析由自动化流程生成,可能有误,请结合原始来源核实。