AI News HubLIVE

模型动态

生产中减少LLM延迟和推理成本的12种方法

扩展LLM的关键不是增加GPU,而是消除每个请求中的不必要工作。本文介绍了12种实用的减少延迟和成本的方法。

  • 测量队列时间、首token时间、token间延迟和缓存命中率等关键指标。
  • 积极减少输出token,设置合理的max_tokens限制。
站内正文

谷歌DeepMind CEO哈萨比斯呼吁建立全球AI监管机构——应由美国领导

谷歌DeepMind联合创始人兼CEO德米斯·哈萨比斯呼吁建立一个全球AI监管机构,该机构有权在前沿模型过于危险时刹车。他认为美国应主导这一倡议,并希望在今年年底前成立该机构。

  • 哈萨比斯提议建立类似金融业监管局的全球AI监管机构,由独立专家和开源社区代表组成。
  • 该机构将有权在AI模型发布前进行评估,并在判断风险过高时协调全行业放缓部署。
站内正文

Blume:一个开源、零配置的文档框架,从Markdown文件夹生成AI就绪文档

Hayden Bleasel 发布了 Blume,一个开源、MIT 许可的文档框架。它读取 Markdown 或 MDX 文件夹,生成隐藏的 Astro 项目,输出静态的 AI 就绪文档,包含本地搜索、30+ MDX 组件、llms.txt 和内建 MCP 服务器。

  • Blume 是一个零配置的文档框架,只需将 Markdown 放入文件夹即可生成完整文档站点。
  • 它基于隐藏的 Astro 和 Vite 项目,支持热重载,并可提升为独立的 Astro 应用。
站内正文

Mistral AI 发布 Robostral Navigate:8B 模型仅凭单 RGB 摄像头让机器人导航复杂环境

Mistral AI 推出了 Robostral Navigate,一个 8B 参数的具身导航模型。该模型仅使用单个 RGB 摄像头,无需 LiDAR 或深度传感器,即可根据自然语言指令驱动机器人。在 R2R-CE 验证未见过的场景中,它达到了 76.6% 的成功率,这得益于其指向方法、前缀缓存训练和 CISPO 在线强化学习。

  • Robostral Navigate 是 Mistral AI 首个面向具身导航的 8B 模型。
  • 仅用单 RGB 摄像头,无需深度传感器,在 R2R-CE 验证未见场景达到 76.6% 成功率。
站内正文

通过VLAC-Cut引导管道最大化大规模机器人后训练中的人力效率

本文提出一种人效后训练管道,通过专业化分工(远程操作员和地面操作员)和自动轨迹分割工具VLAC-CUT,实现少量人员监督多台机器人。在四个真实操作任务中,最终策略成功率达80%-95%,吞吐量提升1.7-4.2倍,优于纯人类参与训练。

  • 提出人效后训练管道,通过角色专业化减少任务切换和培训成本。
  • 引入VLAC-CUT自动轨迹分割工具,筛选有效数据用于迭代训练。
站内正文

一种风险场增强的闭环数字孪生框架用于自动驾驶安全验证

该论文提出了一种风险场增强的闭环数字孪生框架,用于自动驾驶系统的安全验证。框架整合了物理数据采集、虚拟重建、风险感知场景生成和算法评估,并通过驾驶风险场作为统一中间表示来识别高风险场景,为强化学习策略提供安全指导。实验表明该方法提高了验证的针对性和可解释性,但实际效果受模型保真度和模拟到现实迁移的限制。

  • 提出风险场增强的闭环数字孪生框架
  • 驾驶风险场作为统一中间表示描述多种风险
站内正文

以LLM为核心的无人机蜂群代理型AI:架构、使能技术与开放问题

无人机蜂群在搜索救援和环境监测中潜力巨大,但受限于态势感知不足、连接中断和网络安全风险。本文提出以LLM为核心的代理型AI框架(LAUS),整合感知、记忆、推理规划与行动,实现自适应蜂群行为,同时分析了攻击面扩大、优先级操纵攻击等威胁,并指出了抗幻觉推理、SWaP约束下的机载LLM部署等开放挑战。

  • 提出LAUS架构,将LLM与闭环认知系统结合,实现无人机蜂群的自主与自适应操作。
  • 梳理了边缘计算、5G/6G、多模态智能等使能技术,并重点分析了优先级操纵攻击(PMA)等安全威胁。
站内正文

EgoSteer:一种面向从第一人称视频实现可控灵巧操作的全栈系统

EgoSteer是一个全栈系统,通过从第一人称人类视频中大规模预训练视觉-语言-动作(VLA)模型,实现可控的灵巧操作。它集成了EgoSmith数据流水线(9.6K小时高质量数据,吞吐量提升9倍)、统一遥操作机器人平台和世界模型增强的VLA策略。实验表明,EgoSteer在40多种任务中稳定执行自然语言指令,具备故障恢复和泛化能力,并可通过少量样本适应复杂长时任务(如折叠纸箱),成功率超75%。系统、数据和模型已开源。

  • EgoSteer是一个全栈系统,从第一人称视频中学习可控灵巧操作。
  • EgoSmith数据流水线提供9.6K小时高质量预训练数据,吞吐量是此前最优的9倍。
站内正文

噪声锚定扩散反演中的压缩不对称性与轨迹绑定

本文研究了真实图像扩散反演中的质量-成本权衡,揭示了元素级压缩不对称性和轨迹绑定两个关键机制,并由此提出训练无关的反演方法NARC。该方法仅需存储单个int8潜码锚点,在保持重建质量的同时将存储需求降低约400倍,在PIE-Bench++上PSNR提升3.24 dB。

  • 扩散噪声存在元素级压缩不对称性:int8全维度锚点可保真重建,而低维子空间摘要不可靠。
  • 反演过程具有轨迹绑定特性,需要匹配的前向锚点和训练好的分数网络共同作用。
站内正文

走向真实世界的可穿戴运动重建

ECCV 2026接收的一篇论文提出了一种新的可穿戴运动捕捉方法,能够从任意组合的消费级设备(如智能手机、智能手表)重建全身运动,并引入了WHIP模型和一个包含50种活动的多模态数据集,同时系统研究了传感器互补性。

  • 提出WHIP模型,可从任意可穿戴传感器子集重建全身运动
  • 创建了大规模多模态数据集,涵盖50种活动,使用消费级传感器
站内正文

时间印记:在多模态知识图谱中学习时间感知表示

多模态知识图谱通过文本和图像等模态丰富实体,但高度相似的多模态特征仍难以区分。时间信息可作为额外模态进行消歧,但现有方法因时间语义稀疏和多时间戳噪声而鲜有将时间作为独立模态。本文提出时间印记框架,将时间视为实体级模态,通过三视角对比目标对齐时间、文本和视觉表示,并设计紧凑时间戳子集选择与注意力池化以兼顾特异性和鲁棒性。实验表明,该方法在链接预测任务上达到最优,整体 Hits@1 提升最高 6.07%,在 top-1% 高歧义样本上提升达 58%。

  • 提出将时间作为独立模态融入多模态知识图谱,通过三视角对比学习对齐多模态表示。
  • 设计紧凑时间戳子集选择和注意力池化,解决多时间戳歧义问题。
站内正文

基于RISC-V多核MCU视觉系统的低功耗车牌检测与识别

本文首次演示了基于低功耗MCU的边缘设备用于自动车牌识别(ALPR)。该设计利用9核RISC-V处理器GAP8,结合QVGA超低功耗灰度成像器,采用基于SSDlite-MobilenetV2和LPRNet的多模型推理方法,在公共数据集上达到38.9%的mAP和超过99.13%的识别率。在真实世界中可识别小至30x5像素的车牌。多模型推理(687 MMAC)在GAP8上以1.09 FPS和117 mW运行,相比树莓派3系统能效提升73倍,且无需硬连线加速引擎。

  • 首个基于MCU的低功耗ALPR边缘设备,使用9核RISC-V处理器GAP8。
  • 多模型方法:SSDlite-MobilenetV2用于检测(mAP 38.9%),LPRNet用于识别(>99.13%)。
站内正文

ReflectWorld-MM:面向实体的开放视频流多媒体记忆系统

ReflectWorld-MM是一种新型AI系统,使助手能够持续处理和记忆开放视频流,通过围绕持久实体而非帧来组织记忆,在六个基准测试中取得了最先进的结果。

  • ReflectWorld-MM围绕实体而非帧组织视频记忆,提升了长期跟踪能力。
  • 系统包括三个部分:感知前端、分层长期记忆和实际部署实现。
站内正文

RSLoRA:通过表示敏感性探测进行LoRA免训练秩分配

RSLoRA是一种基于激活空间几何的免训练、免梯度秩分配方法。它引入虚拟表示探测机制,通过有效秩和弗雷歇距离识别高敏感性模块,在多个基准测试中优于AdaLoRA和GoRA等最新分配器。

  • RSLoRA无需迭代训练调整和反向梯度。
  • 利用有效秩和弗雷歇距离测量结构化低秩噪声引起的流形位移。
站内正文

通过图谱对齐的时空标记化实现宽场钙成像的跨主体建模

一种名为WiCAT的新模型,利用自监督预训练在宽场钙成像数据上实现了跨主体建模,超越了单会话模型,并首次实现了对未见主体的零样本行为解码。

  • WiCAT引入基于图谱的标记化方案,无需会话特定组件,学习全局共享的时空表征。
  • 在多个数据集上,预训练模型支持轻量级下游解码,并在主体、任务和数据集间迁移。
站内正文

基于内部潜在分析的扩散模型统一骨干优化框架

研究人员提出DUNE,一种无需训练的扩散模型优化框架,通过检测并抑制早期深层潜在波动来减少伪影和幻觉,提升生成保真度,适用于U-Net和Transformer架构。

  • DUNE通过分析深层潜在变量中的早期剧烈波动来识别和减少伪影。
  • 该方法无需重新训练,使用EMA标准检测异常并应用特定骨干抑制。
站内正文

非英语语言推理的成本:以日语为例

本研究探讨了训练日语推理语言模型的可行性。通过使用GRPO对基于Qwen-3-Swallow-8B的日语持续预训练模型进行训练,研究者发现推理语言控制是可行的,但性能最多与英语推理基线持平。在日语文化基准测试中,模型表现甚至更差,表明日语推理并不能立即提升文化相关任务的表现。

  • 研究了训练日语推理语言模型的可行性。
  • 使用GRPO训练了Qwen-3-Swallow-8B的日语推理变体。
站内正文

高效将口语语言模型适应于新加坡语境

本研究探索了在无法访问原始训练数据且需要多语言语音查询交互的敏感领域(如新加坡内政团队)中,如何高效地使开源口语语言模型(SLM)适应。通过结合LoRA微调、防止灾难性遗忘的替代文本问答数据集以及针对语音任务改编的CoBa重加权方案的多任务目标,研究团队构建了包含504,853个样本的多语言问答数据集HTD-multilingual-QA,最终得到的HT-Moonstone(5B)模型在大多数任务上匹敌或超越规模大7倍的SLM,并在口音和性别识别上表现最佳,同时原始语音问答能力损失不到2%。

  • 结合LoRA、替代数据集和CoBa重加权方案,高效适配SLM至新加坡内政团队场景
  • 构建了504,853样本的多语言(文本+语音)问答数据集HTD-multilingual-QA
站内正文

量化LLM推理中的静默失败:基于分类法的空心收敛与故障模式转变分析

最新研究表明,后训练量化会在任务准确率保持不变的情况下静默改变大语言模型的推理方式。通过一个六类故障分类法(Cohen's κ=0.906),研究人员分析了30,000条链式思维输出,发现弱精度量化(NF4)下“空心收敛”显著依赖于模型大小,而“捷径崩塌”和“信心滚雪球”等故障模式会发生定性转变,且空心收敛无法通过表面文本特征可靠检测。

  • 后训练量化可在保持准确率的同时静默改变LLM推理
  • 空心收敛在小型模型上显著减少,但大型模型不受影响
站内正文

工作负载驱动的设备端实时字幕翻译优化

本报告研究针对台湾地区的设备端英文到繁体中文字幕翻译,在短输入、短输出、单批次推理、低延迟和隐私约束下的优化。作者将原始151k词表替换为64k字幕领域分词器,并进行嵌入校准和微调,在OpenSubtitles2024子集上实现了59.2%的胜率(排除平局),并在Apple M2上获得1.63倍加速。

  • 设备端英文到繁体中文字幕翻译,针对短输入、低延迟和隐私优化。
  • 将151k词表替换为64k字幕领域分词器,应用嵌入校准和微调。
站内正文

可信赖的设计:评估和改进面向多利益相关者的LLM生成的临床试验摘要

一项新研究提出了一个基准框架,用于评估大型语言模型(LLM)生成的临床试验摘要的忠实度,针对医疗提供者、患者和支付方三个利益相关者群体。该框架从ClinicalTrials.gov选取了200个分层试验,使用六维度注释模式评估了GPT-4o、Claude Sonnet 4.6和Gemini 2.5 Flash生成的1800个摘要。研究发现,“无依据声明”是所有模型最主要的失败模式。通过知识图谱增强检索系统,忠实度得分获得了统计显著的提升。

  • 新基准框架评估LLM在临床试验摘要中的忠实度,覆盖三个利益相关者群体。
  • “无依据声明”是跨所有模型的主要幻觉形式,平均注释得分仅1.55/3。
站内正文

基于语言模型的全球并购套利预测

研究团队开发了一种基于语言模型的并购套利预测系统,通过专家引导的上下文工程和事后推理微调,在400多笔跨国大型交易中实现了优于市场隐含概率和前沿语言模型的预测性能。

  • 系统通过长上下文推理处理数百页技术文档,预测并购交易的三种结果:按原条款完成、更高出价或交易终止。
  • 在覆盖42个国家的400多笔交易测试中,系统的Brier分数达到0.151,比市场隐含概率低24%,比XGBoost低19%,比前沿语言模型低25-42%。
站内正文

Index SLM 技术报告

Bilibili 发布 Index-1.9B 系列开源小型语言模型,包含基础模型、纯数据对照模型、对话模型和角色扮演模型,在多项基准测试中表现优异。

  • Index-1.9B 系列包含四个模型:Base、Pure、Chat 和 Character。
  • 基础模型在 2.8 万亿中英文 token 上预训练,参数量 19 亿。
站内正文

CLIR-Bench:面向不规则临床时间序列的多模态问答基准

CLIR-Bench是一个专门用于评估模型在不规则临床时间序列上进行问答能力的基准。它基于去标识化的ICU记录构建,包含6,600个问答实例,覆盖11个临床变量,分为4个能力维度和11个任务。实验表明,现有通用模型难以从稀疏数据中检索和推理证据,凸显了加强不规则时间序列推理方法的必要性。

  • CLIR-Bench包含6,600个问答实例,涵盖11个临床变量和11个任务。
  • 该基准专注于不规则采样的临床时间序列问答,填补了现有基准的空白。
站内正文

基于参考的LLM蒸馏检测方法

研究者提出了一种基于参考的成员推断方法,用于检测大型语言模型是否从其他模型蒸馏而来。该方法通过比较学生模型对不同候选教师模型输出的偏好,结合早期检查点,能够以近完美精度识别教师模型,并适用于未知蒸馏流程和开放世界场景。

  • 提出参考式蒸馏检测方法,利用早期检查点识别教师模型
  • 方法在单教师蒸馏场景中实现近完美精度
站内正文

编码代理实际需要什么上下文才能行动?

一项新研究显示,编码代理在编辑代码时真正需要的上下文极少:信号只存在于被编辑的代码本身,自然语言摘要几乎无法替代源代码回答行为问题,周围上下文(如UML骨架)与删除它效果无异,而压缩上下文(如类别签名)能以三分之一token达到完整文件的效果。此外,温度-0 API推理在相同输入下约有9%的结果翻转,构成了SWE-bench上所有小效果检测的噪声底线。研究团队发布了包含验证环境、确定性补丁和预注册假设的工具。

  • 编码代理编辑代码时,真正需要的信号只存在于被编辑的代码本身。
  • 自然语言摘要无法回答源代码能回答的绝大部分行为问题,且此差距与摘要模型大小无关(前沿模型与3B模型表现一样差)。
站内正文

MawForge:面向本地混合专家推理的内存受限专家物化

这篇论文介绍了MawForge系统,通过将完整模型存储在磁盘上,按需将路由专家物化到有限执行缓存中,使得在内存受限的统一内存机器上实现稀疏混合专家(MoE)语言模型的实用本地推理成为可能。研究发现MawForge作为有限执行机制和测量基板有效,但并非缓存最大化策略。

  • MawForge将完整MoE模型存储在磁盘上,按需将路由专家物化到有限缓存中。
  • 专为约束型统一内存机器上的本地推理设计。
站内正文

知识图谱与图神经网络的融合:综合综述

本文提出了一种新的双层分类框架,系统回顾了基于图神经网络(GNN)的知识图谱技术,覆盖了知识图谱构建、嵌入、推理和应用,分析了不同GNN模型的优缺点,并指出了未来研究方向。

  • 提出了知识图谱技术和GNN视角的双层分类法。
  • 全面综述了GCN、GAT、HGNN等模型在知识图谱生命周期中的应用。
站内正文

闭环控制:规则对齐的小语言模型与多智能体自我修正

本文研究了一种基于小型语言模型(SLM)的闭环控制框架,通过GRPO对齐的Qwen2.5-1.5B模型,结合动作智能体、数字孪生验证层和重提示智能体,实现了从自然语言需求规范生成控制策略。在随机热控制模拟中,该框架达到91.5%的动作对齐准确率,平均推理延迟3.84秒,展示了在边缘设备上实现可重构自主控制的可行性。

  • 使用1.5B参数的小型语言模型(Qwen2.5-1.5B)通过GRPO进行对齐,用于控制推理
  • 多智能体架构包括动作生成器、符号/数字孪生验证器和迭代修正的重提示智能体
站内正文

YUKTI:从自然语言情境到鲁棒、可验证的决策——不确定性类型命题信息检索、假设鲁棒帕累托前沿与遗憾证书

YUKTI是一种新的自动决策制定框架,它通过不确定性类型命题图表示和假设鲁棒帕累托前沿(ARPF),显著降低了决策遗憾。实验表明,在受控误设定下,平均和尾部遗憾减少超过90%,在真实数据集上,样本外回测比基线优34%,而LLM的遗憾约为YUKTI的47倍。该框架还引入了SRJANA数据基础,并提供了可审计的可追溯性。

  • YUKTI使用不确定性类型命题图处理自然语言情境,避免了传统单目标优化对点值假设的脆弱依赖。
  • 通过假设鲁棒帕累托前沿(ARPF)和分布性帕累托交接,YUKTI在多种场景下显著降低决策遗憾。
站内正文

忠实而非纠错:多跳智能体中继中的消息格式效应取决于层级

一项新研究探讨了消息格式在多跳LLM智能体中继中的影响,发现格式效应依赖于中继能力层级。在强中继下,忠实指令下几乎无损失,而弱中继下格式间差异显著扩大。结构化格式提供了忠实、错误定位的通道,而非纠错码。

  • 研究通过受控中继测试床测试了五种消息格式在六跳中的表现。
  • 强中继在忠实指令下几乎无信息损失,而弱中继的格式间召回率差异扩大8.7倍。
站内正文

格式敏感度指数:令牌控制下提示包装鲁棒性与模式合规性研究

本研究引入格式敏感度指数(FSI)和可解析性敏感度指数(PSI),评估提示包装对LLM准确性和答案可解析性的影响。实验发现不同模型间FSI差异超过30倍,主要由合规失败解释。可解析性是准确性的强预测因子,建议在基准测试中报告包装方差和合规性。

  • 引入FSI和PSI两个互补指标,量化提示包装引起的准确率和可解析性变化。
  • 在140,000次生成实验中发现,模型间FSI平均差异超过30倍,且与合规失败高度相关。
站内正文

从机器学习预测到基于Toulmin论证模型的知情诊断辅助

本文提出了一种基于Toulmin论证模型的结构化诊断辅助框架,将基于图像的ML诊断分解为声明、依据、正当理由、限定、反驳和支持等组件。通过专用生物标志物提取模型、MedGemma医学知识代理和MedSigLip图像相似度计算,为人类专家提供可解释的评估,增强对ML诊断的批判性审查。

  • 采用Toulmin论证模型分解ML图像诊断,提升可解释性。
  • MedGemma代理分析依据与声明之间的正当理由。
站内正文

艾伦·图灵关于人工智能的最大假设可能错了

一本新书指出,自艾伦·图灵1950年著名论文以来,人工智能建立在一个有缺陷的假设上。计算机科学家彼得·J·丹宁认为,人类智能最重要的部分——包括常识、直觉、文化和实践技能——无法编码进计算机。他认为无论大语言模型变得多大,真正的人类水平AI都不可能实现。

  • 计算机科学家彼得·J·丹宁在新书中挑战图灵关于AI的假设
  • 丹宁认为常识、直觉、文化等隐性知识无法被机器编码
站内正文

Anthropic Claude Sonnet 5 vs Sonnet 4.6 vs Opus 4.8:智能编码基准测试、API定价及成本-性能权衡对比

Anthropic发布了Claude Sonnet 5,这是其最强的中端代理模型,在多项基准测试中超越前代Sonnet 4.6,并缩小了与旗舰Opus 4.8的差距。Sonnet 5引入了努力水平(effort levels)以控制推理成本,在低/中努力水平下性价比极高,但高努力水平下成本可能超过Opus 4.8。它已作为Free和Pro计划的默认模型,并可通过API调用。

  • Sonnet 5在SWE-bench Pro、OSWorld-Verified和HLE等基准测试中均优于Sonnet 4.6,接近Opus 4.8。
  • 定价低于Opus 4.8:$2/$10每百万token(至2026年8月31日),之后为$3/$15。
站内正文

DOOMQL:用SQLite引擎运行《毁灭战士》风格游戏

开发者Peter Gostev使用GPT-5.6 Sol构建了DOOMQL,这是一个将SQLite作为游戏引擎的类《毁灭战士》游戏。它通过递归CTE实现光线追踪,所有游戏逻辑和渲染均由SQL查询完成。Simon Willison演示了如何运行该游戏,并利用Datasette Apps插件创建了实时显示游戏画面的Web应用。

  • DOOMQL是一款使用SQLite作为游戏引擎的类《毁灭战士》游戏
  • 游戏的核心是一个递归CTE实现的光线追踪器
站内正文

Datasette 在 GitHub 上的代码频率图表

西蒙·威利森通过 GitHub 代码频率图表展示了 AI 编码代理和 Opus 4.5 类模型对其开源项目 Datasette 代码贡献的影响,显示 2026 年活动量显著飙升。

  • GitHub 代码频率图表显示 Datasette 项目每周代码增删变化。
  • 2026 年出现巨大活动峰值,与 Opus 4.8、GPT-5.5、Fable 5 和 GPT-5.6 Sol 发布周期吻合。
站内正文

OpenAI GPT-5.6 Sol、Terra 和 Luna 现已正式在 Amazon Bedrock 上可用

OpenAI 最新智能模型系列 GPT-5.6 Sol、Terra 和 Luna 已在 Amazon Bedrock 上正式可用,带来旗舰级推理模型 Sol、平衡型模型 Terra 和快速低成本模型 Luna。Amazon Bedrock 的下一代推理引擎提供高性能、安全性和可靠性,支持提示缓存(90% 折扣)、区域内推理和芯片级零操作员访问安全。同时发布了 ChatGPT Work 和 Codex 代理。

  • GPT-5.6 Sol、Terra 和 Luna 在 Amazon Bedrock 上正式可用。
  • Sol 是旗舰推理模型,在编码、安全、药物发现等领域创下新纪录;Terra 适合日常生产;Luna 适合高吞吐量低延迟任务。
站内正文

使用Outlines进行结构化语言模型生成

Outlines是一个开源库,通过在推理时屏蔽不合法的标记,为大型语言模型(LLM)的输出引入确定性,从而可靠生成结构化输出如JSON和分类结果。本文通过Python示例展示了其三大用例:情感分析的多选分类、基于Pydantic的JSON对象生成,以及REST API的纯JSON生成。

  • Outlines通过在推理时屏蔽非法标记,确保LLM输出符合预定结构。
  • 它支持多选分类、JSON对象生成和纯JSON生成等场景。
站内正文

SociaLLM工程:论如何操纵AI代理及其应对措施

一种名为'SociaLLM工程'的新型社会工程攻击正针对大型语言模型驱动的AI代理。这些攻击通过利用LLM的隐式社交理解和缺乏信任边界,操纵其泄露敏感信息或执行未授权操作。真实案例包括Instagram账户接管、GitHub工作流数据泄露以及AI浏览器的'BioShock'攻击。文章分析了LLM为何特别脆弱——因其设计追求服从、单一通道处理以及无记忆力——并提出了人工监督和强化防护栏等缓解措施。

  • SociaLLM工程利用冒充和借口等社会工程技术操纵LLM代理。
  • 知名事件包括2026年大规模Instagram账户接管、GitHub Gitlost提示注入攻击以及AI浏览器的BioShock攻击。
站内正文

印度公司因AI成本高昂转向中国大语言模型

印度企业越来越多地使用DeepSeek、阿里巴巴和Moonshot AI等中国大语言模型来降低人工智能成本,这进一步加深了印度对中国尖端技术的依赖,尽管两国之间长期存在冲突。

  • 印度公司转向中国LLM以削减AI成本
  • DeepSeek、阿里巴巴和Moonshot AI是主要供应商
站内正文

斯坦福研究人员推出TRACE:将智能体反复失败转化为合成RL环境的能力定向训练系统

斯坦福大学的研究团队提出了TRACE系统,通过分析智能体失败轨迹,诊断缺失的能力,并为每个能力合成可验证的训练环境,利用LoRA适配器和GRPO算法进行训练,最后通过MoE组合实现令牌级路由。在τ²-Bench上提升15.3个百分点,在SWE-bench Verified上达到73.2%的Pass@1,超越了多个基线模型。

  • TRACE通过对比分析成功和失败轨迹,识别出关键缺失能力。
  • 为每个能力合成独立的可验证训练环境,并使用GRPO训练LoRA适配器。
站内正文

基于AI的血管内导航的血管几何特征描述

该研究旨在识别与导航难度相关的血管指标,并开发自动化管道进行定量血管特征提取,以支持未来复杂性分级。研究从61名患者的CT血管造影中分割血管树,测量了主动脉弓类型、牛型弓存在、血管长度、迂曲度、起始角、反向曲线数量等指标,并使用软演员-评论家强化学习算法进行120秒自主导航。结果显示,左侧牛型弓和II/III型主动脉弓分别增加导航时间30.19秒和37.92秒,更大的迂曲度进一步延长手术时间并降低成功率;右侧II/III型弓延长45.94秒,每个额外反向曲线增加3.96秒并降低成功率。该自动化管道为标准化复杂性分级和强化学习模型评估提供了基础。

  • 研究首次证明机械取栓代理导航难度受血管几何形状强烈影响。
  • 开发了自动化管道用于定量提取血管特征。
站内正文

CLAP:通过语言-动作对齐实现直接从VLM到VLA的适配

CLAP通过在数值动作序列前添加自然语言描述,将预训练VLM高效转换为VLA,单周期微调后2B模型在LIBERO上达90.8%,鲁棒性更强。将发布0.8B、2B、4B开源模型。

  • CLAP通过在数值动作前添加语言描述,解决输出分布不匹配问题
  • 单周期微调后2B模型在LIBERO上达90.8%,远超VLA-0
站内正文

FlowDAgger:潜在空间中生成式机器人策略的人机协同自适应方法

FlowDAgger是一种样本和计算高效的方法,通过人类干预在潜在空间中自适应冻结的生成式机器人策略。其核心思想是动作反演,将人类专家动作映射为在基础策略下产生该动作的噪声,然后训练轻量级潜在策略来引导基础模型。该方法在仿真和真实双机械臂及单臂操作任务中均优于监督微调和潜在空间强化学习基线,并能保留预训练技能。

  • FlowDAgger通过人类干预在潜在空间中自适应预训练的生成式机器人策略,避免大规模数据收集或在线强化学习。
  • 采用动作反演技术,将人类专家动作转换为噪声,从而训练轻量级潜在策略来调整基础模型。
站内正文

视频生成模型成为通用视觉学习器

本文提出并验证了大规模文本到视频生成可作为计算机视觉的强预训练范式,所提出的GenCeption模型在深度估计、表面法线、相机位姿估计等多个视觉任务上达到领先性能,展现出数据效率和良好的泛化能力,为通用视觉智能提供了新路径。

  • 提出GenCeption,利用预训练视频生成扩散模型作为前馈感知模型。
  • 在深度估计、分割、3D关键点预测等多个任务上达到SOTA。
站内正文

C-GAP:类别感知与在线提示提升视觉语言模型在不平衡类别上的性能

C-GAP是一种新型框架,通过使用大语言模型(LLM)迭代优化语言提示,无需重新训练或额外标注,即可显著提升视觉语言模型对稀有类别的检测能力。该方法由两阶段组成:首先建立复合字幕基线,结合场景描述与类别数量上下文;其次,LLM基于少数类平均精度(AP)动态阈值,逐个图像地优化字幕,直至达到足够的性能增益。实验表明,C-GAP在多个基准上将少数类平均精度提升高达53%,在COCO数据集上相对基线提升约81%。

  • C-GAP采用了两阶段方法:复合字幕基线与LLM迭代优化。
  • 无需更新检测器权重或额外标注,即可显著提升少数类检测性能。
站内正文

MultiView-Bench:用于VLM世界中心多视图集成的诊断基准

MultiView-Bench是一个专为评估视觉语言模型(VLM)多视图集成能力而设计的诊断基准。研究表明,当前最先进的VLM在单视图2D任务上表现优异,但在3D空间关系理解和跨视图信息聚合方面存在显著困难。为此,作者提出了ViewNavigator,一个多智能体框架,通过主动选择信息丰富的视角并融合多视图证据,显著提升了模型在MultiView-Bench上的表现。

  • 现有VLM基准主要评估单视图或有限视图感知,忽视了多视图集成能力。
  • MultiView-Bench要求模型将物体位置从观测视角解耦到全局坐标系。
站内正文

可可地图绘制需要亚米级分辨率吗?科特迪瓦景观分层评估:甚高分辨率影像、十米级地球观测输入与操作产品的对比

一项在科特迪瓦进行的研究比较了甚高分辨率(0.5米)与十米级卫星影像在可可地图绘制中的表现,结果显示VHR的F1得分达到0.92,而TESSERA等基础模型嵌入(F1=0.86)提供了可扩展的替代方案。在破碎化景观中性能差异增大。

  • VHR影像(0.5米)在可可地图绘制中F1得分达0.92。
  • TESSERA基础模型嵌入F1得分0.86,优于Sentinel-2的0.76。
站内正文

主题导航

模型 — AI 话题新闻 | AI News Hub