跳到主要内容
AI News HubLIVE
站内改写2 分钟阅读

GE-Sim 2.0:面向机器人操作的综合闭环视频世界模拟器路线图

文章摘要

GE-Sim 2.0 是一个面向机器人操作的闭环视频世界模拟器,在真实机器人数据上重新训练,并新增状态专家、世界评判器和加速框架三个模块,以仅 2B 参数登顶 WorldArena 排行榜,其生成的轨迹和奖励可直接用于训练并带来可测量的真实世界提升。

来源arXiv Robotics作者: Boxiang Qiu, Liliang Chen, Yue Liao, Nan Wang, Lintao Wang, Jiayi Luo, Wenzhi Zhao, Shengcong Chen, Di Chen, Ye Li, Chen Gao, Shuicheng Yan, Si Liu, Maoqing Yao, Guanghui Ren
GE-Sim 2.0:面向机器人操作的综合闭环视频世界模拟器路线图
报告错误

纠错通道尚未开通,可先复制下方文章信息留存。

查看更正说明
直接读正文

GE-Sim 2.0(全称 Genie Envisioner World Simulator 2.0)由 Boxiang Qiu 等共 15 位作者提出,论文于 2026 年 5 月 26 日提交至 arXiv,编号 2605.27491,归属机器人学(cs.RO)分类。这项工作定位为一个面向机器人操作任务的闭环视频世界模拟器,其目标是让视频生成模型不只是“看起来像机器人视频”,而是能真正服务于策略学习与评估的仿真平台。

在基础模型层面,GE-Sim 2.0 延续了 Genie Envisioner 的动作条件视频生成框架,并在此基础上重新训练。训练数据来自数千小时的真实机器人数据,覆盖遥操作、富接触交互以及在机器人上实际部署策略这三类场景。作者表示,这一大规模真实数据重训显著提升了模型对动作指令的跟随保真度,也扩大了可覆盖的轨迹范围,使模拟器在长尾动作与复杂操作下更为可靠。

在此基础之上,论文引入三个新模块,把从视频仿真到策略学习的整条链路闭合起来。第一个是状态专家(state expert):它从视频潜变量中解码出本体感知状态,从而支持下层 VLA(视觉-语言-动作)策略进行下一动作块的预测,让策略能够从生成的视频中获取与真实传感器读数对应的状态信息。第二个是世界裁判(world judge):它根据任务指令对生成的 rollout 进行评分,产生可由机器验证的成功信号与奖励,用以替代人工检查,这对于大规模自动化评估尤为关键。第三个是加速框架:在单张 H100 上,它可在 2.3 秒内生成 25 帧的 rollout,并在推理阶段支持最高 4 倍(4*)的跳帧,以便进行长时程评估。

实验结果方面,GE-Sim 2.0 仅以 2B 参数规模登顶公开的 WorldArena 排行榜,超过专门的机器人世界模型以及闭源通用视频生成器。更重要的是,作者报告称,针对其 rollout 与奖励训练出的策略能够在真实世界中带来可测量的性能提升,这说明模拟器生成的数据与信号具备实际迁移价值。作者据此将 GE-Sim 2.0 定位为一个可扩展评估与闭环学习机器人操作策略的实用平台。

需要留意的是,本文标题中的“Roadmap”表明该工作也被视为一条面向“综合性闭环视频世界模拟器”的路线图,而非单一终点的成果;其核心贡献可归纳为真实数据重训带来的动作跟随改进、三个闭环模块的引入,以及在参数规模与排行榜成绩上的效率优势。论文全文以 PDF、实验性 HTML 与 TeX 源码形式在 arXiv 提供,提交时文件大小约 15,396 KB,DOI 为 10.48550/arXiv.2605.27491,由 DataCite 发放(注册尚待完成)。

展开要点与分析

文章情报

投资人进阶

要点

  • 在数万小时真实机器人数据上重训练,涵盖遥操作、接触丰富交互和实际策略部署,显著提升动作跟随保真度与轨迹覆盖。
  • 新增状态专家从视频潜变量解码本体感知状态,支持下游 VLA 策略的下一段预测。
  • 世界评判器根据任务指令为生成轨迹打分,提供机器可验证的成功信号与奖励,取代人工检查。
  • 加速框架让单张 H100 在 2.3 秒内生成 25 帧轨迹,并支持最高 4 倍推理帧跳过。
  • 以仅 2B 参数登顶 WorldArena 公开排行榜,超越专用机器人世界模型和闭源通用视频生成器。

要点与分析由自动化流程生成,可能有误,请结合原始来源核实。