(资料图片)
启元具身研究中心刚刚发布了世界模型仿真器PrimeSim。该产品基于预训练视频生成模型,经过中训练、后训练两阶段改造,具备替代传统仿真器的交互推演能力,可面向机器人操纵任务开展策略训练。相关权重、推理代码与训练代码将于11月6日开源。
仿真环境是机器人控制策略训练的重要基础,但依靠人工搭建仿真场景,难以支撑大规模落地。据启元具身研究中心介绍,理想的机器人仿真器需同时满足并行调度上万条轨迹、场景精确重置且无硬件损耗、减少跨场景工程定制、缩小与现实环境差距等要求。
团队认为,仅依靠视频生成模型实现“视觉逼真”尚不充分,作为仿真底座,还需严格服从策略输出的动作指令、保持多相机视角间的几何与语义一致,并在远长于训练上下文窗口的时间跨度内维持状态连贯。
在权威基准评测中,PrimeSim表现突出。在EWMBench基准上,该仿真器以6.09的综合得分位列榜首,分项指标 HSD(1.000)、nDTW(1.000)、BLEU(0.570)、CLIP(0.954)、Logics(1.000)均取得第一名。在基于LIBERO设计的WorldSimProbe五项评测中,PrimeSim在全局轨迹覆盖(67.9)、动作来源行为保持(72.3)、交互动态(37.1)三项维度登顶。
据研究团队介绍,PrimeSim采用两阶段改造范式,将原生双向视频生成模型逐步转化为可交互、可自回归滚动的世界模型仿真器。中训练阶段,模型基于30110小时精选机器人演示数据,覆盖人形、双臂、单臂、手持UMI设备等22种异构机器人平台,其中人形机器人样本占比 54.8%、真实世界数据占比 84%,并围绕统一动作表征、帧对齐双路径条件注入、视角感知交错注意力三项核心设计实现跨本体兼容与控制信号强绑定。后训练阶段,通过高速生成链路、自条件稳定性、分层时序记忆三项机制,使模型在超过固定训练上下文窗口后仍可稳定推演。
作为策略仿真底座,PrimeSim展现出与传统仿真器的高度对齐。实验选取8个OpenVLA-OFT策略,在300个共享初始状态设定下,PrimeSim 与 LIBERO原生仿真器的策略成功率相关系数达 0.99,平均绝对误差为 2.8。团队还直接在PrimeSim内部对策略开展GRPO强化学习,结果显示策略在原生仿真器上的成功率提升11.5%,在PrimeSim内的评估指标上涨11.8%,证明在该神经仿真器中获得的策略增益可有效迁移至传统物理仿真环境。
启元具身研究中心表示,此次发布验证了通过“中训练 + 后训练”渐进式流水线将通用视频生成模型改造为机器人世界模型仿真器的可行性,相关成果兼顾动作保真度、长时序推演能力与工程实用性,为机器人控制策略训练的规模化提供了新路径。
标签: 最新资讯
内容搜集整理于网络,不代表本站同意文章中的说法或者描述。文中陈述文字和内容未经本站证实,其全部或者部分内容、文字的真实性、完整性、及时性本站不做任何保证或者承诺,并且本站对内容资料不承担任何法律责任,请读者自行甄别。如因文章内容、版权和其他问题侵犯了您的合法权益请联系邮箱:5 146 761 13 @qq.com 进行删除处理,谢谢合作!