新零售网 > 观点 >

首个机器人世界模型开源平台发布

来源:盖世汽车 发布时间:2025-08-15 03:23   阅读量:17016   

近日,智元机器人推出行业首个面向真实世界机器人操控的统一世界模型平台 Genie Envisioner,并宣布将开源全部代码、预训练模型及评测工具。

该平台创新性地将未来帧预测、策略学习与仿真评估整合进以视频生成为核心的闭环架构,首次实现机器人在同一世界模型中完成从感知到决策再到执行的端到端推理流程。

传统机器人学习系统普遍采用quot;数据收集—模型训练—策略评估quot;的分阶段开发模式,各环节相互独立且依赖任务特定调优,导致开发复杂度高、迭代周期长。

GE平台通过构建统一的视频生成世界模型,破解了这一碎片化架构瓶颈。基于约3000小时的真实机器人操控视频数据,平台建立了语言指令到视觉空间的直接映射,完整保留机器人与环境交互的时空动态信息。

核心突破在于视觉中心的世界建模范式。区别于主流VLA方法依赖语言抽象,GE直接在视觉空间中建模机器人与环境交互动态,实现对物理规律的精准捕捉。这一范式带来显著性能跃升:

跨平台泛化效率提升:在Agilex Cobot Magic等全新机器人平台上,GE-Act动作模型仅需1小时遥操作数据即可高质量执行任务,优于需大规模多本体预训练的π0和GR00T模型;

长时序任务执行突破:在折叠纸盒等超10步连续任务中,GE-Act成功率高达76%,关键归因于视觉空间显式建模时空演化的能力及创新的稀疏记忆模块设计。

技术架构由三大协同组件构成:

GE-Base多视角视频基础模型:采用自回归视频生成框架,通过头部与双臂腕部三路视角输入保持空间一致性,结合稀疏记忆机制增强长时序推理。训练分两阶段:3-30Hz多分辨率时序适应训练提升运动鲁棒性,5Hz固定采样策略对齐微调;

GE-Act平行流匹配动作模型:160M参数轻量架构通过交叉注意力机制将视觉表征转换为控制指令,采用quot;慢-快quot;异步推理,在RTX 4090 GPU实现200毫秒54步实时响应;

GE-Sim层次化动作条件仿真器:通过Pose2Image条件与运动向量编码,将控制指令精确转换为视觉预测,支持闭环策略评估与数据生成,每小时可完成数千次策略rollout。

为量化世界模型质量,团队同步推出EWMBench评测套件,从场景一致性、轨迹精度等维度评估建模能力。在Kling、OpenSora等模型对比中,GE-Base在关键指标均领先且与人类判断高度吻合。平台现已开放项目主页、论文及代码仓库,推动具身智能从quot;被动执行quot;向quot;想象—验证—行动quot;范式演进。

郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。

大型图册《林放不老》上海书展首发,首度以文物全景展现报人赵超构生 2025-08-15 02:06

东风风神L8开启预售20万内最舒适豪华座舱来了 2025-08-15 01:20

乐山电力3992万股限售股将于8月20日解禁上市 2025-08-14 18:00

“空地一体智慧交通”落地深圳中国提速低空经济万亿级市场 2025-08-14 15:18

上海金桥集团19.8亿私募债券状态已更新为“已受理” 2025-08-14 13:56

2025年广西“老字号”嘉年华暨“购在中国·乐享广西”离境退税服 2025-08-14 12:29

118家深圳上市公司披露中期业绩预告68家归母净利润将实现同比增 2025-08-14 11:06

番禺行动进行时打赢"服务体验战"广汽悄悄干了这些大事 2025-08-14 07:49

汽车观察:揽境,惊雷! 2025-08-14 06:44

奥迪、蔚来、特斯拉、途虎等争相入局,这一市场终究是巨头的游戏? 2025-08-14 05:24

ABDynamics发布用于无人驾驶测试的物体检测系统 2025-08-14 04:18

理想i8首批交付8月20日启动,目标到9月底保证超8000台 2025-08-14 03:22

解锁传祺GS3影速隐藏技能!暴雨模式是真的越用越香! 2025-08-14 01:21

央行:2025年7月末社会融资规模存量为431.26万亿元 2025-08-13 23:45

8月工信部新车:小鹏“拥抱增程”、全新问界M7、极氪9X纷纷亮相 2025-08-13 23:10

临高武莲渔港防波堤修复工程水下部分施工完成 2025-08-13 10:33

动物园变身“梦中情岗”超吃香,剑桥硕士来上海当饲养员 2025-08-13 09:00

沪光股份605333.SH新增一起对外投资,被投资公司为全能具身 2025-08-13 06:39

战投安邦护卫五年后“大赚一笔”的南都物业数钱离场 2025-08-13 04:14

北海康成-B01228拟折让约19.76%发行7497.15万股 2025-08-13 00:36