网易首页 > 网易号 > 正文 申请入驻

刷新权威榜单!ACE-Ego 解锁“以人为中心”具身模型训练新范式

0
分享至

近日,大晓机器人联合香港中文大学多媒体实验室(CUHK MMLab)正式发布全新“一脑多型”具身操作VLA模型 ACE-Ego,并向行业开源。

作为“以人为中心”ACE 研发范式在具身模型预训练的核心落地成果,ACE-Ego提出大规模第一视角人类视频与多型机器人数据高效联合预训练的新范式,在两大国际权威具身智能基准上双双领先,并在复杂零售场景中展现出强泛化落地能力,为具身操作模型的规模化演进开辟了全新路径。



在国际公认的人形机器人操作基准 RoboCasa GR1 TableTop 上,ACE-Ego 以72.8%的平均成功率刷新当前最高纪录,夺得榜首,大幅超越英伟达 GR00T、PI π₀.₅、京东JoyAI-RA 等主流模型;在高难度双臂操作基准 RoboTwin 2.0 的强域随机化测试中,ACE-Ego 以90.62%的成功率展现出远超行业平均水平的环境鲁棒性。

2025年12月,大晓机器人提出“以人为中心(Human-centric)” 的ACE具身研发范式,将人类与物理世界的互动规律作为核心研究起点,构建了一套从“环境式数据采集—开悟世界模型3.0—具身交互”的全链路技术体系。源于对 “以人为中心” ACE 范式的深度践行,不同于行业传统 “以机器为中心”、依赖大批量高成本真机遥操作数据的路线,ACE-Ego 将海量低成本的第一视角人类视频转化为可用于模型训练的有效监督信号。通过统一相机空间动作表示、统一本体形态编码、时间对齐动态分块、可靠性自适应目标函数四大核心机制,它系统性破解了人与不同型号机器人数据在空间坐标系、本体结构、时序频率、标签质量上的四重异构难题,实现使用大规模高质量人类第一视角视频与数千小时多机型机器人数据的协同训练。

实验结果证实了大规模第一视角人类视频能够有效提升VLA模型预训练和下游适配能力:在 RoboCasa 基准上,引入第一视角人类视频进行联合预训练,相比于仅使用机器人数据进行预训练,模型成功率从 68.3% 提升至 72.8%,实现了4.5%的显著性能跨越。充分证明了“以人为中心”的大规模数据预训练对提升具身模型泛化能力的巨大价值。

目前,ACE-Ego 已能稳定完成塑料袋打包、鞋子装入鞋盒等长周期、强接触的复杂零售操作,覆盖商品整理、打包履约等典型线下零售环节,突破了此前模型仅能完成简单桌面抓取的能力边界,为具身智能走向产业规模化落地提供了高性价比的技术方案。

刷新两大国际具身智能基准,全面领跑通用操作模型

ACE-Ego 在RoboCasa GR1 TableTop 与 RoboTwin 2.0 两大国际权威具身智能基准上取得SOTA成绩,显著超越英伟达 GR00T、PI π₀.₅、京东JoyAI-RA、蚂蚁灵波LingBot-VLA、高德ABot-M0、小鹏DIAL等多款主流通用机器人模型。

在 RoboCasa GR1 TableTop 人形桌面操作基准上,ACE-Ego 实现72.8%的平均成功率,大幅刷新榜单纪录。该基准基于 GR1 人形机器人平台设置 24 项典型家庭任务,涵盖18项抓取放置重排与6项铰接物体交互,是衡量人形机器人通用操作能力的核心标尺。



测试结果显示,ACE-Ego 较第二名 小鹏DIAL模型(70.2%)任务成功率提升 2.6%,较英伟达 GR00T-N1.6(47.6%)提升达25.2%,同时全面领先 京东JoyAI-RA(63.2%)、高德ABot-M0(58.3%)、FLARE(55.0%)等主流模型。性能增益覆盖抓取放置、铰接操作全品类任务,其中盘子叠放、托盘移锅等任务成功率突破98%,证明其能力提升来自框架底层优化,而非特定任务过拟合。

在 RoboTwin 2.0 双臂操作基准中,ACE-Ego 同样稳居VLA类模型榜首,展现出极强的环境鲁棒性。该基准包含50项覆盖抓取、放置、工具使用、双臂协同的复杂任务,设置干净场景(Easy)与强域随机化场景(Hard)两种模式,其中 Hard 模式随机改变光照、纹理、物体位置等条件,高度模拟真实世界不确定性。

ACE-Ego 在 Easy 模式下成功率达 91.12%,Hard 模式达 90.62%,超越腾讯混元Hy-VLA(90.9%/90.1%)、 京东JoyAI-RA(90.48%/89.28%)、蚂蚁灵波LingBot-VLA(88.56%/86.68%)、PI π₀.₅(82.74%/76.76%)、生数Motus(88.66%/87.02%)、高德ABot-M0 (86.06%/85.08%)等对比模型。



从干净场景到强随机化场景,ACE-Ego 性能仅衰减0.5个百分点,远低于行业平均水平,意味着其习得技能具备极强的环境适应性,更贴近真实商业部署要求。

零售场景全链路落地验证,实操能力解锁商业价值

从鞋盒规整入盒、咖啡定量分装,再到柔性塑料袋打包,ACE-Ego 在典型零售场景中展现出全栈式真实操作能力,覆盖商品陈列、履约打包、货品分拣等线下零售核心作业环节。

机械臂精准识别鞋盒与双鞋的空间位置,按照零售场景的标准陈列方位将鞋依次平稳放入盒内;随后精准定位鞋盒翻盖的铰链转轴与边缘,沿自然合盖轨迹平稳完成翻盖扣合,全程无碰撞、无挤压,展现出对铰接类物体的几何操作理解与精准空间定位能力。

机械臂抓取咖啡勺后,从敞口咖啡罐中平稳舀取定量咖啡豆,抬臂、平移、对准杯口一气呵成,精准控制倾倒角度与速度将咖啡豆全部注入杯中,全程无撒漏。整套长时序操作连贯流畅,体现模型对长程动作序列的规划能力与末端执行的精细对准精度。

机械臂抓取轻薄购物塑料袋的袋口,顺势撑开袋身形成稳定容纳空间,将目标物品平稳放入袋中后收紧袋口完成打包。全程应对塑料袋柔软易变形、无固定形态的特性,实现了柔性物体的稳定抓取与形态操控。

四大核心机制破局异构融合,解锁人机协同预训练新范式

双榜登顶与下游任务高效适配的卓越表现,源于 ACE-Ego 依托“以人为中心”的研发范式,对具身智能行业痛点实现的重大技术突破。面对人-机数据在空间、结构、时间、训练监督信号四个维度严重不匹配的行业挑战,ACE-Ego 创新构建了“大规模人类第一人称视频 + 多具身机器人数据”的全链路融合方案。通过自研的四大核心机制,ACE-Ego 分别从空间、结构、时间以及训练监督四个维度统一表示与对齐,彻底破解了人机数据不兼容的难题。这四大机制并行发力,成功支撑了大规模人机异构数据的同框训练,将具身操作模型推入多源协同预训练的新阶段。

机制一:第一视角统一动作空间表达,让不同人与不同机型的动作 “说同一种语言”。ACE-Ego 以头部相机坐标系为统一基准,将多机型机器人末端执行器轨迹、不同人类视角视频重建的手部运动全部投影到机器人 “第一视角” 下,让动作指令与视觉观测对齐至统一坐标系,免去跨平台复杂坐标校准,新本体部署仅需替换一组相机外参。针对人类视频,团队搭建多阶段处理管线,覆盖原始筛选、3D 手部重建、参数化映射与多轮质量过滤等数据构建机制,最终输出与机器人完全同构的动作向量,实现数据格式层面的无缝兼容。

机制二:URDF(统一机器人描述格式) 本体形态映射,让模型知晓 “谁在做动作”。不同机器人的关节结构、物理尺寸差异巨大,人体运动模式与机器人更是截然不同。为此,ACE-Ego 创新性地将 URDF(统一机器人描述格式)映射为跨本体的统一中间层编码。对于机器人,它通过解析 URDF 文件将运动学特征编码并输入动作解码器;对于人类数据,则通过学习专属的“代理形态嵌入”来模拟人体结构。这种“形态条件”仅在动作解码阶段注入,不干扰视觉语言主干网络,不仅保留了主干网络强大的通用视觉理解能力,更带来了极快的新机适配速度——在面对 ARX 双臂机器人等全新未知机型时,仅需不到 200 条动作数据,即可在极短时间内完成适配部署。

机制三:时间对齐动态分块,让不同“手速”数据步调一致。不同机器人平台控制频率从10Hz到30Hz不等,固定帧数的动作块对应物理时长差异显著,直接混训会扰乱时序逻辑。ACE-Ego 打破按帧切分的传统做法,以物理时长为标准划分动作块,确保所有数据源预测相同时长的未来动作窗口;搭配分桶采样策略,按任务类型、时序阶段、块长组合成批,大幅降低填充开销,稳定梯度更新,让跨频率数据的联合训练平稳落地。

机制四:可靠性自适应目标函数,带噪声数据“按需采信”。人类视频数据中的动作标签由视觉算法重建获得,动作标签带有一定重建噪声,若与高精度传感器数据同权训练反而会拉低模型精度。ACE-Ego 设计了双层训练目标体系:机器人传感器数据作为“准确”监督信号,全权重锚定核心控制精度;人类采集动作作为重要多样性补充信号也参与训练,实行三级加权机制 —— 通道级重点采信高可靠位置信号,数据集级按重建质量设置权重上限,帧级通过运动平滑度动态过滤异常片段。这套 “信息过滤器” 既充分释放了大规模人类视频场景的多样性潜力与行为广度,又牢牢守住机器人高精度数据的质量底线。

四大机制环环相扣,打通了 “人类视频规模化扩量 + 机器人数据保障精度” 的全新技术路径,为具身操作模型的规模化训练打开了成本与规模的双重增长空间。

大晓机器人将继续深化“以人为中心”的 ACE 研发范式,将这一套高效的人机协同预训练方法推广至更广阔的空间。在模型层面,ACE-Ego模型系列将进一步融合视觉-语言-动作(VLA)模型和具身世界模型(WAM),赋予机器人更强的物理世界想象力与预测能力;在应用层面,该范式也将从当前的复杂零售场景,加速拓展至工业产线、柔性制造等更多高精尖实体产业场景,以高性价比、高泛化性的技术路径,全面加速具身智能的规模化商业落地。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

只要高兴就好
2026-09-24 11:58:50
别再被小电影骗了:真实世界里的性生活时长数据

别再被小电影骗了:真实世界里的性生活时长数据

精彩分享快乐
2026-10-22 21:00:04
厨房里一个调料,导致中国人死亡率全球第一,专家:不能再这么吃

厨房里一个调料,导致中国人死亡率全球第一,专家:不能再这么吃

39疾病百科
2026-11-01 09:01:18
徽剑案是“境外势力”的“虽远必诛”

徽剑案是“境外势力”的“虽远必诛”

历史总在押韵
2026-11-02 19:48:52
大好领先惨遭逆转!复盘山东惜败北控:用人保守、体能崩盘,再加上后卫缺人、内线失守,判罚争议不断

大好领先惨遭逆转!复盘山东惜败北控:用人保守、体能崩盘,再加上后卫缺人、内线失守,判罚争议不断

老周观体育
2026-11-03 20:08:03
宋慧乔谈与宋仲基离婚原因:因生育计划产生无法调和的根本分歧,宋仲基希望尽快生育甚至在新婚阶段就迫切想要孩子;非出轨或性格不合

宋慧乔谈与宋仲基离婚原因:因生育计划产生无法调和的根本分歧,宋仲基希望尽快生育甚至在新婚阶段就迫切想要孩子;非出轨或性格不合

洪观新闻
2026-11-02 11:25:00
主动投案,江苏省工业和信息化厅党组成员谢中东接受审查调查

主动投案,江苏省工业和信息化厅党组成员谢中东接受审查调查

上观新闻
2026-11-03 17:30:36
大量带货主播集体围攻贾乃亮,直言被他抢走生意,大明星不应该来带货

大量带货主播集体围攻贾乃亮,直言被他抢走生意,大明星不应该来带货

新游戏大妹子
2026-11-03 12:37:18
男子和四十多岁女网友认识后,频繁发生关系,最后一次在车内,男子死亡后家属向女子索要巨额赔偿

男子和四十多岁女网友认识后,频繁发生关系,最后一次在车内,男子死亡后家属向女子索要巨额赔偿

丫头舫
2026-10-13 22:10:25
2018年歌手赵英俊患癌只告诉了薛之谦,薛之谦帮他寻医签字,后来薛之谦登上央视春晚,他弹着那把吉他,唱赵英俊写的《方的言》

2018年歌手赵英俊患癌只告诉了薛之谦,薛之谦帮他寻医签字,后来薛之谦登上央视春晚,他弹着那把吉他,唱赵英俊写的《方的言》

背包旅行
2026-11-02 15:27:19
小杨哥注销亿级大号复出,和杨爸重拍段子为何越看越别扭

小杨哥注销亿级大号复出,和杨爸重拍段子为何越看越别扭

海藻娱乐
2026-11-03 19:13:45
在华42年,大众首次技术日讲了什么? | 电厂

在华42年,大众首次技术日讲了什么? | 电厂

电厂
2026-11-02 20:09:51
群交、卖淫、吸毒!211高材生“妖女”许秀中,如今落魄哭求回国

群交、卖淫、吸毒!211高材生“妖女”许秀中,如今落魄哭求回国

社会日日鲜
2026-11-01 09:31:14
冷白皮的性感,你们会喜欢吗?

冷白皮的性感,你们会喜欢吗?

疾跑的小蜗牛
2026-11-03 19:54:29
丈夫抱回男婴让我先喂,我偷偷做亲子鉴定,结果出来全家傻眼了

丈夫抱回男婴让我先喂,我偷偷做亲子鉴定,结果出来全家傻眼了

晓艾故事汇
2026-06-08 08:19:26
雷霆险胜骑士:亚历山大43+8赛季新高 哈登14+6米切尔17+11

雷霆险胜骑士:亚历山大43+8赛季新高 哈登14+6米切尔17+11

醉卧浮生
2026-11-03 10:36:08
中国证监会副主席李超:全力维护资本市场平稳运行,加快推动实施新一轮资本市场改革开放

中国证监会副主席李超:全力维护资本市场平稳运行,加快推动实施新一轮资本市场改革开放

每日经济新闻
2026-11-03 12:28:05
中信证券研究部首席策略师包承超:当前国内大盘蓝筹股估值处于较低水平

中信证券研究部首席策略师包承超:当前国内大盘蓝筹股估值处于较低水平

证券时报
2026-11-03 12:17:03
记者:广东宏远在第一阶段打得几乎是全CBA最落后的篮球

记者:广东宏远在第一阶段打得几乎是全CBA最落后的篮球

懂球帝
2026-11-03 20:00:48
辽宁省管干部任前公示

辽宁省管干部任前公示

爱下厨的阿酾
2026-11-03 18:37:42
2026-11-03 22:04:49
止戈见闻
止戈见闻
关注科技与商业的脉动
175文章数 0关注度
往期回顾 全部

科技要闻

马斯克也哭穷!Grok Bot额度暴跌

头条要闻

21名学生表演后集体退演出服 部分学生还辱骂挑衅商家

头条要闻

21名学生表演后集体退演出服 部分学生还辱骂挑衅商家

体育要闻

领意甲最低的工资,踢着最幸福的足球

娱乐要闻

巴图自曝已改姓后,英如嫡直播摊牌

财经要闻

AI缺电,美国科技巨头盯上老核电站

汽车要闻

问界赋能豪华体验 逸安启让充电成为一种享受

态度原创

教育
艺术
数码
公开课
军事航空

教育要闻

华侨大学一研究生“闪电”退学,回应刚入学就做实验,专业方向不对,网友秒懂问题所在

艺术要闻

“墨西哥硅谷”建新球场,效果图公布!

数码要闻

ATK RS8 Air / Neo电竞键盘首销:87配列,到手价299元起

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美官员称美袭击伊朗格什姆岛

无障碍浏览 进入关怀版