网易首页 > 网易号 > 正文 申请入驻

全球公开规模最大的高精度人体运动数据集,诺亦腾机器人造

0
分享至



如今,机器人本体日趋完备,模型能力愈发强大。但影响它们进入真实物理世界的,是能够被准确理解、有效学习、真实转化的数据。

8月19日,2026世界机器人大会(WRC 2026)在北京开幕。诺亦腾机器人在本次大会参展亮相,并正式发布 HiPHI 高精度人体运动与人—物交互数据集,该数据集即日起面向全球科研社区免费开放。

HiPHI 共包含617.5小时,约2.001亿帧的运动数据,是迄今规模最大的开源高精度人体运动数据集之一。它可用于人形机器人动作跟踪、模仿学习、动作生成,也能够为数字人和计算机图形学中的运动先验模型提供高质量数据基础。

该数据集现已在 Hugging Face 公开上线,是诺亦腾机器人基于 “World Compiler” 理念发布的首个公开数据集,旨在让真实物理世界成为人工智能系统可学习的对象。(huggingface.co/datasets/noitomrobotics/HiPHI)

目前该数据集根据ModalityNet 开放研究许可协议 (ModalityNet Open Research License)向非商业用途科研社区免费开放。如需商业授权,可通过 modalitynet.com 与诺亦腾机器人联系。

617.5小时数据

记录了什么?

此次发布的数据总时长达到 617.5小时,采集自132名动捕演员,采集频率为90 Hz,可达到亚毫米级光学动捕精度。在这些数据中,371.8小时为全身人体运动数据,覆盖行走、跑步、姿态转换、动态运动、平衡及全身协调等。而另外的245.7小时为人—物交互数据



与只记录人体动作的其他数据集不同,HiPHI 会将动捕演员的动作 BVH 数据、物体六自由度运动轨迹和物体三维网格体(3D Mesh)信息同步记录在同一坐标系中。在整个数据集中,共使用了40件重量、大小不等的真实物体,覆盖12个类别。

当一个人在“拉”“推”或“搬”某件物体时,数据不仅包含人的动作,还包含物体的位置、朝向、形状以及它与人体动作之间的对应关系。缺少物体信息以及接触状态的数据对于机器人的训练来说是不完整的。物体其本身就是物理交互的一部分。

从“动作清单”

走向“运动空间”

许多人体运动数据集以“动作清单”的方式组织:走路、跑步、跳跃、坐下、转身……动作种类与数据覆盖的广度似乎能够画上等号。但对于机器人学习而言,知道数据中“有哪些动作”还远远不够。

以“坐下”为例。不同的初始姿态、移动方向、动作速度、座椅高度和支撑方式,都会形成不同的运动轨迹;从站立到坐下也涉及重心变化、身体平衡以及多个关节之间的连续协调。如果只是为一段数据贴上“坐下”的标签,这些真正决定动作如何完成的信息就很难被充分表达。



因此,HiPHI 构建出了一个具有系统性和连续性的“运动空间”。诺亦腾机器人团队参考 FrameNet 对人类动作语义的组织框架,系统考虑动作之间的变化、组合与转换。以动作单元进行结构化整理。可以说,早在采集第一帧数据之前,团队就已经围绕人体行为的语义关系进行了覆盖度设计。



在这一框架下,移动、姿势转换、动态动作、平衡和全身协调是运动空间中相互连接的区域;这种组织方式让模型学习动作如何开始、如何变化、如何衔接,以及在不同条件下如何完成。对于模仿学习、动作生成和运动先验模型而言,这意味着数据能够提供更完整的变化范围和更清晰的物理约束。

数据中的动作

能否真正转化为机器人能力?

从动作数据到机器人自主能力,还需要经过从采集到仿真到真机部署的过程。诺亦腾机器人团队首先将HiPHI中的人体动作重定向到人形机器人,再通过物理仿真与强化学习,让机器人在满足关节限制、平衡和接触约束的情况下,学习如何复现相应动作。

在训练数据量相同的情况下,无论使用3小时还是20小时随机采样的验证子集,基于 HiPHI 训练的控制策略都能更快学会动作,并以更高的成功率完成运动跟踪。这说明 HiPHI 的优势不仅来自规模,也来自数据本身的质量与覆盖度。



当 HiPHI 的训练数据进一步从3小时增加到300小时时,控制策略在四个未参与训练的外部动作数据集上的关节跟踪误差持续下降。这表明,随着高质量数据规模扩大,机器人对陌生动作的学习和泛化能力仍在继续提升。

目前,基于HiPHI训练的控制策略已经成功部署在真实的宇树G1人形机器人上,实现跑步、坐下、爬行、搬运箱子和拖拉行李箱等动作。HiPHI完成了一次从“人类如何运动”到“机器人如何学习”的完整验证。



为具身智能行业提供一套

可信赖的公共数据基础数据

高质量人体运动数据长期稀缺,行业一直面临规模与精度难以兼得的问题:互联网视频体量庞大,却缺少机器人学习所需的精确物理状态和交互信息;实验室采集的数据精度更高,但受制于采集成本和生产效率,往往只能覆盖有限的行为类型。正因如此,同时具备大规模、高精度和丰富动作覆盖的数据集很少对外开放,由商业数据生产企业完整公开的案例更为罕见。

此次公开的617.5小时 HiPHI 数据,是诺亦腾机器人持续生产的高精度人体运动数据中的一个代表性样本。除开源部分外,诺亦腾机器人可提供的同类数据规模可达到本次开源数据的十倍以上,并根据具体应用场景,在动作范围、交互物体、机器人本体和交付格式等方面提供定制化的数据生产与商业授权服务。企业可以通过此次开源版本直接评估数据的覆盖度、精度和组织方式,并进一步通过 ModalityNet 获取更大规模、可用于商业开发的数据。

Noitom Robotics 创始人&CEO 戴若犁博士表示:

Physical AI 面临的真正瓶颈,不在于世界上存在多少数据,而在于其中究竟有多少能够真正被机器学习。HiPHI 是我们给出的第一个答案。这类高质量数据通常被企业视为核心资产,很少对外开放。我们选择公开 HiPHI,一方面是希望为具身智能行业提供一套可信赖的公共数据基础;另一方面,也源于我们对自身持续生产高质量数据能力的信心。”

诺亦腾机器人首席科学家韩磊博士表示:

动作覆盖度、逐帧数据质量和交互物体状态,直接决定了人形机器人能否真正从人类运动数据中学到能力。因此,从数据设计、生产评估到发布,我们始终围绕这三个重点展开。此次发布已经包含研究人员使用和评估数据所需的完整内容,包括标准化 BVH 文件、同步物体轨迹、语义化动作索引HiPHI 也是我们日常数据生产能力的真实体现:依托这套基础设施,我们每年可为合作伙伴生产超过10万小时的高质量数据。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
未开封珠江啤酒里,飘着“卫生纸状”白色絮状物!广东一消费者饮用后腹泻;珠江啤酒公司:是菌膜影响口感但对身体没影响,只能赔12瓶啤酒

未开封珠江啤酒里,飘着“卫生纸状”白色絮状物!广东一消费者饮用后腹泻;珠江啤酒公司:是菌膜影响口感但对身体没影响,只能赔12瓶啤酒

金哥说新能源车
2026-09-10 06:42:16
你有没有发现,当年中国入世谈判花了15年,如今为啥WTO几乎被国人忘记了

你有没有发现,当年中国入世谈判花了15年,如今为啥WTO几乎被国人忘记了

怪味历史连连看
2026-09-08 10:25:12
割让领土,撤出顿巴斯全境!和平计划曝光:普京大获全胜?

割让领土,撤出顿巴斯全境!和平计划曝光:普京大获全胜?

小马姨
2026-09-08 21:15:42
人民日报:每天一根香蕉,可降低心脏病风险!想吃出效果?肠道菌群或是关键

人民日报:每天一根香蕉,可降低心脏病风险!想吃出效果?肠道菌群或是关键

肠菌科普
2026-09-08 07:04:42
这次,印加坡没来得及诬陷中国

这次,印加坡没来得及诬陷中国

韬闻
2026-09-08 22:45:06
央视直播澳门冠军赛9月10日赛程,陈幸同对米特兰姆,周启豪战邱党

央视直播澳门冠军赛9月10日赛程,陈幸同对米特兰姆,周启豪战邱党

乒乓球球
2026-09-09 22:28:01
大反转!假的,确认系AI生成

大反转!假的,确认系AI生成

晋江电视台
2026-09-09 23:26:42
郭德纲处罚结果仅一天!央媒点名,离谱一幕发生,牵出与杨议旧怨

郭德纲处罚结果仅一天!央媒点名,离谱一幕发生,牵出与杨议旧怨

翰飞观事
2026-09-08 16:52:26
一首歌,什么时候开始不能开玩笑了?

一首歌,什么时候开始不能开玩笑了?

熊倌儿
2026-08-17 11:32:29
武汉42岁男子连续34小时不睡,跑完174公里!本人:每天跑步15公里上下班,身体年龄才20多岁

武汉42岁男子连续34小时不睡,跑完174公里!本人:每天跑步15公里上下班,身体年龄才20多岁

都市快报橙柿互动
2026-09-09 00:31:57
养老金月入过万群体的心声:年轻人不生娃,不交社保,自私自利,还拖垮了社会养老体系

养老金月入过万群体的心声:年轻人不生娃,不交社保,自私自利,还拖垮了社会养老体系

舒山有鹿
2026-08-09 11:56:27
星宇事件舆论再升级!惊动海外媒体,已被《商报》、德国之声等主流媒体报道,宝马、大众、奔驰等车企火速合规调查中

星宇事件舆论再升级!惊动海外媒体,已被《商报》、德国之声等主流媒体报道,宝马、大众、奔驰等车企火速合规调查中

火山詩话
2026-09-08 12:37:17
10样东西过期1天也要扔!第一名家家都在用

10样东西过期1天也要扔!第一名家家都在用

三农老历
2026-09-09 02:09:07
这10样东西过期1天也要扔,第一名天天用,毒性最强!

这10样东西过期1天也要扔,第一名天天用,毒性最强!

三农老历
2026-09-10 03:41:46
第二个菲律宾?柬埔寨宣布:将与美重启军演,还开放中国援建基地

第二个菲律宾?柬埔寨宣布:将与美重启军演,还开放中国援建基地

叹知
2026-09-08 12:19:41
谢贤前女友Coco直播被说丑,本人回应:“姐都40岁了,把头发往下一放还是迷倒一大片的”

谢贤前女友Coco直播被说丑,本人回应:“姐都40岁了,把头发往下一放还是迷倒一大片的”

韩小娱
2026-09-04 05:54:22
越扒越可怕!安大副校长付磊20年前黑历史疑曝光:他是被美国实验室开除的

越扒越可怕!安大副校长付磊20年前黑历史疑曝光:他是被美国实验室开除的

小徐讲八卦
2026-09-07 07:20:52
消息称钉钉创始人无招回归阿里!阿里回应

消息称钉钉创始人无招回归阿里!阿里回应

鞭牛士
2026-09-09 19:00:26
最新:乌克兰清除大叛徒舒托夫!曾任顿涅茨克安全部要员

最新:乌克兰清除大叛徒舒托夫!曾任顿涅茨克安全部要员

项鹏飞
2026-09-07 20:57:14
孙割被割:1.9亿刀,仅退款、小作文惹毛川普

孙割被割:1.9亿刀,仅退款、小作文惹毛川普

小小河
2026-08-31 16:27:29
2026-09-10 10:15:00
智能纪元AGI
智能纪元AGI
专注科技、科学、商业产业报道
2606文章数 10612关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

iPhone18 Pro系列价格公布:A20 Pro芯片 续航大幅提升

头条要闻

iPhone18 Pro系列价格公布:A20 Pro芯片 续航大幅提升

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭德纲被处罚2天,身边人传出好消息

财经要闻

银行新高!新一轮周期,刚开始!

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

家居
游戏
数码
公开课
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

《星际火狐》免费更新支持四人组队参加联网战斗

数码要闻

立讯精密光博会首发“云雀AIR”,携手光峰科技、慕德微纳探索AR显示新边界

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

中东“两线战火”同时升级

无障碍浏览 进入关怀版