网易首页 > 网易号 > 正文 申请入驻

当数采设备不再稀缺,具身数据下一步拼什么?

0
分享至


作者 | 姚戈

最近一年,具身智能行业里的数据采集设备明显多了起来。入局者众多,很容易让人产生一种印象,数采硬件已经没有多少技术含量,做出一套设备似乎并不难。

但过去一年,我们采访了不少具身智能数据公司。一个越来越明显的感受是,行业已经不太缺“快速、大量采数据”的方案,真正稀缺的是能够稳定进入模型训练,并最终带来模型能力提升的数据。

数采设备越来越多,并不意味着高质量的第一视角数据已经变得容易获得。事实上,我们听到过不少因为数据质量问题拖慢甚至影响模型训练的案例。

最近,开源数据集 Xperience-10M 背后的 Physical AI 数据基础设施公司 Ropedia,发布了新一代第一视角多模态采集设备 HOMIE Gen2。

在 HOMIE Gen2 发布之前,Ropedia 的上一代设备已经被用于生产 Xperience-10M。这套数据集开源后,又陆续进入 Qwen、Ai2 等团队的模型训练。

据 AI 前线了解,从第一台原型机到今天的 HOMIE Gen2,Ropedia 的采集设备在约十二个月里迭代了四代。2025 年 6 月,团队用 3D 打印结构件搭出第一台第一视角采集原型机“竹蜻蜓”;同年 10 月,第二代 R-Ego 改进了相机布局与头戴结构,并完成第一笔硬件销售;2026 年 1 月,HOMIE Gen1 走向产品化,支撑了 Xperience-10M 的生产;到了 HOMIE Gen2,团队开始进一步解决规模化部署的问题。

一家已经把数据送进模型训练的公司,会怎么重新设计一台数采设备?

这和 Ropedia 创始团队过去的经历有关。首席科学家刘子纬是南洋理工大学副教授,长期从事计算机视觉研究,研究方向从大规模视觉数据、长尾学习逐渐延伸到 3D 视觉和空间智能;CEO 陈昭熹和 CTO 洪方舟均为清华本科、南洋理工大学博士,之后进入 Meta,前者参与过光学动作捕捉数据体系建设,后者从事第一人称多模态智能研究。

这些经历让 Ropedia 很早就确定了一种思路:从模型训练需要什么数据,反过来决定设备应该采什么、采到什么精度,以及采集之后如何处理。设备能采多少数据只是其中一环,数据最终能不能被模型有效利用,同样会影响前端的硬件设计。


HOMIE Gen1 已经证明第一视角数据可以规模化采集,HOMIE Gen2 又往前走了一步。Ropedia 希望把真实世界中的人类活动更完整、更准确地记录下来,同时降低大规模生产这类数据的成本。

HOMIE Gen2,解决四个数采问题

采集视野扩大到 360° 空间

传统第一视角采集主要记录佩戴者前方发生的事情,但真实的物理任务并不只发生在正前方。人的侧面和背后,周围的物体和其他人,都可能影响一个动作的发生。

HOMIE Gen2 使用 4 目全景相机实现 360° 视野覆盖,同时加入 4 路空间音频。这样记录下来的信息可以覆盖佩戴者周围的环境,以及人与物体、环境之间的交互过程。

对于具身模型来说,这些上下文很重要。模型需要学习一个动作,也需要理解动作发生时周围有什么、人在和什么交互,以及环境随后发生了什么变化。扩大采集范围,本质上是在尽量减少真实世界信息在采集环节的损失。

对齐多种传感器

现在的数采设备普遍会使用多种传感器,真正困难的是让它们准确记录同一个物理时刻。

人在快速伸手、转头或者移动时,即便只有很小的时间偏差,也可能造成视觉画面和运动信息错位。单独看每一路数据可能都没有问题,组合起来却描述了几个不同时刻的状态。

HOMIE Gen2 将 4 路视频、4 声道空间音频和 200Hz 6DoF IMU 做了硬件级同步,多传感器之间的时间同步精度达到 50 微秒。

对模型训练来说,同步精度直接影响数据是否可靠。视觉、声音和运动信息只有在时间轴上准确对应,后续的空间理解和动作学习才有一致的数据基础。

开箱即用的 Xperience 数据

硬件完成采集之后,还有大量数据处理工作。

HOMIE Gen2 采集到的原始信号经过处理,会进一步形成结构化的Xperience 数据,包括校正后的双目视频、深度图、相机位姿、手部 21 关键点、全身 52 关键点,以及任务、子任务、当前动作三层文本标注。此外还可以输出 3D 高斯、场景网格、物体检测和 4D 物体跟踪等信息。


Ropedia 还公布了一组基于 HOMIE Gen2 金标准样本集的测试结果。空间定位平均绝对误差约为千分之二,深度范围误差低于 2.5%,手部 21 关键点动捕平均误差为 4.68 mm,动作语义标注准确率达到 96.0%。

这些能力最终指向一个很实际的问题。模型公司购买数据之后,如果还需要投入大量人力完成同步、校准、动作恢复和标注,采集环节节省下来的成本,很可能又会转移到数据处理环节。

Ropedia 因此希望把处理过程继续向前延伸,让客户拿到的数据能够更快进入模型训练。HOMIE 负责记录真实世界,后面的数据处理系统则负责把这些记录加工成模型能够使用的数据。

支撑真实场景规模化部署

高质量数据还要解决规模问题。

真实世界采集往往需要设备连续工作数小时,并进入家庭、工厂、商场等不同环境。设备重量、续航、存储和部署复杂度,最终都会影响数据生产的效率和成本。

HOMIE Gen2 整机约 380g,支持约 13 小时连续采集,无需提前在环境中布置外部设备;同时支持离线采集,本地 microSD 存储最高 2TB,并配有外接供电和数据接口。

据 Ropedia 介绍,HOMIE Gen2 从 CMOS、PCB 到结构件均为自研,目前具备约万台规模的产能。相比上一代方案,部署速度提升约 10 倍,采集成本降至约 1/12.5。多台设备也可以同时作业,让不同人员在同一环境中完成采集。

规模化还有另一层要求。设备数量增加之后,团队需要统一管理设备状态、采集任务和数据质量。HOMIE Gen2 因此加入了设备管理和数据采集系统,可以进行设备状态管理、远程升级和采集任务分发。

如果这些能力能够在实际交付中稳定兑现,HOMIE Gen2 就有机会把第一视角数据采集从少量设备完成的项目,变成可以批量部署的数据生产方式。

数据的竞争,正在换赛道

具身智能行业已经积累了越来越多数据,但模型真正缺的,仍然是来自真实世界、上下文完整、质量稳定,并且能够直接用于训练的人类经验数据。

这也让数据竞争的标准发生了变化。采集多少小时当然重要,但模型最终能不能用这些数据,正在成为更关键的指标。前面提到的多传感器同步、数据结构化和规模化部署,最终都要回到模型训练的效果上。

Ropedia 联合创始人兼首席科学家、南洋理工大学副教授刘子纬曾说:“如果经验是稀缺资源,那么就必须有人把它工业化。”

Ropedia 想做的,就是把人类经验变成一种可以持续生产的数据资源。

今年 3 月发布的 Xperience-10M 已经验证了这条路径。它包含约 1000 万个真实世界交互片段、1 万小时带音频的第一视角视频、28.8 亿个 RGB 帧和 5.76 亿个动作捕捉帧,总规模接近 1PB。此后,这套数据进入了 Ai2、Qwen 等团队的模型训练。

对一家数据公司来说,这可能比单纯的硬件参数更有说服力。数据采出来之后有没有人用,用完之后能不能帮助模型训练,最终决定了这些数据的价值。

目前,Ropedia 希望把这套数据生产能力继续用到机器人和 VLA 训练、世界模型、人机交互等方向,也可以针对具体的机器人任务进行定制化采集。HOMIE Gen2 则负责把这套能力进一步推向更多真实场景。

HOMIE Gen2 之后,Ropedia 想做什么?

Ropedia CEO 陈昭熹曾表示:“Ropedia 绝不只是一家数据采集公司,数据采集只是第一步。”

HOMIE Gen2 是这条路线的产品化入口。过去一年,Ropedia 已经通过 Xperience-10M 验证了从第一视角采集到模型训练的数据链路。现在,它希望通过 HOMIE Gen2 把这套能力进一步扩大,进入更多场景和更大规模的数据生产。

数采设备还会继续增加,硬件方案也可能越来越接近。但对数据的理解没有那么容易复制。

Ropedia 三位创始人过去的工作都长期与数据和模型打交道。刘子纬长期从事计算机视觉研究,从大规模视觉数据、长尾学习到 3D 视觉和空间智能,一直在研究数据与模型能力之间的关系;陈昭熹曾在 Meta 参与光学动作捕捉数据体系建设,洪方舟也曾在 Meta 从事第一人称多模态智能研究。

这些经历也影响了 Ropedia 做数采设备的思路。什么数据值得采,误差应该控制到什么程度,数据进入训练之后如何影响模型,再根据模型反馈调整下一轮数据生产,都需要对数据和模型有足够深入的理解。

按照 Ropedia 的规划,未来三到五年,公司希望进一步覆盖数据、硬件、基础设施与模型,成为一家机器人学习基础设施公司。这也对应着它对产品演进的三个阶段:

  • Gen 1,数据采集:多传感器、第一视角的原始数据采集;

  • Gen 2,经验采集:360° 完整上下文、硬件级同步、结构化 Xperience、可直接用于训练的数据;

  • 下一阶段,规模化智能:体验数据集、体验平台、体验基础设施。


这条路还很长。HOMIE Gen2 目前解决的,是其中最靠前、也很基础的一环:把真实世界里的人类活动,更准确、更完整地记录下来,再转化成模型能够使用的数据。

数采设备越来越多之后,真正拉开差距的,最终还是对智能的理解。

会议推荐

QCon 全球软件开发大会·2026(上海站)现已正式启动。本届大会聚焦 Harness AI 时代的工程实践,从「构建 AI」到「驾驭 AI」,围绕 AI Native 架构、Agent Runtime、AI Infra、Agent 安全与可观测、Loop Engineering、具身智能与世界模型等热门技术方向,邀请全球技术社区与产业一线实践者,共同分享 AI Native 时代最具价值的工程经验。

今日荐文


你也「在看」吗?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一段尴尬的“女强人妈妈接孩子放学”视频火了,网友不给面子,很扎心

一段尴尬的“女强人妈妈接孩子放学”视频火了,网友不给面子,很扎心

世界圈
2026-10-26 16:18:18
德宏州文化和旅游局原党组书记、局长杨爱军被开除党籍和公职

德宏州文化和旅游局原党组书记、局长杨爱军被开除党籍和公职

掌上春城
2026-10-28 13:32:56
8年之约到期,百万电车车主天塌了

8年之约到期,百万电车车主天塌了

鸣金网
2026-10-27 15:30:13
反诈博主“徽剑”遭买凶杀害,好友追忆:他经营教培公司,出于正义感反诈

反诈博主“徽剑”遭买凶杀害,好友追忆:他经营教培公司,出于正义感反诈

澎湃新闻
2026-10-28 13:54:06
9岁男孩、无彩礼,妈妈的征婚要求很简单,为何网友却并不看好?

9岁男孩、无彩礼,妈妈的征婚要求很简单,为何网友却并不看好?

尘埃里的看客
2026-10-28 16:30:08
陕北8万红军,4.5万人改编八路军,另外3.5万人毛主席的安排真妙

陕北8万红军,4.5万人改编八路军,另外3.5万人毛主席的安排真妙

纪史行者
2026-08-22 01:15:05
男子价值500多万元限量版阿斯顿马丁被撞,肇事网约车全责,司机无奈:无商业险,只能分期赔付;平台:愿意承担最低20%至全额责任

男子价值500多万元限量版阿斯顿马丁被撞,肇事网约车全责,司机无奈:无商业险,只能分期赔付;平台:愿意承担最低20%至全额责任

海峡网
2026-10-28 16:26:07
票房6.65亿,连续一周登顶冠军,周星驰梁家辉被朱一龙打懵了

票房6.65亿,连续一周登顶冠军,周星驰梁家辉被朱一龙打懵了

影视高原说
2026-10-28 17:03:52
令人愤怒的“卖1元火鸡面”视频,炸出了多少被毁掉的中国小孩

令人愤怒的“卖1元火鸡面”视频,炸出了多少被毁掉的中国小孩

小椰子专栏
2026-10-26 13:02:17
改革开放后有三大耻辱,件件都是民族伤疤。1993年、1999年、2001年这三个年份对中国人而言,每个数字背后都是一段屈辱经历

改革开放后有三大耻辱,件件都是民族伤疤。1993年、1999年、2001年这三个年份对中国人而言,每个数字背后都是一段屈辱经历

扶苏聊历史
2026-10-28 15:05:54
安踏FILA特步卖不动了:不是三家卖不动,是整条街的客流都拐弯了!

安踏FILA特步卖不动了:不是三家卖不动,是整条街的客流都拐弯了!

城事堂
2026-10-27 07:50:38
烂番茄94%,高斯林科幻片在Apple TV霸榜170天

烂番茄94%,高斯林科幻片在Apple TV霸榜170天

影视情报室
2026-10-28 02:17:57
泽连斯基真签字了!10月26日乌克兰总统签署总统令,批准实施乌国家安全与国防委员会关于加强城市环形防御的决议,防御全面升级!

泽连斯基真签字了!10月26日乌克兰总统签署总统令,批准实施乌国家安全与国防委员会关于加强城市环形防御的决议,防御全面升级!

林杰论事
2026-10-28 12:42:05
iOS“史诗级更新”上热搜!网友:终于解脱了

iOS“史诗级更新”上热搜!网友:终于解脱了

沈阳公交网小林
2026-10-28 02:08:40
姆巴佩争议后球衣二级市场抛售:签名球衣从 9800 降到 1350, 降幅超 86%

姆巴佩争议后球衣二级市场抛售:签名球衣从 9800 降到 1350, 降幅超 86%

小青年渌渌
2026-10-28 16:04:51
女子社交账号收到在巴西的闺蜜留言,称将提前回国让帮忙查机票状态,她意识到不对劲,核对发现:账号末尾多了个隐形符号;该号已被封禁

女子社交账号收到在巴西的闺蜜留言,称将提前回国让帮忙查机票状态,她意识到不对劲,核对发现:账号末尾多了个隐形符号;该号已被封禁

极目新闻
2026-10-28 08:36:26
中国女网后继有人!16岁新金花2-0击败对手晋级,取WTA正赛第三胜

中国女网后继有人!16岁新金花2-0击败对手晋级,取WTA正赛第三胜

里芃芃体育
2026-10-28 21:00:12
印度一档时事节目上,主持人 Meher Smaran 当着观众的面发问,中国凭什么不把锂电池技术白白送给印度?

印度一档时事节目上,主持人 Meher Smaran 当着观众的面发问,中国凭什么不把锂电池技术白白送给印度?

怪味历史连连看
2026-10-22 17:26:13
险资炒股也亏损惨重!中国太保Q3业绩爆雷,净利狂跌68.4%

险资炒股也亏损惨重!中国太保Q3业绩爆雷,净利狂跌68.4%

金石随笔
2026-10-28 23:48:17
西媒:特瓦斯不该率先批评姆巴佩;球员道歉不是迫于压力

西媒:特瓦斯不该率先批评姆巴佩;球员道歉不是迫于压力

懂球帝
2026-10-28 08:58:05
2026-10-29 07:32:49
AI前线 incentive-icons
AI前线
面向AI爱好者、开发者和科学家,提供AI领域技术资讯。
1782文章数 175关注度
往期回顾 全部

科技要闻

宇树科技前三季净利暴增270%

头条要闻

美联储宣布维持利率不变

头条要闻

美联储宣布维持利率不变

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

iPhone Duo七年等来一场吐槽大会

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

健康
数码
本地
教育
公开课

查不出猝死风险?可能是项目没做对

数码要闻

Mac进入触屏时代:苹果铺路软件生态,11月开启在线研讨

本地新闻

十月奔赴迪庆,解锁梅里日照金山

教育要闻

我真的预感这题会考啊啊啊!!!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版