网易首页 > 网易号 > 正文 申请入驻

当数采设备不再稀缺,具身数据下一步拼什么?

0
分享至


作者 | 姚戈

最近一年,具身智能行业里的数据采集设备明显多了起来。入局者众多,很容易让人产生一种印象,数采硬件已经没有多少技术含量,做出一套设备似乎并不难。

但过去一年,我们采访了不少具身智能数据公司。一个越来越明显的感受是,行业已经不太缺“快速、大量采数据”的方案,真正稀缺的是能够稳定进入模型训练,并最终带来模型能力提升的数据。

数采设备越来越多,并不意味着高质量的第一视角数据已经变得容易获得。事实上,我们听到过不少因为数据质量问题拖慢甚至影响模型训练的案例。

最近,开源数据集 Xperience-10M 背后的 Physical AI 数据基础设施公司 Ropedia,发布了新一代第一视角多模态采集设备 HOMIE Gen2。

在 HOMIE Gen2 发布之前,Ropedia 的上一代设备已经被用于生产 Xperience-10M。这套数据集开源后,又陆续进入 Qwen、Ai2 等团队的模型训练。

据 AI 前线了解,从第一台原型机到今天的 HOMIE Gen2,Ropedia 的采集设备在约十二个月里迭代了四代。2025 年 6 月,团队用 3D 打印结构件搭出第一台第一视角采集原型机“竹蜻蜓”;同年 10 月,第二代 R-Ego 改进了相机布局与头戴结构,并完成第一笔硬件销售;2026 年 1 月,HOMIE Gen1 走向产品化,支撑了 Xperience-10M 的生产;到了 HOMIE Gen2,团队开始进一步解决规模化部署的问题。

一家已经把数据送进模型训练的公司,会怎么重新设计一台数采设备?

这和 Ropedia 创始团队过去的经历有关。首席科学家刘子纬是南洋理工大学副教授,长期从事计算机视觉研究,研究方向从大规模视觉数据、长尾学习逐渐延伸到 3D 视觉和空间智能;CEO 陈昭熹和 CTO 洪方舟均为清华本科、南洋理工大学博士,之后进入 Meta,前者参与过光学动作捕捉数据体系建设,后者从事第一人称多模态智能研究。

这些经历让 Ropedia 很早就确定了一种思路:从模型训练需要什么数据,反过来决定设备应该采什么、采到什么精度,以及采集之后如何处理。设备能采多少数据只是其中一环,数据最终能不能被模型有效利用,同样会影响前端的硬件设计。


HOMIE Gen1 已经证明第一视角数据可以规模化采集,HOMIE Gen2 又往前走了一步。Ropedia 希望把真实世界中的人类活动更完整、更准确地记录下来,同时降低大规模生产这类数据的成本。

HOMIE Gen2,解决四个数采问题

采集视野扩大到 360° 空间

传统第一视角采集主要记录佩戴者前方发生的事情,但真实的物理任务并不只发生在正前方。人的侧面和背后,周围的物体和其他人,都可能影响一个动作的发生。

HOMIE Gen2 使用 4 目全景相机实现 360° 视野覆盖,同时加入 4 路空间音频。这样记录下来的信息可以覆盖佩戴者周围的环境,以及人与物体、环境之间的交互过程。

对于具身模型来说,这些上下文很重要。模型需要学习一个动作,也需要理解动作发生时周围有什么、人在和什么交互,以及环境随后发生了什么变化。扩大采集范围,本质上是在尽量减少真实世界信息在采集环节的损失。

对齐多种传感器

现在的数采设备普遍会使用多种传感器,真正困难的是让它们准确记录同一个物理时刻。

人在快速伸手、转头或者移动时,即便只有很小的时间偏差,也可能造成视觉画面和运动信息错位。单独看每一路数据可能都没有问题,组合起来却描述了几个不同时刻的状态。

HOMIE Gen2 将 4 路视频、4 声道空间音频和 200Hz 6DoF IMU 做了硬件级同步,多传感器之间的时间同步精度达到 50 微秒。

对模型训练来说,同步精度直接影响数据是否可靠。视觉、声音和运动信息只有在时间轴上准确对应,后续的空间理解和动作学习才有一致的数据基础。

开箱即用的 Xperience 数据

硬件完成采集之后,还有大量数据处理工作。

HOMIE Gen2 采集到的原始信号经过处理,会进一步形成结构化的Xperience 数据,包括校正后的双目视频、深度图、相机位姿、手部 21 关键点、全身 52 关键点,以及任务、子任务、当前动作三层文本标注。此外还可以输出 3D 高斯、场景网格、物体检测和 4D 物体跟踪等信息。


Ropedia 还公布了一组基于 HOMIE Gen2 金标准样本集的测试结果。空间定位平均绝对误差约为千分之二,深度范围误差低于 2.5%,手部 21 关键点动捕平均误差为 4.68 mm,动作语义标注准确率达到 96.0%。

这些能力最终指向一个很实际的问题。模型公司购买数据之后,如果还需要投入大量人力完成同步、校准、动作恢复和标注,采集环节节省下来的成本,很可能又会转移到数据处理环节。

Ropedia 因此希望把处理过程继续向前延伸,让客户拿到的数据能够更快进入模型训练。HOMIE 负责记录真实世界,后面的数据处理系统则负责把这些记录加工成模型能够使用的数据。

支撑真实场景规模化部署

高质量数据还要解决规模问题。

真实世界采集往往需要设备连续工作数小时,并进入家庭、工厂、商场等不同环境。设备重量、续航、存储和部署复杂度,最终都会影响数据生产的效率和成本。

HOMIE Gen2 整机约 380g,支持约 13 小时连续采集,无需提前在环境中布置外部设备;同时支持离线采集,本地 microSD 存储最高 2TB,并配有外接供电和数据接口。

据 Ropedia 介绍,HOMIE Gen2 从 CMOS、PCB 到结构件均为自研,目前具备约万台规模的产能。相比上一代方案,部署速度提升约 10 倍,采集成本降至约 1/12.5。多台设备也可以同时作业,让不同人员在同一环境中完成采集。

规模化还有另一层要求。设备数量增加之后,团队需要统一管理设备状态、采集任务和数据质量。HOMIE Gen2 因此加入了设备管理和数据采集系统,可以进行设备状态管理、远程升级和采集任务分发。

如果这些能力能够在实际交付中稳定兑现,HOMIE Gen2 就有机会把第一视角数据采集从少量设备完成的项目,变成可以批量部署的数据生产方式。

数据的竞争,正在换赛道

具身智能行业已经积累了越来越多数据,但模型真正缺的,仍然是来自真实世界、上下文完整、质量稳定,并且能够直接用于训练的人类经验数据。

这也让数据竞争的标准发生了变化。采集多少小时当然重要,但模型最终能不能用这些数据,正在成为更关键的指标。前面提到的多传感器同步、数据结构化和规模化部署,最终都要回到模型训练的效果上。

Ropedia 联合创始人兼首席科学家、南洋理工大学副教授刘子纬曾说:“如果经验是稀缺资源,那么就必须有人把它工业化。”

Ropedia 想做的,就是把人类经验变成一种可以持续生产的数据资源。

今年 3 月发布的 Xperience-10M 已经验证了这条路径。它包含约 1000 万个真实世界交互片段、1 万小时带音频的第一视角视频、28.8 亿个 RGB 帧和 5.76 亿个动作捕捉帧,总规模接近 1PB。此后,这套数据进入了 Ai2、Qwen 等团队的模型训练。

对一家数据公司来说,这可能比单纯的硬件参数更有说服力。数据采出来之后有没有人用,用完之后能不能帮助模型训练,最终决定了这些数据的价值。

目前,Ropedia 希望把这套数据生产能力继续用到机器人和 VLA 训练、世界模型、人机交互等方向,也可以针对具体的机器人任务进行定制化采集。HOMIE Gen2 则负责把这套能力进一步推向更多真实场景。

HOMIE Gen2 之后,Ropedia 想做什么?

Ropedia CEO 陈昭熹曾表示:“Ropedia 绝不只是一家数据采集公司,数据采集只是第一步。”

HOMIE Gen2 是这条路线的产品化入口。过去一年,Ropedia 已经通过 Xperience-10M 验证了从第一视角采集到模型训练的数据链路。现在,它希望通过 HOMIE Gen2 把这套能力进一步扩大,进入更多场景和更大规模的数据生产。

数采设备还会继续增加,硬件方案也可能越来越接近。但对数据的理解没有那么容易复制。

Ropedia 三位创始人过去的工作都长期与数据和模型打交道。刘子纬长期从事计算机视觉研究,从大规模视觉数据、长尾学习到 3D 视觉和空间智能,一直在研究数据与模型能力之间的关系;陈昭熹曾在 Meta 参与光学动作捕捉数据体系建设,洪方舟也曾在 Meta 从事第一人称多模态智能研究。

这些经历也影响了 Ropedia 做数采设备的思路。什么数据值得采,误差应该控制到什么程度,数据进入训练之后如何影响模型,再根据模型反馈调整下一轮数据生产,都需要对数据和模型有足够深入的理解。

按照 Ropedia 的规划,未来三到五年,公司希望进一步覆盖数据、硬件、基础设施与模型,成为一家机器人学习基础设施公司。这也对应着它对产品演进的三个阶段:

  • Gen 1,数据采集:多传感器、第一视角的原始数据采集;

  • Gen 2,经验采集:360° 完整上下文、硬件级同步、结构化 Xperience、可直接用于训练的数据;

  • 下一阶段,规模化智能:体验数据集、体验平台、体验基础设施。


这条路还很长。HOMIE Gen2 目前解决的,是其中最靠前、也很基础的一环:把真实世界里的人类活动,更准确、更完整地记录下来,再转化成模型能够使用的数据。

数采设备越来越多之后,真正拉开差距的,最终还是对智能的理解。

会议推荐

QCon 全球软件开发大会·2026(上海站)现已正式启动。本届大会聚焦 Harness AI 时代的工程实践,从「构建 AI」到「驾驭 AI」,围绕 AI Native 架构、Agent Runtime、AI Infra、Agent 安全与可观测、Loop Engineering、具身智能与世界模型等热门技术方向,邀请全球技术社区与产业一线实践者,共同分享 AI Native 时代最具价值的工程经验。

今日荐文


你也「在看」吗?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
证监会:全力维护资本市场平稳运行 加快推进实施新一轮资本市场改革开放,加强新型业务监管和风险防控

证监会:全力维护资本市场平稳运行 加快推进实施新一轮资本市场改革开放,加强新型业务监管和风险防控

证券时报
2026-09-11 07:06:08
余嘉豪晒亚运会住宿照,集装箱房间!球迷:和在工地住没区别

余嘉豪晒亚运会住宿照,集装箱房间!球迷:和在工地住没区别

体育哲人
2026-09-10 19:10:40
火力全开,几度哽咽,扎哈罗娃五分钟怒斥日本:“你们不应该跪下来道歉吗”,屠杀中国、苏联平民时,戴的不正是菊花纹章吗

火力全开,几度哽咽,扎哈罗娃五分钟怒斥日本:“你们不应该跪下来道歉吗”,屠杀中国、苏联平民时,戴的不正是菊花纹章吗

第一财经资讯
2026-09-10 14:22:34
注意了!9月30日起零钱通不能微信付款,你的钱还能正常用吗?

注意了!9月30日起零钱通不能微信付款,你的钱还能正常用吗?

一些小事
2026-09-09 06:23:03
黄晓明说“我帮了太多白眼狼”,“黄晓明在内涵谁”登上热搜

黄晓明说“我帮了太多白眼狼”,“黄晓明在内涵谁”登上热搜

韩小娱
2026-09-11 06:56:59
10万起!广汽新车官宣:9月15日,正式上市

10万起!广汽新车官宣:9月15日,正式上市

科技堡垒
2026-09-10 09:49:03
耐人寻味!一段车间裸奔视频全网发酵,瑞浦兰钧风波,远不止网传那般简单

耐人寻味!一段车间裸奔视频全网发酵,瑞浦兰钧风波,远不止网传那般简单

火山詩话
2026-09-11 05:50:16
交棒给民进党陈素月?国民党籍彰化县长王惠美仅回:做对的事

交棒给民进党陈素月?国民党籍彰化县长王惠美仅回:做对的事

金牛传声
2026-09-11 16:06:13
纪录片《马斯克》在威尼斯电影节首映,片中前女友自曝为其诞下第13个孩子后被出价4000万美元签保密协议;马斯克曾吐槽这是抹黑自己的烂片

纪录片《马斯克》在威尼斯电影节首映,片中前女友自曝为其诞下第13个孩子后被出价4000万美元签保密协议;马斯克曾吐槽这是抹黑自己的烂片

都市快报橙柿互动
2026-09-09 15:04:07
“至今很后怕!赶不走打不得,大家都不敢动了……”浙江姑娘雨后爬山,遭遇剧毒烙铁头、眼镜蛇

“至今很后怕!赶不走打不得,大家都不敢动了……”浙江姑娘雨后爬山,遭遇剧毒烙铁头、眼镜蛇

都市快报橙柿互动
2026-09-11 01:10:42
李凯尔正式表态:想代表中国男篮再次出战世界杯 不满意上届表现

李凯尔正式表态:想代表中国男篮再次出战世界杯 不满意上届表现

醉卧浮生
2026-09-11 12:09:14
人民日报:每天一根香蕉,可降低心脏病风险!想吃出效果?肠道菌群或是关键

人民日报:每天一根香蕉,可降低心脏病风险!想吃出效果?肠道菌群或是关键

肠菌科普
2026-09-08 07:04:42
通知:今晚(9月11日24时)油价或大涨,汽柴油“连涨超6毛/升”,油价大涨到“9元时代”,赶紧加油!

通知:今晚(9月11日24时)油价或大涨,汽柴油“连涨超6毛/升”,油价大涨到“9元时代”,赶紧加油!

油价早知道
2026-09-11 10:45:59
星空体育:东契奇公开怒怼联盟:没詹姆斯湖人就不配打揭幕战?

星空体育:东契奇公开怒怼联盟:没詹姆斯湖人就不配打揭幕战?

小椰的影视宝库
2026-09-11 14:51:55
大反转!称女大学生因用新款苹果手机停止资助后被催捐的当事人被证实“教育系统查无此人”

大反转!称女大学生因用新款苹果手机停止资助后被催捐的当事人被证实“教育系统查无此人”

Mr王的饭后茶
2026-09-11 00:23:18
注意!商业地产到期需补缴巨款!

注意!商业地产到期需补缴巨款!

樱桃大房子
2026-09-09 12:12:20
现实版多尔衮悲剧!东莞一男子供养女友3个孩子多年,最终惨遭枕边人杀害分尸,评论区炸锅

现实版多尔衮悲剧!东莞一男子供养女友3个孩子多年,最终惨遭枕边人杀害分尸,评论区炸锅

火山詩话
2026-09-10 06:44:55
第二个菲律宾出现?主动邀请美国重启军演,中方近70年友谊喂了狗

第二个菲律宾出现?主动邀请美国重启军演,中方近70年友谊喂了狗

真的好爱你
2026-09-10 18:48:38
央企行贿7610万美金,总统只分到101.17万……

央企行贿7610万美金,总统只分到101.17万……

家传编辑部
2026-09-06 21:28:20
港媒:资深艺人“鬼王”雷宇扬因胃癌病逝,终年62岁

港媒:资深艺人“鬼王”雷宇扬因胃癌病逝,终年62岁

台州交通广播
2026-09-11 16:15:04
2026-09-11 17:55:00
AI前线 incentive-icons
AI前线
面向AI爱好者、开发者和科学家,提供AI领域技术资讯。
1727文章数 170关注度
往期回顾 全部

科技要闻

苹果折叠屏比小米华为贵5000元,该怎么选

头条要闻

3名俄男子被乌女特工"招募" 女方发送自己的火辣照片

头条要闻

3名俄男子被乌女特工"招募" 女方发送自己的火辣照片

体育要闻

37岁还能场场进球,还能翻跟头!

娱乐要闻

黄晓明直言帮太多白眼狼,杨颖遭殃

财经要闻

千叶珠宝创始人夫妇失联 股价应声"腰斩"

汽车要闻

买菜车也有小乐趣 风云T7不止是台合格家用SUV

态度原创

房产
手机
本地
时尚
公开课

房产要闻

时隔7年,绿地海南再拿地!

手机要闻

网友调侃iPhone 18系列发布:iPhone都已成年了 我还在用正太苹果

本地新闻

拼假 13 天国内长线路线合集

女人不管三十还是四十,衣服都可以多穿白色,清爽百搭又减龄

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版