网易首页 > 网易号 > 正文 申请入驻

IROS 2026 特写|因时机器人联合高校开源HandEdit数据集与评测基准

0
分享至

本文将带你走进 IROS 2026 精英晚宴联合主办方——因时机器人,了解因时联合高校构建超 2 亿图像编辑样本的数据集与评测标准 HandEdit。

从人手数据到灵巧手,含超过 2 亿图像编辑样本的数据集 HandEdit 正式开源!值得一提的是,在灵巧手数据采集环节,HandEdit 所使用的灵巧手硬件,来自因时机器人。

9月28日晚,作为 联合主办方之一,因时的技术负责人也将亲临现场,拆解技术路径与前瞻洞见,也与你面对面聊新机会。


报名即将截止,席位有限、欲报从速!

近日,因时机器人联合复旦大学、上海交通大学等高校及科研机构,正式开源HandEdit数据集与评测基准,聚焦第一视角人类到机器人灵巧手图像编辑,为灵巧操作学习提供规模化数据资源与标准化评价依据。

一、从人手数据到灵巧手,操作学习面临“数据适配”难题

抓取、旋转、按压、装配等精细操作,对灵巧手的抓握、感知能力和控制精度提出了更高要求。但与硬件能力快速发展相比,机器人操作数据的积累仍存在明显不足。

传统机器人数据采集往往依赖遥操作、动作捕捉或真实机器人反复执行任务,不仅采集成本高、周期长,而且受到本体结构的限制,不同灵巧手在手指数量、关节结构、尺寸及运动范围等方面存在差异,同一套操作数据也难以直接迁移至不同机器人平台。


另一方面,互联网上已经积累了大量人手操作视频,但由于人手与灵巧手在结构、自由度等方面存在差异,如何将这些人手操作信息有效转化为灵巧手可学习、可执行的数据,成为灵巧操作学习进一步发展的关键问题。

HandEdit针对这一数据适配问题进行探索。

二、2亿级样本覆盖26种构型,让真实操作数据“转译”为机器人数据

HandEdit是研究第一视角人类到机器人灵巧手图像编辑,在保持原始场景和动作意图的基础上,将画面中的人手或手臂替换为指定的机器人构型。围绕这一任务,HandEdit 提供了配对数据、统一评测协议和开源工具,供相关方法训练与比较使用。


这并非简单的“换手”视觉特效,编辑结果既要完整移除原人手,又要保持物体状态、接触关系和背景不变;新生成的机器人还需符合目标 URDF 所规定的结构、材质与关节形态。


因此,HandEdit需要同时处理场景理解、动作保持、机器人构型一致性以及手物交互关系等多个维度。

因时机器人DFX、G2系列灵巧手作为重要的构型,被纳入这一数据转换链路。
在咖啡机操作中,因时DFX系列灵巧手以HandEdit为桥梁,完成了从“人类演示”到“机器人执行”的转化。



HandEdit生成框架可保留原始场景与动作意图,同时将人手轨迹自动映射为DFX灵巧手的原生关节运动。在搅拌机抓取等测试中,DFX根据自身关节限位与参数,实时输出适配的旋转角度、接触位置和手指弯曲姿态,确保每一帧动作均处于目标机器人的物理可达范围内。


目前,HandEdit已构建超过2亿个图像编辑样本,覆盖26种URDF构型,包括13种独立灵巧手和13种手臂一体结构,覆盖600多个场景、1100余种物体和400多类任务,并配套统一评测体系,为机器人操作学习提供了更大规模的数据基础,也为人手操作数据向机器人操作数据的转化提供新的技术路径。

三、因时机器人以真实硬件经验参与数据构建,共建操作学习新路径

作为此次开源的参与方,因时机器人的核心竞争力并非局限于数据集本身,而是植根于对灵巧手硬件的长期深耕。十年专注灵巧操作底层技术,因时已构建起覆盖核心算法、元器件研制、传感器集成到整机量产的全栈自研体系,打破多项技术壁垒,拥有多款成熟产品,在结构构型、驱动控制、传感反馈与抓取模式等方面积淀了深厚的物理经验。


HandEdit 以真实灵巧手URDF为构型约束,将大规模人类操作视频转化为多具身机器人视角数据,并建立统一的人-机器人手部图像编辑评测基准,为人手数据走向机器人学习提供可复用的数据与评价接口。未来,因时机器人将持续聚焦灵巧操作,沿硬件构型定义数据、数据服务算法的方向深耕,为灵巧操作研究与应用提供真正可用的硬件平台。

HandEdit数据集与评测基准已正式开放,面向学术界与产业界研究人员、开发者开放使用。

项目主页:
https://handedit.github.io/

论文全文:
https://arxiv.org/abs/2608.12122

开源代码:
https://github.com/HandEdit/HandEdit

开放数据:
https://huggingface.co/datasets/HandEdit/HandEdit


9月28日晚@美国匹兹堡

「IROS 2026 群星闪耀 精英晚宴」

免费报名,期待线下见面!

北京时间9月25日(周五) 12:00截止报名

-The End-

本周上新!

扫码观看!

“AI技术流”原创投稿计划

TechBeat是由将门创投建立的AI学习社区(www.techbeat.net)。社区上线700+期talk视频,3000+篇技术干货文章,方向覆盖CV/NLP/ML/Robotis等;每月定期举办顶会及其他线上交流活动,不定期举办技术人线下聚会交流活动。我们正在努力成为AI人才喜爱的高质量、知识型交流平台,希望为AI人才打造更专业的服务和体验,加速并陪伴其成长。

投稿内容

// 最新技术解读/系统性知识分享 //

// 前沿资讯解说/心得经历讲述 //

投稿须知

稿件需要为原创文章,并标明作者信息。

我们会选择部分在深度技术解析及科研心得方向,对用户启发更大的文章,做原创性内容奖励

投稿方式

发送邮件到

yimingzhang@thejiangmen.com

或添加工作人员微信(aceyiming)投稿,沟通投稿详情

关于我“门”

将门是一家以专注于数智核心科技领域的新型创投机构,也是北京市标杆型孵化器。 公司致力于通过连接技术与商业,发掘和培育具有全球影响力的科技创新企业,推动企业创新发展与产业升级。

将门成立于2015年底,创始团队由微软创投在中国的创始团队原班人马构建而成,曾为微软优选和深度孵化了126家创新的技术型创业公司。

如果您是技术领域的初创企业,不仅想获得投资,还希望获得一系列持续性、有价值的投后服务,欢迎发送或者推荐项目给我“门”:

bp@thejiangmen.com


点击右上角,把文章分享到朋友圈

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
云南5天连创11月全国最高温,活久见:不排除在副高内部降雪! 热到37.3度!云南11月连创5天全国最热后,立冬后或直接下雪

云南5天连创11月全国最高温,活久见:不排除在副高内部降雪! 热到37.3度!云南11月连创5天全国最热后,立冬后或直接下雪

风云圈天气
2026-11-09 23:41:24
天气渐冷!心内科主任苦劝:吃氨氯地平,冬天尽量少做这8件事

天气渐冷!心内科主任苦劝:吃氨氯地平,冬天尽量少做这8件事

高中医健康说
2026-11-09 21:40:05
在蒙古工作的华人感慨:不要听媒体吹牛,蒙古相当于我国二线城市

在蒙古工作的华人感慨:不要听媒体吹牛,蒙古相当于我国二线城市

铭记历史呀
2026-11-08 20:11:00
广东省纪委监委驻省农业农村厅纪检监察组原一级调研员温清华严重违纪违法被开除党籍

广东省纪委监委驻省农业农村厅纪检监察组原一级调研员温清华严重违纪违法被开除党籍

环球网资讯
2026-11-09 18:49:12
曼晚:曼联选帅受阻,三名潜在新帅均拒绝执教邀约

曼晚:曼联选帅受阻,三名潜在新帅均拒绝执教邀约

懂球帝
2026-11-10 01:04:24
二级警卫26人、食物专供不能随便吃:王亚平到底有多重要?

二级警卫26人、食物专供不能随便吃:王亚平到底有多重要?

墨策史
2026-11-05 18:36:24
广州同学聚会吃了16万6,请客的人付完钱先走,剩下的人却翻脸了

广州同学聚会吃了16万6,请客的人付完钱先走,剩下的人却翻脸了

诡谲怪谈
2025-06-09 08:45:42
夺冠仅1天,央视4次“点名”大连英博,范志毅的话终于有人信了

夺冠仅1天,央视4次“点名”大连英博,范志毅的话终于有人信了

观察鉴娱
2026-11-10 09:55:56
今年退休养老金开始补差,有人补904、有人仅154,差距源于这4点

今年退休养老金开始补差,有人补904、有人仅154,差距源于这4点

明天后天大后天
2026-11-09 12:13:13
藏南民众开始团结起来,拒绝跟印度当局谈判,局势正在悄然改写

藏南民众开始团结起来,拒绝跟印度当局谈判,局势正在悄然改写

面包夹知识
2026-11-09 15:28:21
徽剑案曝出胆寒细节:主犯是个98年无业青年,却请得起出场费几十万的顶尖律师

徽剑案曝出胆寒细节:主犯是个98年无业青年,却请得起出场费几十万的顶尖律师

小徐讲八卦
2026-11-01 15:54:44
荣威家越07正式上市:豆包座舱助手+家用大五座SUV,11.98万元起

荣威家越07正式上市:豆包座舱助手+家用大五座SUV,11.98万元起

且听Phone吟
2026-10-23 19:18:11
青岛楼市开始离谱了!黄岛区金沙滩板块从2.8万变成1.4万

青岛楼市开始离谱了!黄岛区金沙滩板块从2.8万变成1.4万

说故事的阿袭
2026-11-10 00:34:57
风向突变,以德为首的西方国家发声:中国早已在换电关键领域崛起

风向突变,以德为首的西方国家发声:中国早已在换电关键领域崛起

壹知眠羊
2026-11-04 07:11:38
告诉你一个心理学秘密:千万不要提前焦虑,事情会以奇特方式解决

告诉你一个心理学秘密:千万不要提前焦虑,事情会以奇特方式解决

松果正念袁老师
2025-03-11 20:52:18
媒体曝光全是假货!利润高达2400%,消费者还抢着购买,为什么?

媒体曝光全是假货!利润高达2400%,消费者还抢着购买,为什么?

侃故事的阿庆
2026-11-10 06:59:44
国际乒联最新世界排名公布:男单松岛辉空、张本智和包揽前二,王楚钦位列第四,林诗栋位列第十;王曼昱、孙颖莎位列女单前二

国际乒联最新世界排名公布:男单松岛辉空、张本智和包揽前二,王楚钦位列第四,林诗栋位列第十;王曼昱、孙颖莎位列女单前二

台州交通广播
2026-11-09 19:35:26
彻底露馅!库明加上限已定,大合同没戏,终究撑不起NBA主力身价

彻底露馅!库明加上限已定,大合同没戏,终究撑不起NBA主力身价

畅评篮球
2026-11-09 14:06:48
波兰枪手穿防弹衣、持自动步枪扫射人群,致6死15伤

波兰枪手穿防弹衣、持自动步枪扫射人群,致6死15伤

观察者网
2026-11-08 07:37:27
以色列游客趁导游喝水推其入海,哈哈大笑引不满后称“我们都是好孩子,不应该遭受这样的仇恨”

以色列游客趁导游喝水推其入海,哈哈大笑引不满后称“我们都是好孩子,不应该遭受这样的仇恨”

扬子晚报
2026-11-10 07:37:15
2026-11-10 10:43:00
将门创投 incentive-icons
将门创投
加速及投资技术驱动型初创企业
2538文章数 597关注度
往期回顾 全部

科技要闻

黄仁勋承认出轨:伤害了妻儿,毫无借口

头条要闻

牛弹琴:果然是一场闹剧 这个世界就没有特朗普做不到

头条要闻

牛弹琴:果然是一场闹剧 这个世界就没有特朗普做不到

体育要闻

大连足球这些年的起落,都从他身边经过

娱乐要闻

黄仁勋与黄乐合照曝光,吃饭氛围暧昧

财经要闻

72岁王健林重回“一号位”

汽车要闻

限时权益价8.88万 吉利星愿STAR限定系列发布

态度原创

教育
家居
游戏
本地
健康

教育要闻

中俄教育年独家专访|远东联邦大学副校长详解赴俄留学新趋势

家居要闻

2026建博会(广州) 公装联探展交流活动

《暗喻幻想》官宣要有新消息!玩家:苦等两年的DLC?

本地新闻

乌兰察布:以前种土豆,现在种Token

痘痘长到25岁还没完?查查内分泌

无障碍浏览 进入关怀版