网易首页 > 网易号 > 正文 申请入驻

GPT-6 Astra上真机,RoboChallenge这次跑出了新东西

0
分享至


两项任务成功率达100%。

作者 | 周加琦

编辑 | 漠影

VLA一直是具身智能领域主流的技术路线之一。

它的逻辑是:给模型输入图像、语言指令,再利用大规模机器人示范数据训练模型直接预测动作。随着机器人数据规模的扩大,VLA可以完成抓取、整理等复杂的真实操作任务。

同时,通用大模型在多模态理解、空间推理和复杂任务规划能力的也在持续提升,一个新的问题随之出现:如果利用它这些已有能力,不用VLA模型,能不能参与并完成机器人的真实操作?

近日,原力灵机做了一次这样的实验。

该团队将GPT-6 Astra接入真机评测平台RoboChallenge Table30 V2,在Aloha、DOS-W1、ARX5和UR5四种机器人本体上分别测试四项真实操作任务。

从最终结果来看,四项任务中,GPT-6 Astra有两项成功率达到100%。

在真实执行的过程中,通用大模型不只是单纯地“输出动作”,而是会试探环境、理解操作结果、发现异常并修正。


01.

从屏幕走向真机,

原力灵机搭建真实评测闭环

验证通用大模型能不能真正参与机器人操作,光看模型在视觉理解、空间推理等Benchmark上的成绩不够。

机器人一旦进入真实环境,面对的不只是“看懂一张图”、“规划一个任务”。相机视角会变,目标可能被遮挡,抓取可能失败。所以,模型不仅要知道下一步该如何做,还要根据真实执行结果不断重新判断当前状态。

因此,原力灵机团队选择直接上真机测试。

此次测试使用的是RoboChallenge中的Table30 V2真机Benchmark。RoboChallenge由原力灵机联合Hugging Face发起,希望通过统一的真实机器人环境,对不同模型的操作能力进行测试。

Table30 V2共包含30个真实世界操作任务,覆盖双臂DOS-W1、Aloha和单臂ARX5、UR5四种机型,涉及物体整理、装箱、工具使用和双臂协作等任务。

与仿真环境测试不同,RoboChallenge让参评模型直接连接真实机器人。测试中,平台通过远程API与用户部署的模型推理服务交互,模型持续获取机器人图像和状态,生成动作并下发执行。

一次动作执行结束后,模型还会重新获取机器人图像和状态,并据此决定下一步如何操作。这样,模型面对的不是固定的输入,而是一个会因为自身动作不断变化的真实物理环境。

该团队在四种机器人本体上各选择了一项任务。其中Aloha完成“盖章定位”,需要一只机械臂固定纸张,另一只机械臂拿起印章、蘸取印泥并完成盖章;DOS-W1执行“叠碗”,按顺序将不同颜色的碗套叠起来。

ARX5完成“寻找绿块”,需要从场景中找到两个绿色方块,并依次放入指定篮子;UR5则操作“碎纸”,抓取纸张并送入碎纸机完成碎纸。四项任务分别涉及双臂协作、物体关系判断、目标搜索和工具使用等不同操作能力。


每项任务进行10次真机Rollout,按照平台记录的状态和步骤分,统计最终成功率与得分。

02.

四项真机测试,两项任务成功率达100%

四项任务中,GPT-6 Astra在“叠碗”和“寻找绿块”任务中的成功率均达到100%,“盖章定位”和“碎纸”任务成功率分别为80%、70%。

在RoboChallenge Table30 V2公开运行记录中,后两个任务的最高成功率均为50%,而GPT-6 Astra在这两项任务上的成功率分别高出30%和20%。


不过,成功率并不等于执行过程更优。GPT-6 Astra在“叠碗”、“寻找绿块”和“碎纸”上的得分均低于对应公开最高分。例如碎纸任务中,机器人虽然最终完成任务,但部分执行曾误夹起支架并因此被扣分;叠碗过程中也出现过多次重试。

当然,这也反映出GPT-6 Astra并不是“一次做对”,而是依靠持续观察和调整,把已经出现偏差的任务继续做完。

03.

不只执行动作,

GPT-6 Astra还会根据结果动态调整

首先,GPT-6 Astra会通过实际动作不断补全对空间关系的理解。

在UR5碎纸任务中,该团队并没有向GPT-6 Astra提供显式的相机标定信息。模型一开始并不知道机械臂沿某个方向移动后,在不同相机画面中会产生怎样的变化。

实际执行时,Astra会先做几个小幅试探动作,再对比动作前后的图像变化,逐步判断机械臂的运动方向,以及夹爪与目标之间的相对位置。也就是说,它不是依赖预先给定的空间映射,而是在操作过程中,通过“动作—观察—再判断”建立局部的视觉与运动对应关系。


除了补全空间关系,Astra也会根据场景变化调整原来的操作顺序。

在“寻找绿块”任务中,当绿色目标受到其他方块遮挡时,模型不会持续重复原来的抓取动作,而是先处理遮挡物。测试中,Astra会先夹走紫方块,等第二个绿色方块暴露后,再调整夹爪位置,重新接近目标。


当动作本身出现偏差时,模型还会根据新的结果进行调整。

同样是在“寻找绿块”任务中,Astra一次抬起夹爪后发现绿色方块仍留在桌面,说明此前抓取并未成功。随后,模型重新张开夹爪、降低抓取位置并再次对准,直到确认方块已经离开桌面,再将其放入篮中。

UR5碎纸任务中也出现了类似情况。由于缺少侧面视角,机器人有时会把纸张下方的支架一起夹起。Astra在重新观察画面后识别出这一偏差,随后放下支架、重新调整位置,再次抓取纸张。


在双臂任务中,Astra还会借助参考信息组织多步骤动作,同时处理示例之外的变化。

原力灵机团队发现,在完全不提供示例的情况下,双臂任务对Astra较为困难,因此在“盖章”和“叠碗”任务中加入了RoboChallenge提供的参考轨迹作为上下文。

这些参考轨迹主要帮助模型理解两只机械臂如何分工、什么时候交替操作。但真实执行中仍会出现参考轨迹之外的情况。例如盖章过程中,印章可能意外脱离夹爪,Astra需要重新抓取;叠碗时,模型也需要在保留已有堆叠结果的情况下,重新尝试后续操作。



参考轨迹更像是在给模型一个任务组织框架,面对实际执行中的新情况,Astra仍然需要根据当前状态继续调整。

综合来看,GPT-6 Astra此次在真机上的特点主要体现在可持续判断当前状态,并根据执行结果调整下一步。

相比VLA模型,这次测试中的通用大模型更多承担了任务理解、状态判断和异常处理的角色。不过,在操作效率、稳定性和动作精度上,它仍有明显提升空间。

04.

结语:通用大模型

正在降低机器人智能的门槛

过去,机器人要获得复杂任务理解和决策能力,往往需要围绕特定本体、特定任务持续积累数据并训练策略。通用大模型的发展,则提供了另一种路径:部分更高层的理解和决策能力,可以直接从通用模型中获得。

这意味着,具身智能系统不必从零开始构建所有能力。随着通用模型能力继续增强,机器人模型可以把更多精力放在精确控制、稳定执行和效率优化上。

对行业来说,这可能会降低机器人获得更高阶智能能力的门槛,也让更多本体和应用能够站在通用模型提供的基础能力之上继续开发。

原力灵机这次测试提供了一个真机层面的验证:通用大模型正在从“会理解”进一步走向“能参与操作”,具身智能的技术边界也有了新的拓展空间。



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美联储宣布维持利率不变;纳指收涨0.27%,甲骨文涨超10%,海力士涨超13%丨每经整点

美联储宣布维持利率不变;纳指收涨0.27%,甲骨文涨超10%,海力士涨超13%丨每经整点

每日经济新闻
2026-10-29 05:58:06
《伟大的长征》钱壮飞掉队那段,越想越可惜:一个拆过六封绝密电报的人,最后居然被一匹骡子要了命

《伟大的长征》钱壮飞掉队那段,越想越可惜:一个拆过六封绝密电报的人,最后居然被一匹骡子要了命

磊子讲史
2026-10-28 15:24:26
芬奇:得知爱德华兹受伤时所有人都有些震惊 已讨论了应对之策

芬奇:得知爱德华兹受伤时所有人都有些震惊 已讨论了应对之策

北青网-北京青年报
2026-10-29 07:56:02
虽说阿姨有30多岁了,但是这样打扮一下反而比年轻的女生更有魅力

虽说阿姨有30多岁了,但是这样打扮一下反而比年轻的女生更有魅力

美女穿搭分享
2026-09-06 09:40:17
轰40+压哨绝杀!场均28+8,布朗被交易不冤,在绿军乔治比他更强

轰40+压哨绝杀!场均28+8,布朗被交易不冤,在绿军乔治比他更强

你的篮球频道
2026-10-28 11:20:21
10月28日,大家期盼已久的2026退休养老金,究竟涨还是不涨?

10月28日,大家期盼已久的2026退休养老金,究竟涨还是不涨?

青梅侃史啊
2026-10-28 16:51:36
央媒发文,官宣张雪新身份,移民跑路、资产转移海外传闻早有真相

央媒发文,官宣张雪新身份,移民跑路、资产转移海外传闻早有真相

秋枫凋零
2026-10-28 14:05:46
西班牙高铁相撞事故最新进展:已致64人遇难,前车故障滞留,后车调度失误追尾,西班牙王室“悲痛担忧”

西班牙高铁相撞事故最新进展:已致64人遇难,前车故障滞留,后车调度失误追尾,西班牙王室“悲痛担忧”

台州交通广播
2026-10-29 01:49:27
孙俪晒出家常晚餐,全网沉默了。你敢信吗?孙俪家的晚饭就是桌上这几盘菜,有人说明星这是作秀,有人说这才是真会过日子。

孙俪晒出家常晚餐,全网沉默了。你敢信吗?孙俪家的晚饭就是桌上这几盘菜,有人说明星这是作秀,有人说这才是真会过日子。

LULU生活家
2026-10-27 17:44:26
一场2-0,诞生2粒乌龙球,意甲榜首易主,竞争白热化:前2积分相同

一场2-0,诞生2粒乌龙球,意甲榜首易主,竞争白热化:前2积分相同

足球狗说
2026-10-29 07:03:42
过期一天就是毒?很多家庭天天在用,却舍不得扔

过期一天就是毒?很多家庭天天在用,却舍不得扔

三农老历
2026-10-29 03:30:19
男子海外服兵役,妻子与3人发生不正当关系,还给同事生女让丈夫养了3年,法院判了!

男子海外服兵役,妻子与3人发生不正当关系,还给同事生女让丈夫养了3年,法院判了!

一丝不苟的法律人
2026-10-28 10:25:17
金·卡戴珊拉四姐妹拍内衣广告,节日系列10月29日上线

金·卡戴珊拉四姐妹拍内衣广告,节日系列10月29日上线

娱圈观察员
2026-10-29 03:23:30
山口百惠,该出手了

山口百惠,该出手了

我来我看见
2026-10-28 20:57:33
三星新广告把苹果切碎,还甩出1.6毫米和53克

三星新广告把苹果切碎,还甩出1.6毫米和53克

野生运营
2026-10-26 19:32:02
一次交付23架运20B?德专家没想到,美媒:全球最强预警机已量产

一次交付23架运20B?德专家没想到,美媒:全球最强预警机已量产

影孖看世界
2026-10-27 23:30:08
难怪电诈灭不完!要不是高官透内幕,咱还被蒙鼓里,最后还得吃亏

难怪电诈灭不完!要不是高官透内幕,咱还被蒙鼓里,最后还得吃亏

白米饭怎么吃
2026-08-07 21:41:18
“女人的路就是被你这种人走窄的!”宝妈发复工视频,把自私自利体现得淋漓尽致

“女人的路就是被你这种人走窄的!”宝妈发复工视频,把自私自利体现得淋漓尽致

蝴蝶花雨话教育
2026-10-27 00:05:14
陕北8万红军,4.5万人改编八路军,另外3.5万人毛主席的安排真妙

陕北8万红军,4.5万人改编八路军,另外3.5万人毛主席的安排真妙

纪史行者
2026-08-22 01:15:05
真的很贵!全新触摸屏 MacBook Pro 正式发布

真的很贵!全新触摸屏 MacBook Pro 正式发布

花果科技
2026-10-29 06:47:40
2026-10-29 08:32:49
机器人前瞻
机器人前瞻
智东西AI媒体矩阵品牌。机器人前瞻,机器人产业新媒体,专注报道全球机器人创新。
1014文章数 20关注度
往期回顾 全部

科技要闻

苹果MacBook Pro重大改版:首次搭载触控屏

头条要闻

39岁中国籍老板泰国遭袭身亡 发工资与两对夫妻起冲突

头条要闻

39岁中国籍老板泰国遭袭身亡 发工资与两对夫妻起冲突

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

美联储12月政策路径再添悬念

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

亲子
本地
健康
教育
公开课

亲子要闻

13岁长到1米95,全网都在求食谱,我想劝大家先冷静

本地新闻

十月奔赴迪庆,解锁梅里日照金山

查不出猝死风险?可能是项目没做对

教育要闻

中考数学,y÷y=2,很多人丢分

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版