网易首页 > 网易号 > 正文 申请入驻

阿里通义开源OpenGCUA:弱模型涨35.2分

0
分享至

阿里通义 MAI-UI 团队开源了 OpenGCUA,把 GUI 智能体升级成能综合调度全机接口的通用智能体。OSWorld-v2 评测里,平均 partial score 提升 19.6 分。


先看它到底改了什么。传统 CUA 基本等同于 GUI 智能体:看截图、点按钮。GCUA 的定义是「模型自主决定如何观察、行动并组织工作,跨越视觉与程序化接口的系统」。

也就是说,无障碍树、应用 API、shell 命令、GUI 操作,都在它的调度范围内。每一步由模型做三个决策:观察什么、如何行动、如何组织工作。

两大支柱设计撑起了这套机制。一是代码执行,复用模型已有的编程能力,实现循环内高效迭代;二是 harness 到模型的决策转移。

代码执行具体怎么跑?模型输出带循环和条件判断的 Python 程序,GUI 操作、API 调用、shell 命令统一编排。循环内的中间结果直接决定下一步代码走向,无需每步都回模型。

效率账很直观:代码执行比 GUI+CLI 混合再高 6.1 分,步数再降 14.8%。文章里那句话说得挺到位——「截图」本身就是一种有成本的感知行为,该省则省。

最值得留意的是受益者分布。GLM-5.3-Flash 提升 35.2 分,是涨得最多的;强弱模型差距从 39.1 缩小到 18.0。弱模型从代码执行范式里受益最大,这暗示该范式降低了对精细操作精度的依赖。

对开源生态来说,这是个不小声量的信号:能力门槛往下走,能上桌的模型就多了。

真机 macOS 测试还给出了另一组数字:GPT-6 Astra 的推理 token 消耗仅为 Qwen3.8-Max 的 1/19。

把这几组数字摆在一起看,OpenGCUA 想解决的不是「智能体能不能点对按钮」,而是「每一步要不要都靠截图和回模型」。省下来的感知成本和往返次数,最终变成了分数和步数上的差距。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“经常锻炼”被推翻?专家建议:过了70岁,最好保持5个锻炼习惯

“经常锻炼”被推翻?专家建议:过了70岁,最好保持5个锻炼习惯

荷兰豆爱健康
2026-10-19 18:41:23
签运不佳!亚锦赛女单抽签,蒯曼战张本桥本两克星,王艺迪担重任

签运不佳!亚锦赛女单抽签,蒯曼战张本桥本两克星,王艺迪担重任

阿嚼影视评论
2026-10-19 20:50:04
她是国家一级演员,多次给坐轮椅的丈夫戴绿帽,丈夫为何不愿离婚

她是国家一级演员,多次给坐轮椅的丈夫戴绿帽,丈夫为何不愿离婚

历史点行
2026-10-11 08:30:13
日本3nm,即将投产!

日本3nm,即将投产!

半导体行业观察
2026-10-18 11:24:07
多款岭南风味、全国首发新品!山姆禅城店10月23日开业

多款岭南风味、全国首发新品!山姆禅城店10月23日开业

南方都市报
2026-10-19 21:54:20
李在明:韩国是一个独立国家,理所应当且完全有能力独立承担国防责任,必须尽快从美方手中收回战时作战指挥权,且完全有能力做到

李在明:韩国是一个独立国家,理所应当且完全有能力独立承担国防责任,必须尽快从美方手中收回战时作战指挥权,且完全有能力做到

政知新媒体
2026-10-19 21:46:25
俄军喷气动力无人机猛增6倍!时速500公里碾压乌军拦截系统,90%拦截率被砍到60%

俄军喷气动力无人机猛增6倍!时速500公里碾压乌军拦截系统,90%拦截率被砍到60%

可达鸭面面观
2026-10-16 21:47:08
雷佩凡1-4不敌前世界锦标赛冠军,止步斯诺克北爱尔兰公开赛首轮

雷佩凡1-4不敌前世界锦标赛冠军,止步斯诺克北爱尔兰公开赛首轮

侧身凌空斩
2026-10-19 21:50:52
网传iPhone 17标准版相机键掉漆可免费换中框及电池!客服回应

网传iPhone 17标准版相机键掉漆可免费换中框及电池!客服回应

快科技
2026-10-19 16:58:14
深度长文:你每天只睡7小时,真不是你懒,是被非洲草原逼出来的

深度长文:你每天只睡7小时,真不是你懒,是被非洲草原逼出来的

宇宙时空
2026-10-19 07:36:42
宇树科技大涨超10%

宇树科技大涨超10%

财闻
2026-10-19 10:49:04
易建联为妻儿建的洛杉矶豪宅烧成灰,如今2000平空地估价曝光,数字让人意外,中介爆出实情

易建联为妻儿建的洛杉矶豪宅烧成灰,如今2000平空地估价曝光,数字让人意外,中介爆出实情

LULU生活家
2026-08-31 15:33:38
《嫁金钗》魏娆险被烹杀,陆濯怒怼周芙,才知他爱得不可自拔!

《嫁金钗》魏娆险被烹杀,陆濯怒怼周芙,才知他爱得不可自拔!

看尽落尘花q
2026-10-19 17:35:42
多亏俄乌大战,我们才彻底认清俄罗斯真面目!简单来说就是两句话:东方的命,西方的心

多亏俄乌大战,我们才彻底认清俄罗斯真面目!简单来说就是两句话:东方的命,西方的心

扶苏聊历史
2026-10-15 15:10:43
中国人民银行宣布将出台多项政策举措

中国人民银行宣布将出台多项政策举措

财闻
2026-10-19 16:45:50
我国没人情味的城市,3个城市榜上有名,有人说来了8年还像客人

我国没人情味的城市,3个城市榜上有名,有人说来了8年还像客人

丁丁鲤史纪
2026-10-17 05:31:49
麻烦了!广东队惨败再收两大坏消息,杜润旺不留情面,福格被坑了

麻烦了!广东队惨败再收两大坏消息,杜润旺不留情面,福格被坑了

宗介说体育
2026-10-19 14:38:19
5中1仅得3分2失误,登场21分钟输18分,男篮天才锋霸彻底陨落?

5中1仅得3分2失误,登场21分钟输18分,男篮天才锋霸彻底陨落?

弄月公子
2026-10-19 00:15:03
44比34、80比60、80比59:蒋万安街头投票连落后,卢秀燕上场

44比34、80比60、80比59:蒋万安街头投票连落后,卢秀燕上场

小影的娱乐
2026-10-19 18:25:56
“山姆下架好物”,实际从未上架?山姆会员商店:已完成证据固定并投诉、举报

“山姆下架好物”,实际从未上架?山姆会员商店:已完成证据固定并投诉、举报

国际金融报
2026-10-19 23:21:43
2026-10-20 00:00:49
硅屿手记
硅屿手记
有态度网友ytd
222文章数 83关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

21岁男生在稻城亚丁严重高反遇难 驴友透露营救细节

头条要闻

21岁男生在稻城亚丁严重高反遇难 驴友透露营救细节

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

奚梦瑶回应重返维密:还是很开心的

财经要闻

黄奇帆之子往事:从广微系到魏桥的跳跃

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

房产
健康
教育
手机
军事航空

房产要闻

最新房价:海口,三亚齐跌!

看着很健康的人,怎么会突然猝死?

教育要闻

5个类别研究生不用论文也能申请学位?别高兴太早,先试的说更难

手机要闻

REDMI K100定档,小米18标准版也不远了!

军事要闻

泽连斯基:若乌“被要求”举行战时选举 他将竞选连任

无障碍浏览 进入关怀版