网易首页 > 网易号 > 正文 申请入驻

谷歌Gemini 4 Carbon登顶第一:综合评分超越GPT-6,连续数天自主编程

0
分享至



谷歌又把大模型排行榜的第一名拿回来了。

距离上一款旗舰模型发布仅仅两周,谷歌 DeepMind 再次推出新模型,并在最新综合评测中超过了 Anthropic 和 OpenAI。

当地时间 10 月 28 日,谷歌正式发布新一代前沿模型 Gemini 4 Carbon。在独立评测机构 Artificial Analysis 最新公布的综合测评 Intelligence Index v5.0 榜单中,Carbon 以 59 分排名第一,超过 Claude Opus 5.5 的 58 分和 GPT-6 Astra 的 57 分。

除了综合评分,Carbon 还在多项具体评测中超过两大竞争对手。在考察复杂编程任务的 Terminal-Bench 4.0 中,Carbon 得分达到 65.2%,超过 Claude Opus 5.5 的 59.6% 和 GPT-6 Astra 的 59.1%;在智能体综合能力测试 Agents' Last Exam 中,Carbon 以 77.4% 的成绩领先两者。此外,在科学研究、知识准确性和自动化任务等评测中,Carbon 也取得了领先成绩。


(来源:Google)

两款模型分别以化学元素氩(Argon)和碳(Carbon)命名。谷歌披露,新模型在编程、复杂推理、科学研究及网络安全等方面均取得了明显进展,甚至已经能够连续数天自主执行复杂的软件工程任务。

不过,这款刚刚登顶的模型暂时不会面向普通用户开放。谷歌决定优先将其提供给少数网络安全防御人员,并继续开展安全测试,再逐步扩大使用范围。

两周提升9分,谷歌重新登顶

此次 Carbon 登顶的时间点可以说非常赶巧。

就在新模型发布前一天,Artificial Analysis 刚刚推出 Intelligence Index v5.0,对原有的模型评测体系进行了较大调整。新版指数涵盖知识工作、编程、科学以及通用推理四个领域,各占总评分的 25%。

为了提高评测难度,新版指数引入了真实代码库中的编程任务、科学研究任务等新测试,并将采用私有测试数据或隐藏答案的评测权重提高至 60%,以降低模型通过接触公开测试题而获得高分的可能性。

10 月 27 日,新榜单刚刚公布时,Claude Opus 5.5 以 58 分领先,GPT-6 Astra 以 57 分排名第二,GPT-6.1 Sol 得到 55 分。相比之下,两周前发布的 Gemini 4 Argon 只有 50 分。

一天后,Carbon 的出现改变了排名。根据 Artificial Analysis 公布的独立评测结果,Carbon 在新版指数包含的九项测试中拿下四项第一,分别涉及高难度推理、科学研究、知识准确性和自动化任务。


(来源:Artifical Analysis)

在考察科学研究能力的 Terminal-Bench-Science 测试中,Carbon 取得了 64.8% 的成绩,超过 GPT-6 Astra 的 63.3% 和 Claude Opus 5.5 的 59.0%。在衡量知识准确性与幻觉问题的 AA-Omniscience v1.1 测试中,Carbon 得到 54 分,同样领先于 Claude Opus 5.5 的 48 分。

编程能力的提升同样明显。在谷歌公布的 Terminal-Bench 4.0 测试中,Carbon 得分为 65.2%,超过了 GPT-6 Astra 的 59.1%。

不过,Carbon 还没有在所有领域占据优势。Artificial Analysis 的 Coding Agent Index 显示,Carbon 得到 59 分,编程能力暂时仍落后于 Claude Opus 5.5 的 62 分。在另一项软件工程评测 FrontierSWE 2 中,Carbon 的 61.2% 也低于 GPT-6 Astra 的 65.5%。

总体来看,Carbon 在综合推理、科学任务和部分智能体任务上的进步更为突出,而复杂软件工程仍是头部模型竞争最激烈的领域之一。

已能连续数天编程,网络安全能力大幅提升

相比综合排名的变化,谷歌此次更加突出 Carbon 执行长时间复杂任务的能力。

过去,大模型已经能够根据自然语言生成程序,但处理大型软件项目仍然存在不少困难。一个隐藏在底层系统中的软件缺陷,可能涉及大量文件、复杂的调用关系和多轮调试,需要模型持续定位问题、修改代码,并根据测试结果反复调整方案。

谷歌表示,在内部实际编程环境中,研究团队已经观察到 Carbon 能够连续运行数天,处理大型代码库和底层系统中的复杂工程问题。即使中途遇到障碍,模型仍能继续寻找其他解决方案,最终定位并修复一些隐蔽的软件缺陷。

可见,AI 正在从完成单次编程请求,逐渐发展为能够长期承担工程任务的自主智能体。

其他方面,Carbon 在长上下文测试 GraphWalks 中取得了 96.2% 的成绩,高于 Argon 的 84.2%。在网页开发评测 WebDev Arena 上,其 Elo 评分提高了 89 分,达到 1768 分,排名第四。

而在此次发布中,网络安全是谷歌重点强调的另一项能力。软件安全工作通常需要经历多个环节:找到代码中的漏洞,判断漏洞能否被实际利用,再编写补丁完成修复。Carbon 在覆盖这三个环节的测试中均取得了领先成绩。

在漏洞发现测试 SEC-bench Pro 中,Carbon 得到 88.2%,超过 Argon 的 83.4% 和 GPT-6 Astra 的 85.4%。找到漏洞之后,还需要判断它是否真的能够被利用。在 ExploitGym 测试中,Carbon 的得分从 Argon 的 42.0% 提升至 54.8%,提高了 12.8 个百分点。


(来源:Google)

而在考察漏洞修复能力的 CWE-bench 测试中,Carbon 又取得了 71.0% 的成绩,高于 Argon 和 GPT-6 Astra 的 68.0%。这表明,新模型在发现漏洞、验证风险和生成修复代码等环节都有明显进展。

谷歌内部的实际应用也显示出类似趋势。在安全代码生成任务中,Carbon 的成功率达到 Argon 的两倍以上。Chrome 浏览器团队发现,其生成高质量安全补丁的表现超过另一家实验室的前沿模型十倍以上。谷歌旗下云安全平台 Wiz 也观察到,Carbon 在网络应用渗透测试中表现领先。

重新登顶后,暂不对外开放

尽管取得了这些成绩,Carbon 目前还不会全面开放。

谷歌宣布,本周起将首先向少数网络安全防御人员提供 Carbon,随后通过 Fairwind 计划逐步扩大至其他可信合作伙伴。普通开发者和消费者何时能够使用,尚未公布具体时间。

这一安排主要与模型的网络安全能力有关。能够自主发现、验证和修复漏洞的 AI,可以帮助防御人员提高效率,但也可能被攻击者用于寻找和利用软件缺陷。谷歌希望让防御方优先获得这些能力,同时继续完善模型的安全措施。

为此,谷歌还加强了 Carbon 的行为约束。在 Terminal-Bench 4.0 测试中,模型尝试投机取巧的比例降至 0.4%,成功作弊率降至 0%。在内部编程环境中,严重偏离任务要求的行为警报减少近 80%,缺乏证据支持的断言数量也减少了约一半。

针对提示词注入攻击,Carbon 同样取得进展。在 Gray Swan 的间接提示词注入测试中,攻击成功率从 Argon 的 0.7% 降至 0%。目前,谷歌还在参与美国政府自愿开展的模型发布前测试。

价格方面,Carbon 沿用 Argon 的首发定价,每百万输入 Token 收费 2 美元,输出 Token 收费 10 美元,缓存输入可享受 95% 的折扣。优惠期结束后,标准价格将分别提高至 4 美元和 20 美元。

回顾过去一年,谷歌的大模型发展经历了不少起伏。2025 年底,Gemini 3 发布后曾登上多个评测榜单前列,一度风头无两。但进入 2026 年,随着 Anthropic 和 OpenAI 接连推出更强的模型,谷歌逐渐失去领先优势,备受期待的下一代旗舰模型也迟迟没有亮相。

此后,谷歌虽然陆续更新 Gemini Flash 系列,但始终没能重夺榜首。与此同时,Gemini 的实际使用体验也引发不少吐槽,甚至一度被戏称为“美国大豆包”。直到今年 10 月,谷歌终于开始发力,短短两周接连推出 Argon 和 Carbon,重新登顶综合评测榜单。

从一度领跑,到被竞争对手超越,再到如今重新拿回第一,Gemini 过去一年的经历甚至可以说有些“坎坷”。不过,按照如今大模型厂商的发布节奏和技术迭代速度,谷歌这次究竟能在榜首待多久,恐怕还是个未知数。毕竟,下一款改写排名的模型,可能已经在路上了。

1.https://blog.google/innovation-and-ai/models-and-research/gemini-models/introducing-gemini-4-carbon/

2.https://artificialanalysis.ai/pt/articles/gemini-4-carbon-new-number-1

3.https://artificialanalysis.ai/evaluations/terminal-bench-science

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
央媒发文,官宣张雪新身份,移民跑路、资产转移海外传闻早有真相

央媒发文,官宣张雪新身份,移民跑路、资产转移海外传闻早有真相

铁锤妹妹是只猫
2026-10-28 18:53:56
兵败如山倒!国产新能源或已证明:中国其实不需要二线豪华品牌

兵败如山倒!国产新能源或已证明:中国其实不需要二线豪华品牌

铭记历史呀
2026-09-20 16:15:46
DeepSeek一算吓一跳!居然算出生产一辆比亚迪秦L DM-i的实际成本

DeepSeek一算吓一跳!居然算出生产一辆比亚迪秦L DM-i的实际成本

阿芒娱乐说
2026-10-26 12:45:34
随着火箭5连胜,勇士119-114,马刺加时险胜,西部最新排名出炉!

随着火箭5连胜,勇士119-114,马刺加时险胜,西部最新排名出炉!

薇说体育
2026-10-29 11:57:50
和于文华有私生子、现金多到发霉?被举报的朱之文,这次真的怒了

和于文华有私生子、现金多到发霉?被举报的朱之文,这次真的怒了

观察鉴娱
2026-10-21 09:09:57
房价很大可能重走1998年老路!所有人一定要提前做好心理准备

房价很大可能重走1998年老路!所有人一定要提前做好心理准备

偷喝一口奶
2026-09-11 08:36:30
帕潘:姆巴佩的沟通方式太糟糕了,这多少反映了他的性格

帕潘:姆巴佩的沟通方式太糟糕了,这多少反映了他的性格

懂球帝
2026-10-29 04:23:44
比亚迪大爆款新车曝光,5.1米长,7座!

比亚迪大爆款新车曝光,5.1米长,7座!

电动内参
2026-10-29 01:32:37
被清华教授实名举报论文造假后,蒋方舟时隔108天再发文:37岁这一年,走过舆论风波、跨过身体难关;其人大硕士学位已被撤销

被清华教授实名举报论文造假后,蒋方舟时隔108天再发文:37岁这一年,走过舆论风波、跨过身体难关;其人大硕士学位已被撤销

蓬勃新闻
2026-10-28 14:20:40
桂林七星岩惨案:823条生命瞬间消逝,这段历史我们不能忘

桂林七星岩惨案:823条生命瞬间消逝,这段历史我们不能忘

小豫讲故事
2026-10-28 06:00:19
骑行爱好者:骑行裤里肯定不穿内裤,就和游泳不穿内裤一个道理

骑行爱好者:骑行裤里肯定不穿内裤,就和游泳不穿内裤一个道理

映射生活的身影
2026-08-16 14:52:03
WTT冠军赛:东道主女单惨败!1:3日本削球手,单局得1分,蒯曼3:2

WTT冠军赛:东道主女单惨败!1:3日本削球手,单局得1分,蒯曼3:2

国乒二三事
2026-10-29 11:20:41
11月1日开始好运正式启动的3个生肖,迎来厚积薄发,能大有所成

11月1日开始好运正式启动的3个生肖,迎来厚积薄发,能大有所成

星缘生肖
2026-10-28 11:41:44
火箭五连胜!杜兰特18+5+4,赛后阿杜跑到场上,拿下比赛用球

火箭五连胜!杜兰特18+5+4,赛后阿杜跑到场上,拿下比赛用球

担酒
2026-10-29 10:29:11
《伟大的长征》人民日报不提演技,于和伟“不像”,观众却认了

《伟大的长征》人民日报不提演技,于和伟“不像”,观众却认了

老吴教育课堂
2026-10-29 08:08:11
中国退休教授赴美带娃,后院种菜,一颗和平种子在异国生根开花。

中国退休教授赴美带娃,后院种菜,一颗和平种子在异国生根开花。

健身狂人
2026-10-29 11:46:52
38岁的库里,终于有哨了?

38岁的库里,终于有哨了?

只关于篮球
2026-10-29 12:21:03
一觉醒来,几个大事,谷歌业绩暴雷

一觉醒来,几个大事,谷歌业绩暴雷

贩财局
2026-10-29 08:32:19
被网友们的“平替思路”折服了!不花啥钱,家里该有的都有

被网友们的“平替思路”折服了!不花啥钱,家里该有的都有

抠搜侠
2026-10-27 14:08:59
欧阳明高:比亚迪闪充出来后中小厂家、电池厂很焦虑 因为闪充投资太大

欧阳明高:比亚迪闪充出来后中小厂家、电池厂很焦虑 因为闪充投资太大

快科技
2026-10-29 00:32:04
2026-10-29 13:51:00
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17419文章数 515288关注度
往期回顾 全部

科技要闻

MacBook终于能触屏了:22999元起

头条要闻

泽连斯基:我们愿进行任何形式谈判 乌不想失去美支持

头条要闻

泽连斯基:我们愿进行任何形式谈判 乌不想失去美支持

体育要闻

普通人徐嘉余的入口与出口

娱乐要闻

李嘉格自曝离婚内情:过错方净身出户

财经要闻

“对不起,我们不投具身智能了”

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

亲子
游戏
本地
公开课
军事航空

亲子要闻

吾有一女,乃是我掌上明珠。 闹时灵动雀跃,静时软萌恬然。

GTA6地图面积正式公布!GTA4+5+荒野大镖客2总和

本地新闻

十月奔赴迪庆,解锁梅里日照金山

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

万斯致信伊朗安全高官试图重启谈判

无障碍浏览 进入关怀版