网易首页 > 网易号 > 正文 申请入驻

重磅!谷歌开源双层RSI框架Harness²,Gemini 3.5性能原地暴涨

0
分享至


新智元报道


这就是RSI!

刚刚,谷歌等开源了一项名为Harness²的重磅框架。

在专业基准测试中,即使是Gemini 3.5 Flash这样的顶尖模型,也能在单步优化后实现性能的狂飙。

模型还是那个模型,但智能体已不再是那个智能体。

在两个层面上,谷歌实现了 RSI:

任务级递归:提出各种修改方案,对每个方案都重新执行任务,保留那些能让任务表现更好的修改方案。

梳理式递归:在完成每项任务后,保存所使用的「梳理方式」以及其中的原因分析,这样在处理下一项任务时就能做出更出色的调整。


除了谷歌云 AI 研究团队成员,来自美国西北大学(Northwestern University)的Ruiyao Xu实习时参与了此项工作。


GitHub 开源地址:https://github.com/google-research/harness2

arXiv 论文链接:https://arxiv.org/abs/2610.14224

项目主页:https://harness2.github.io/

为什么我们不想改「模型权重」?

Agent黄金 1 0 年开启,但Agent在真实的业务场景中时,问题接踵而至。

真实世界是开放的。没有标准答案。网页每天在变,API随时更新,用户的指令千奇百怪。

当任务失败时,传统的解法是「微调」。

但这带来了三个致命问题:

但这成本极高:算力贵,数据标注更贵。

而且没有从根本上解决灾难性遗忘。你教会了模型用新API,它可能忘了旧的业务逻辑,「按下葫芦浮起瓢」

更致命的是,很多时候用的是Gemini、Claude等闭源API,你根本摸不到它的权重,怎么微调?

我们需要一种非侵入式的升级方案。

Harness(执行框架)让模型能以智能体的方式行动,Harnessing 就是优化这套系统的过程。

Harness² 让这个优化过程变成递归的:它先针对当前任务完善执行框架,再把可复用的框架和经验更新进「改进框架」,用来指导以后的优化。


什么是Harness?Harness²又是什么?

Harness,直译为「马具」或「控制带」。

在AI语境中,它指的是包围在语言模型外部,帮助模型与现实世界交互的所有基础设施。

谷歌在Harness²中,将这个概念具象化为八大可编辑组件。

这八个组件,就是智能体的「手、眼、记忆和工具箱」。

1 系统提示词(System Prompt): 定义Agent的角色和基础规则。

2 护栏(Guardrails): 设定安全边界,防止危险操作。

3 记忆(Memory): 存储过去的经验和上下文。

4 工具指导(Tool Guidance): 告诉Agent每个工具的具体用法和避坑指南。

5 子智能体(Sub-agents): 负责把复杂任务拆解,分配给特定的小模型。

6 技能(Skills): 针对特定场景固化的操作步骤。

7 脚本(Scripts): 自动执行的代码段落。

8 插件(Plugins): 连接外部服务的接口。


Harness²框架支持OpenCode与Codex执行器,这意味着它可以直接运行和验证复杂的代码逻辑。

重点来了:Harness²优化的不是模型的参数,而是这八大组件。它让模型自己去发现工具哪里不好用,提示词哪里写得差,然后自己修改它。

这些组件不仅影响提示词本身,还塑造了进入上下文的内容、工具的使用方式、工作的委派方式,以及工具循环内部发生的一切。改进所能改变的不只是一个提示词。

深度拆解:双层递归优化的「黑魔法」

Harness²最大的创新,在于它的「双层递归优化」架构。

它不仅解决眼前的问题,还在为未来的未知问题做准备。

第一层:任务级优化(Task-Level)——解决眼前的问题

面对一个具体的、从未见过的任务,Agent搞砸了怎么办?

Harness²设计了一套被称为PPC(Propose–Probe–Compose,提议-探测-组合)的机制。


当遇到一个从未见过的棘手任务时,Harness² 不会闷头乱撞,而是启动三步走策略:

第一步,分析当前执行轨迹,针对暴露出的痛点,提出好几个修改「八大组件」的方案。这一步关键在提案。

第二步是对比不同提案,探测最优提案!框架会让换上不同新装备的智能体去试跑,通过直接对比执行差,像老中医把脉一样,找出哪个方案真正解决了卡点。

最后,一步是合成:把探测中表现最好的修改方案融合起来,生成当前任务的「终极版战甲」。


一句话总结:它通过比对不同策略的执行结果,自己摸索出正确的通关密码。

任务级递归的两种形式:

(a) 并行递归:同时试探多个候选,各自独立组合出下一代框架。

(b) 顺序递归:每一步都把改进后的框架和积累下来的执行证据带入下一步。


第二层:元级优化(Meta-Level)——积累全局的智慧

如果只停留在任务级,Agent不过是个熟练工。换个新任务,它可能又抓瞎了。

Harness²的元级优化,让Agent进化成了「大师」。

每次任务级优化成功后,Harness²会提取其中的核心逻辑,沉淀经验。比如它发现「在处理表格数据时,先用脚本清洗空值,成功率更高」。


这些经验不是随便写的,而是附带了成功的执行轨迹作为证据。


当Agent面对全新的任务时,元级优化会翻开这本「积累了成功方案与教训的错题本」,用过去的底层逻辑,指导当前任务的Harness编辑。


这就像人类的举一反三。在任务A学到的工具修改技巧,被提炼成了通用法则,用在了完全不同的任务B上。

战绩彪悍!GLM-5 与 Gemini 3.5 Flash 原地起飞

光说不练假把式,这套不改权重的「换装大法」到底有多猛?

架构再好,还得看疗效。

Harness²在多项高度专业的基准测试中,交出了令人震撼的成绩单。

谷歌放出了极其硬核的评测数据。

在全部锁定模型权重、完全不依赖真实标签验证的情况下,研究人员拿当前备受瞩目的GLM-5和Gemini 3.5 Flash进行了测试。

仅仅经过单步(Single-step)的 Harness 优化,两大模型在多个极具挑战的专业基准测试中,成绩直接拉出了一条陡峭的阳线:

在极其考验复杂办公流协作的WorkBuddy-Bench上,最高暴涨+11.5分!

在模拟真实职业任务的JobBench上,稳步提升+4.5分!

在硬核的LAB基准测试中,准确率更是飙升了+11.8个百分点!


更恐怖的是,这只是「单步」优化的威力。

论文指出,随着你给智能体增加递归预算k(即允许它多进行几轮自我迭代),它的表现还能顺着曲线进一步攀升!


英雄所见略同:LangChain生态的强烈共鸣

Harness² 的开源,迅速在硅谷AI圈引发了强烈共鸣。

LangChain 的核心成员Sydney Runkle第一时间在 X 上转发并深度长评。

她敏锐地指出,谷歌 Harness² 的设计与当前最前沿的 Agent 工程理念——Trace(轨迹证据)与 Eval(验证改进)达成了惊人的高度一致!


她感叹道:

任务级循环通过分析轨迹(Trace)来提出改进提案;

而元级循环则在不断学习哪些改进模式在验证(Eval)中是真正有效的。

这正是让智能体在生产环境中走向可靠的必经之路!


Harness²等于在LangChain这样的框架之上,提供了一个全自动的、自洽的「Agent医生」。

开发者不再需要一行行去看日志、手动调优提示词。Agent自己看着日志,自己就把提示词和工具修好了。

人类能够统治地球,靠的不是脑容量在几千年里发生突变,而是靠着语言(Prompt)、文字记录(Memory)和工具制造(Tools)的代代相传和迭代。

Harness²,正在赋予Agent同样的能力。


参考资料:

https://github.com/google-research/harness2

https://arxiv.org/abs/2610.14224

https://harness2.github.io/

https://x.com/sydneyrunkle/status/2112043827553005651

编辑:大卫

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
蔡康永穿黑西装出席!蒋万安竞选总部明天成立,神秘嘉宾据传有郑丽文

蔡康永穿黑西装出席!蒋万安竞选总部明天成立,神秘嘉宾据传有郑丽文

金牛传声
2026-10-25 21:55:51
2015年的乱伦恋情:堂嫂和堂弟,堂嫂说,他那里大得要命,让人上瘾

2015年的乱伦恋情:堂嫂和堂弟,堂嫂说,他那里大得要命,让人上瘾

法网恢恢
2026-10-22 22:38:14
你连消费都不消费,拿什么抵制星巴克

你连消费都不消费,拿什么抵制星巴克

牛角说
2026-10-24 21:25:38
又一台湾省老戏骨力挺沈伯洋!叫嚣不怕大陆抵制,曾靠《再见阿郎》走红

又一台湾省老戏骨力挺沈伯洋!叫嚣不怕大陆抵制,曾靠《再见阿郎》走红

小徐讲八卦
2026-10-23 14:26:44
亿纬锂能:公司四季度排产预计环比增长,产能已确定订满

亿纬锂能:公司四季度排产预计环比增长,产能已确定订满

界面新闻
2026-10-24 19:03:18
最后的疯狂:许家印被抓捕的失控三秒钟,简直是惊心动魄

最后的疯狂:许家印被抓捕的失控三秒钟,简直是惊心动魄

橘仔看世界
2026-06-27 08:38:00
日军投降前一夜有多疯狂?一个日本女军医:日军用刀劈开了一个人

日军投降前一夜有多疯狂?一个日本女军医:日军用刀劈开了一个人

小豫讲故事
2026-10-24 06:00:12
乐基儿年轻时真漂亮,看曾志伟的眼神就知道了

乐基儿年轻时真漂亮,看曾志伟的眼神就知道了

娱你同欢
2026-09-13 20:22:17
夜读|汪荣祖:被误解的辜鸿铭

夜读|汪荣祖:被误解的辜鸿铭

上观新闻
2026-08-07 20:04:29
小蜘蛛道歉不是放弃去巴萨,2球1助攻的亿元先生,是开始给自己找退路了

小蜘蛛道歉不是放弃去巴萨,2球1助攻的亿元先生,是开始给自己找退路了

夏侯看英超
2026-10-25 23:05:19
被迫恢复“星链”后,马斯克甩锅乌克兰:乌军因此损失百万美元无人机

被迫恢复“星链”后,马斯克甩锅乌克兰:乌军因此损失百万美元无人机

鹰眼Defence
2026-10-25 16:40:08
高盛突然改口:楼市真正拐点,可能在2030年之后,信号太强了!

高盛突然改口:楼市真正拐点,可能在2030年之后,信号太强了!

爱看剧的阿峰
2026-10-25 01:00:12
纯钛杯、纯钛餐具的第一批受害者出现了…

纯钛杯、纯钛餐具的第一批受害者出现了…

新住家居
2026-10-24 18:06:53
曾“逼马云退位”的浙商新贵,被抓了

曾“逼马云退位”的浙商新贵,被抓了

大猫财经Pro
2026-10-23 15:28:19
塔图姆:我和布朗没有不和;布朗:塔图姆有个非常出色的公关团队

塔图姆:我和布朗没有不和;布朗:塔图姆有个非常出色的公关团队

稻谷与小麦
2026-10-26 01:55:09
橘子再次被关注!医生提醒:糖尿病常吃橘子,很快或迎来 5 种改变

橘子再次被关注!医生提醒:糖尿病常吃橘子,很快或迎来 5 种改变

牛锅巴小钒
2026-10-24 19:14:48
黄仁勋发出警告:如果DeepSeek率先在华为芯片上发布,那么这对于美国科技来说是个“可怕的结果”

黄仁勋发出警告:如果DeepSeek率先在华为芯片上发布,那么这对于美国科技来说是个“可怕的结果”

逍遥漠
2026-10-24 11:07:58
全球也就20例!巴西一名19岁女子,在同一个夜晚与两位男性有过亲密接触,怀孕生下双胞胎后,竟意外发现两个孩子的生父并非同一人

全球也就20例!巴西一名19岁女子,在同一个夜晚与两位男性有过亲密接触,怀孕生下双胞胎后,竟意外发现两个孩子的生父并非同一人

扶苏聊历史
2026-10-10 11:04:50
圆明园被毁150年后,专家准备对它修复时,意外发现50000多件文物

圆明园被毁150年后,专家准备对它修复时,意外发现50000多件文物

铭记历史呀
2026-10-26 01:35:07
比赖清德更极端!如若2028年她执掌台湾,武力收台或将到来?

比赖清德更极端!如若2028年她执掌台湾,武力收台或将到来?

混沌录
2026-08-30 21:25:08
2026-10-26 03:51:00
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
16519文章数 67188关注度
往期回顾 全部

科技要闻

苹果首款折叠屏没能养肥黄牛

头条要闻

顾客一个避雷帖致小店营业额直接暴跌75% 女店主崩溃

头条要闻

顾客一个避雷帖致小店营业额直接暴跌75% 女店主崩溃

体育要闻

文班、约基奇和扬尼斯各自的处境

娱乐要闻

王佳佳近况:44岁导演老公露面

财经要闻

宁王AB面:好业绩,坏天气

汽车要闻

专业越野+华为乾崑智能 猛士X700限时焕新价20.98万起

态度原创

手机
教育
亲子
本地
数码

手机要闻

华为鸿蒙HarmonyOS 7.0.0.111版本更多“隐藏”新特性盘点,深色模式随日出日落切换等功能下放

教育要闻

教育部47项白名单公布:成都家长别被"竞赛加分"话术忽悠了

亲子要闻

小鸭鸭的嘴也太甜了,几句话就把妈妈哄得乐开了花

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

数码要闻

联合创新“D32U1”31.5英寸显示器发售:4K 60Hz、USB-C 65W,1699元

无障碍浏览 进入关怀版