网易首页 > 网易号 > 正文 申请入驻

月之暗面联合创始人张宇韬:衡量Agent的价值——人类有多信任它

0
分享至


©潮涌AI编辑部

当大模型从单次问答的对话工具,逐步走向能够自主规划、循环执行、长时间完成复杂任务的Agent,整个行业对于AI工程化的改造重心也在持续迁移。

如今,行业真正要攻克的命题,是搭建一套完整运行环境,支撑模型自主完成小时级闭环任务。

大模型自身的理解、推理、规划能力持续涌现,与之配套的工程方法论也要同步完成迭代。

7月3日,月之暗面联合创始人张宇韬在“2026全球数字经济大会人工智能融合应用发展论坛”上发表了《从Prompt到Harness,Agent工程的演进之路》主题演讲,完整梳理了大模型三段技术演进脉络,结合团队落地Agent的实践经验,拆解新一代Agent工程的底层逻辑、核心原则与长期发展思路。

以下是张宇韬演讲实录,经潮涌AI整理发布:

三个热词:

Prompt →Context→Harness Engineering

非常荣幸能够来这里分享,模型厂商对于AI工程化以及整个AI构建Agent实践中的Know-how。

大模型从2023年发展到现在,其实经历了很多不断迭代的过程。

整个旅程中有三个热词:

2023年ChatGPT刚发布的时候,我们一直在强调的概念是Prompt Engineering。

2024年演化到Context Engineering。

到2026年,现在最热的一个词叫Harness Engineering。


这三个词意味着什么?

第一,我们要问问题。怎样在聚焦的情况下,在有限的上下文中把问题讲清楚,让AI能够精准回答——这是Prompt Engineering。

第二,ContextEngineering。当上下文空间、模型的窗口扩展以后,我们怎样能够去提供更充分、更精准的信息,让模型完成更复杂的任务。

第三,Harness Engineering。随着模型能力不断提升,模型已经不局限完成单轮任务、回答一个问题,而是可以做一个小时级别以上的复杂任务。你怎样让它通过一个循环过程,不断自我探索,最终完成。

1、2023:Prompt Engineering时代,4K上下文的局限

我们把时间回到2023年。

那个时间点,面对ChatGPT刚发布,我们有一个很困惑的地方:它只支持4K的上下文空间。在这样的上下文空间,你能够做的事情非常局限。你需要非常精妙地利用这个空间,把你的问题提出来,把你的任务布置下去。


所以,那个时候我们一直强调怎样做好PromptEngineering。本质就是在有限的上下文空间中,怎样更精准地把问题部署给模型,让它完成。而且那个时候模型的智力是有限的,所以你怎样适配模型对于Prompt的理解非常重要。

2、2024:Context Engineering时代,工具调用进入上下文

时间来到2024年。那个时候各个模型的上下文窗口开始扩展了,从4K到32K到128K,甚至是1兆以上的上下文窗口。并且模型能力有一定提升以后,我们开始尝试让模型不只是回答问题,而是做一些更复杂的任务。

这个时候我们引入了上下文工程的概念。我们要把工具的调用聚焦到上下文空间中,让模型给它足够的信息和很好的组织,让它利用外部信息,就可以让模型完成更复杂的任务。这是这个阶段我们聚焦的事情。

3、2026:Harness Engineering时代,小时级任务的拐点

随着模型能力的不断提升,我们看到一个拐点。

原来的模型能力有限,对于指令的遵循能力有限,对于理解一个长任务能力有限,它能够完成分钟级别的任务——这个分钟级别的任务通常在一个上下文空间中能够表现清楚。

现在我们看到模型有充分能力可以做小时级别以上的任务。这个情况下,我们必须给模型一个更好的环境空间,让它充分发挥自己的能力。

这个时间点,模型的局限已经不再于模型能力本身,而是在于怎样给它足够好的空间让它可以发挥。

这个情况我们思考怎样构造一个环境去驱动它,让它在闭环中自己解决问题。这就是所谓的Harness Engineering。

听起来是很漂亮的词,但所谓的Agent本质上非常简单,其实就是一个循环。

对于代码开发人员就是一个while循环。这个模型没有解决的时候,它自己探索下一步应该做什么,自己决策下一步应该做什么,然后执行这个决策,然后看是不是达成结果。如果遇到了错误,它想怎样从错误中恢复过来,是不是让人介入解决这些问题。最终看有没有解决问题——如果这个问题已经被解决,任务完成了就结束循环;如果没有解决,继续循环。

这就是Agent工程,它其实都在解决这一个问题。

脚手架哲学:模型能力提升后及时撤掉

我们需要做的就是在这个循环内更好地定义Agent框架,让它在充分安全的环境中自由探索,并且让它发现怎样去解决,给它足够好的工具,可以让它去发挥。

所以,这三个概念,不是三个完全独立的概念,其实是一个递进的概念,甚至是一个包含的概念。

现在整个Agent工程中,我们需要考虑怎样设计好Prompt,让它更清晰地让模型理解用户意图。同时我们做好Context,把外部工具、更好的东西可以注入进来、组织好,让它充分理解。最终构建一个更好的Harness,让它以非常自信、非常自洽的方式来执行。


前面生数科技创始人朱军老师提到了Bitter Lesson的概念。

这是我们所有做模型的人一直思考的问题:怎样让一个更通用的方式解决所有的问题,而不是用人工的方式去适配、不断去定义它。因为通常来说,随着模型的不断提升,那些人工的定义通常都会失效,甚至成为负担。

所以,我们自己在做AI工程的时候也会思考这样的问题。

有一个误区:我们需要精妙地设计一个框架来让模型发挥得很好。但是实际上真正的过程并不是这样。真正的过程是用模型的边界、能力边界来定义到底这个框架怎么实现。

在这个过程中,我们通常会这么使用:先构建这样的框架,让模型开始试探,发现能力边界,发现有什么问题。

当它有问题的时候,我们引入一些脚手架,这些脚手架可以让它拔高一点,在现有能力下做超出它能力的事情。随着模型不断提升,这些脚手架及时撤掉,这样它未来不会成为模型的累赘。

举个例子。

2023年第一次发布Kimi的时候,模型不具备自主调用搜索引擎的能力。那个时间我们要引入一个小模型,一个我们精心训练的小模型,它只做一个事儿:比如我该调用什么搜索引擎,以及用什么搜索词来搜。就是这样的小模块,让模型在那个时间点不具备这个能力的时候,突破了一下。产品中呈现了这个功能,这个功能也受到用户的欢迎。

随着模型能力提升,我们观察到,小模型已经成为整个链路中的一个瓶颈。

因为一个小模型,比如几百兆或者1B的小模型,它的智力远远不如上TB的大模型的智力。它做一个前置判断,可能会导致整个问题的正确率成为所有人的瓶颈。

所以,开发K2阶段的时候,我们开始思考:是不是应该把这个拐杖撤掉?其实我们可以让模型自主发挥,让它自己想现在是不是调用这个工具,是不是调用这个搜索引擎,应该怎么搜,搜多次还是一次,甚至利用搜索引擎的高级语法——应该限定一个site还是怎么样。

模型可以完成非常复杂的多轮搜索的任务,甚至解决人都不好解决的问题。

这是一个非常重要的观察,也是非常符合Bitter Lesson的原则。

Agent工程的四个核心原则

迭代这些AI工程的时候,我们也在思考。

这个范式非常简单:不管观测当前状态下,这个模型有没有解决问题,去思考我应该怎么解决这个问题,去执行,发现问题以后怎样给它错误的回馈机制,最终不断循环。

模型的能力是一个不断涌现的过程。

我们没法很早定义现在的状态应该用什么解决方案,甚至我理解对于整个世界最头部的这些AI公司,他们也没有正确答案。因为某些能力是迭代中不断涌现出来的。

这个情况之下,我们不应该限定框架应该做什么,而是随着模型的进步,我们给它更好的助力,并且找到它当下的边界。

这也是我们自己做AI工程、做Agent工程的时候总结出来的原则:

第一,刚才提到Agent本质就是一个很简单的东西,我们不要给它增加复杂性。

第二,怎样把对的信息、合适的信息、更重要的信息放进上下文,利用好这个窗口。这是它最重要的事情,是决定模型能力能不能发挥的事情。

第三,我们要很好地设计这些工具。所谓的工具对于模型来说,就像编程中的接口设计一样,需要足够清晰,不能有歧义。否则这些工具,模型用不好,甚至还会给模型增加负担。

第四,对于模型的记忆系统,它没有完美的解决方案。因为模型上下文空间有限,并且对于上下文空间的掌控能力也有限,所以,在一致性和创造性之间需要做一个权衡。这个过程中,可以选择把所有的信息放在上下文中,让它不断自我发展;也可能引入一些压缩的机制,包括总结的机制,或者是一些筛选的机制,让它可以更精准地去命中一些更重要的信息。这其实是我们在实践中不断探索的事情。

衡量Agent的价值:人类有多信任它

刚才提到Bitter Lesson,我们让模型自由探索、自由试错、去反馈,基于反馈去不断衍生、不断自我成长,会优于我们用精妙的设计来预定好一个框架让它去执行。

最后一点,先做一个最好的闭环,让模型先在闭环中跑起来,在这个过程中自然生长,而不是预先思考怎样构造一个复杂系统。

这是我们做好Agent的过程中的核心思路。


我们衡量一个Agent的价值,不再是单次实践能够做出最强能力的东西,而是我们人类有没有信任给它,让它可以去做复杂的任务。

其实衡量一个模型的价值,人类越自信地可以放手让它做,它的价值就更高。

这个过程中,我们如何构建一个足够好的环境,让人类可以充分信任,模型可以充分发挥,并且不会搞砸事情,让自我探索的能力发挥到极致——这就是我们认为最有价值的Agent。

整个Agent工程中,核心解决这个问题:如何让人更加信任Agent去自由地发挥。

以上就是我们自己,无论是模型迭代还是AI工程迭代中,我们自己的思考。非常感谢大家!

“2026全球数字经济大会人工智能融合应用发展论坛”由全球数字经济大会组委会主办,北京市经济和信息化局、朝阳区人民政府承办,中关村科技园区朝阳园管理委员会(北京市朝阳区科学技术和信息化局)、北京数智云科信息科技有限公司、北京信息化协会、北京人工智能产业联盟、北京数智聚联企业管理有限责任公司协办。

商务、媒体合作、文章转载请加

yiyuguancha6

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
第一集就上尺度,网飞成人新剧太生猛了

第一集就上尺度,网飞成人新剧太生猛了

来看美剧
2026-09-04 18:29:48
女性长期使用情趣用品,身体可能出现哪些不适?不少人缺乏认知

女性长期使用情趣用品,身体可能出现哪些不适?不少人缺乏认知

看世界的人
2026-08-07 09:22:50
演员倪虹洁被曝与朋友边聊天边抽烟,随手将烟头扔地上

演员倪虹洁被曝与朋友边聊天边抽烟,随手将烟头扔地上

韩小娱
2026-09-08 12:29:15
感恩蔡斌,提到巴黎奥运潸然泪下!如她去亚锦赛,中国女排或夺冠

感恩蔡斌,提到巴黎奥运潸然泪下!如她去亚锦赛,中国女排或夺冠

金毛爱女排
2026-09-09 10:35:13
史玉柱恐成下一个许家印?更多猛料被扒,套现80亿仅是冰山一角?

史玉柱恐成下一个许家印?更多猛料被扒,套现80亿仅是冰山一角?

王嚾晓
2026-09-08 17:21:08
阿尔特塔神换人:替补神兵关键助攻,阿森纳球星世界波,那不勒斯轰然倒下

阿尔特塔神换人:替补神兵关键助攻,阿森纳球星世界波,那不勒斯轰然倒下

足球狗说
2026-09-10 05:06:43
32岁歌手威尼斯首秀,穿短裙不刮腿毛,外网粉丝集体破防

32岁歌手威尼斯首秀,穿短裙不刮腿毛,外网粉丝集体破防

娱圈观察员
2026-09-08 00:49:25
功亏一篑!中国队1-3不敌伊朗队,主教练换人和指挥引球迷不满

功亏一篑!中国队1-3不敌伊朗队,主教练换人和指挥引球迷不满

罗掌柜体育
2026-09-09 18:17:53
谁也没想到,4岁孩子摸人事件出现意外变化,《狗的审判》给答案

谁也没想到,4岁孩子摸人事件出现意外变化,《狗的审判》给答案

萧狡科普解说
2026-09-09 10:36:21
曾在CBA轰63+19+10!火箭名宿:他的天赋堪比詹姆斯

曾在CBA轰63+19+10!火箭名宿:他的天赋堪比詹姆斯

篮球大视野
2026-09-09 14:18:02
全红婵近照变化太大了,熬过了最难的发育关,小姑娘彻底长开了,模样跟以前判若两人

全红婵近照变化太大了,熬过了最难的发育关,小姑娘彻底长开了,模样跟以前判若两人

In风尚
2026-08-22 06:04:58
42岁我二婚娶俄罗斯妻子,第3年才知她精通中文却整整装听不懂

42岁我二婚娶俄罗斯妻子,第3年才知她精通中文却整整装听不懂

真实人物采访
2026-09-09 07:00:13
范冰冰亮相菲拉格慕活动!鎏金套装气场直接拉满

范冰冰亮相菲拉格慕活动!鎏金套装气场直接拉满

墨薷桃桃
2026-09-09 09:30:14
26所学校一个学生都没招到!民办本科的“淘汰赛”正式打响

26所学校一个学生都没招到!民办本科的“淘汰赛”正式打响

呼呼历史论
2026-09-09 09:26:19
一场2-1验出皇马一大水货,全队最低分,穆里尼奥错信他,恐遭冷落

一场2-1验出皇马一大水货,全队最低分,穆里尼奥错信他,恐遭冷落

零度眼看球
2026-09-09 14:41:06
苹果iPadOS 26.7正式版发布

苹果iPadOS 26.7正式版发布

IT之家
2026-09-10 08:07:30
30岁中超19场0球能入选国足,20岁中超5球2助攻却被弃用,邵佳一用人遭质疑

30岁中超19场0球能入选国足,20岁中超5球2助攻却被弃用,邵佳一用人遭质疑

鸣哥说体育
2026-09-09 20:17:27
一觉醒来,中国斯诺克6胜6负!吴宜泽丁俊晖突围,常冰玉3-4输囧哥!

一觉醒来,中国斯诺克6胜6负!吴宜泽丁俊晖突围,常冰玉3-4输囧哥!

刘姚尧的文字城堡
2026-09-10 07:09:37
3分险胜!女篮世界杯:世界第13差点儿掀翻世界第4!中国女篮晋级8强,赛后数据一目了然,最佳球员是她,不是王思雨

3分险胜!女篮世界杯:世界第13差点儿掀翻世界第4!中国女篮晋级8强,赛后数据一目了然,最佳球员是她,不是王思雨

小七说篮球
2026-09-10 08:51:26
曝本西与国王的合同是非保障的 进入大名单可获100万美元薪水

曝本西与国王的合同是非保障的 进入大名单可获100万美元薪水

北青网-北京青年报
2026-09-10 09:05:07
2026-09-10 09:52:49
壹娱观察 incentive-icons
壹娱观察
想做泛娱乐产业的望远镜和声呐
2505文章数 5926关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

iPhone18 Pro系列价格公布:A20 Pro芯片 续航大幅提升

头条要闻

iPhone18 Pro系列价格公布:A20 Pro芯片 续航大幅提升

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭德纲被处罚2天,身边人传出好消息

财经要闻

银行新高!新一轮周期,刚开始!

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

家居
时尚
游戏
亲子
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

女人不管多大,都可以看看这些“条纹T恤”,非常减龄又简约

《星际火狐》免费更新支持四人组队参加联网战斗

亲子要闻

媳妇说以后她来管钱,每个月给我200零花钱,还得戒烟戒酒才行

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版