网易首页 > 网易号 > 正文 申请入驻

图灵奖得主、强化学习之父Sutton最新访谈:合成数据是巨大错误,大模型只完成了四分之一的智能

0
分享至


来源:DeepTech深科技

运营/排版:何晨龙

当前,大模型主要通过预训练和后训练获得能力,上线后参数通常不再更新,只能借助上下文、知识库或重新训练适应变化。如何让 AI 在部署后持续学习,正成为行业需要突破的基础问题。

8 月 18 日,红杉资本旗下播客《Training Data》发布了一期围绕 AI 持续学习的对谈,受访者为强化学习奠基人、2024 年图灵奖得主 Rich Sutton。此外,参与访谈的嘉宾还有 Sutton 的前学生、Oak Lab 联合创始人 Khurram Javed,对谈由红杉资本合伙人 Sonya Huang 和 Alfred Lin 主持。

访谈从 Sutton 2019 年发表的《苦涩的教训》谈起,延伸至合成数据、世界模型和持续学习,并讨论智能体如何从真实经验中形成抽象概念。Sutton 认为,部署后便停止改变的模型,还称不上完整的智能系统。大模型虽是重要突破,却主要解决了语言能力,只覆盖智能的一部分。

基于这一判断,Sutton 正将持续学习推进为一条完整的技术路线。就在上个月,,并提出以经验学习、时间抽象和规划为核心的 OaK 架构,希望智能体能从连续经历中实时学习,不断更新认知并改进决策。

“止步不前”的智能

在今天,大模型看起来无所不知,却有一个容易被忽略的特点:它们的大部分能力都在上线前形成,经过预训练和后训练后,模型参数便基本固定。此后即使每天接触大量用户和新信息,也不会像人一样把这些经历转化为新的长期能力。


图|访谈现场(来源:YouTube)

Sutton 认为,这种静态范式混淆了知识与学习的边界。尽管模型可以记住一段对话,也可以借助外部知识库回答最新问题,但这些都不等于真正的学习。





Oak Lab 要实现持续学习




图|Oak Lab首页(来源:公司官网)

这也正是 Oak Lab 的核心使命。这家成立于 2026 年 7 月的初创公司,目标是在五到十年内打造出万亿参数规模、运行功耗仅 20 瓦的持续学习心智模型。


参考资料:

1.https://www.youtube.com/watch?v=xH7U7w9Qzlo

2.https://oaklab.ai/mission

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
被身家亿万亲爹吸血多年,现37岁无人问津的释小龙,到底做错了啥

被身家亿万亲爹吸血多年,现37岁无人问津的释小龙,到底做错了啥

草莓信箱
2026-09-05 09:58:06
太可恶!男子随身携带剪刀,在上海医院专挑幼童下手!恶行不止一起

太可恶!男子随身携带剪刀,在上海医院专挑幼童下手!恶行不止一起

上观新闻
2026-09-06 11:46:28
羽协4个月3人被查!消失9年,带出92个冠军的李永波,今现状如何

羽协4个月3人被查!消失9年,带出92个冠军的李永波,今现状如何

皮皮电影
2026-09-06 12:10:21
中国女篮4分险胜!全队25次失误仍赢球,韩旭狂轰22分14板

中国女篮4分险胜!全队25次失误仍赢球,韩旭狂轰22分14板

体坛小李
2026-09-06 22:27:31
王健林这辈子最失败、也最后悔的投资,恐怕就是分别给了王思聪、张艺谋和董明珠每人5个亿

王健林这辈子最失败、也最后悔的投资,恐怕就是分别给了王思聪、张艺谋和董明珠每人5个亿

谈史论今1
2026-08-16 20:23:49
北京夏联83-78青岛 球员评价:4人优秀,3人及格,2人低迷

北京夏联83-78青岛 球员评价:4人优秀,3人及格,2人低迷

篮球资讯达人
2026-09-06 22:14:51
张雪机车周末双登领奖台 2026世界超级摩托车锦标赛法国站第二回合完赛

张雪机车周末双登领奖台 2026世界超级摩托车锦标赛法国站第二回合完赛

封面新闻
2026-09-06 21:50:25
碧桂园若爆雷,问题大过恒大!看到许家印结局,杨氏父女疯狂求生

碧桂园若爆雷,问题大过恒大!看到许家印结局,杨氏父女疯狂求生

铭记历史呀
2026-09-05 18:54:06
2027年运势最强的4个生肖!自带金运加持,贵人财神爷庇护!

2027年运势最强的4个生肖!自带金运加持,贵人财神爷庇护!

毅谈生肖
2026-09-06 09:33:42
媒体人直言:张宇辰该早点去打高水平比赛

媒体人直言:张宇辰该早点去打高水平比赛

晚风知我意21
2026-09-05 22:35:35
明天A股就开盘!就问你怕不怕!

明天A股就开盘!就问你怕不怕!

龙行天下虎
2026-09-06 19:52:11
关于两岸统一,黄智贤交底后,邱毅发声亮了,不简单

关于两岸统一,黄智贤交底后,邱毅发声亮了,不简单

观星赏月
2026-09-06 14:08:28
天狂有雨,人狂有祸:人再有本事,也不要得罪这四种人,切记!

天狂有雨,人狂有祸:人再有本事,也不要得罪这四种人,切记!

金沛的国学笔记
2026-09-05 18:20:17
13亿没白交:保变被印度掏空技术扫地出门,如今新规焊死技术闸门

13亿没白交:保变被印度掏空技术扫地出门,如今新规焊死技术闸门

无情有思ss
2026-08-19 06:21:47
NBA总决赛最强5次个人表演:乔丹场均41分仅第二,第一却没夺冠

NBA总决赛最强5次个人表演:乔丹场均41分仅第二,第一却没夺冠

兵哥篮球故事
2026-09-06 20:26:11
撒贝宁:本以为生了龙凤胎已经够幸福,没想到,如今幸福又升级了

撒贝宁:本以为生了龙凤胎已经够幸福,没想到,如今幸福又升级了

白面书誏
2026-09-06 13:20:56
折叠屏iPhone系统界面提前曝光?这些细节暴露真假

折叠屏iPhone系统界面提前曝光?这些细节暴露真假

科技兽
2026-09-06 23:05:27
女人假装高潮的3个信号,看懂后让她体验一次真正的爽与满足

女人假装高潮的3个信号,看懂后让她体验一次真正的爽与满足

精彩分享快乐
2026-09-04 12:00:12
阿里42岁前高管美国失踪,发现时死于车内,好友:半月前就不对劲

阿里42岁前高管美国失踪,发现时死于车内,好友:半月前就不对劲

大鱼简科
2026-09-06 09:29:49
钾是香蕉28倍!入秋隔天吃这菜,腿脚有劲精神足!

钾是香蕉28倍!入秋隔天吃这菜,腿脚有劲精神足!

美食店主
2026-09-05 08:18:38
2026-09-06 23:55:00
人工智能学家 incentive-icons
人工智能学家
人工智能领域权威媒体
5027文章数 37516关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

CHINA GT发生重大撞车起火事故 救援人员因为害怕逃离

头条要闻

CHINA GT发生重大撞车起火事故 救援人员因为害怕逃离

体育要闻

3.9秒绝平!杨舒予18+5成女篮救世主

娱乐要闻

杨紫获白玉兰影后!爸爸:累了就回家

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

亲子
艺术
家居
数码
公开课

亲子要闻

工程车小故事:淘气的小警车

艺术要闻

日本第7大城市再添新地标!OMA设计

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

网购诈骗方式升级:新套路让人防不胜防!近万元RTX 5080变保温杯

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版