网易首页 > 网易号 > 正文 申请入驻

图灵奖得主、强化学习之父Sutton最新访谈:合成数据是巨大错误,大模型只完成了四分之一的智能

0
分享至


来源:DeepTech深科技

运营/排版:何晨龙

当前,大模型主要通过预训练和后训练获得能力,上线后参数通常不再更新,只能借助上下文、知识库或重新训练适应变化。如何让 AI 在部署后持续学习,正成为行业需要突破的基础问题。

8 月 18 日,红杉资本旗下播客《Training Data》发布了一期围绕 AI 持续学习的对谈,受访者为强化学习奠基人、2024 年图灵奖得主 Rich Sutton。此外,参与访谈的嘉宾还有 Sutton 的前学生、Oak Lab 联合创始人 Khurram Javed,对谈由红杉资本合伙人 Sonya Huang 和 Alfred Lin 主持。

访谈从 Sutton 2019 年发表的《苦涩的教训》谈起,延伸至合成数据、世界模型和持续学习,并讨论智能体如何从真实经验中形成抽象概念。Sutton 认为,部署后便停止改变的模型,还称不上完整的智能系统。大模型虽是重要突破,却主要解决了语言能力,只覆盖智能的一部分。

基于这一判断,Sutton 正将持续学习推进为一条完整的技术路线。就在上个月,,并提出以经验学习、时间抽象和规划为核心的 OaK 架构,希望智能体能从连续经历中实时学习,不断更新认知并改进决策。

“止步不前”的智能

在今天,大模型看起来无所不知,却有一个容易被忽略的特点:它们的大部分能力都在上线前形成,经过预训练和后训练后,模型参数便基本固定。此后即使每天接触大量用户和新信息,也不会像人一样把这些经历转化为新的长期能力。


图|访谈现场(来源:YouTube)

Sutton 认为,这种静态范式混淆了知识与学习的边界。尽管模型可以记住一段对话,也可以借助外部知识库回答最新问题,但这些都不等于真正的学习。





Oak Lab 要实现持续学习




图|Oak Lab首页(来源:公司官网)

这也正是 Oak Lab 的核心使命。这家成立于 2026 年 7 月的初创公司,目标是在五到十年内打造出万亿参数规模、运行功耗仅 20 瓦的持续学习心智模型。


参考资料:

1.https://www.youtube.com/watch?v=xH7U7w9Qzlo

2.https://oaklab.ai/mission

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
建议把大学生维权纳入扫黑除恶范围,这得心肠歹毒到啥程度才能想得出?

建议把大学生维权纳入扫黑除恶范围,这得心肠歹毒到啥程度才能想得出?

壹家言
2026-09-05 14:59:26
被立案调查才24天,53岁郭德纲再迎噩耗!

被立案调查才24天,53岁郭德纲再迎噩耗!

叨唠
2026-09-04 07:00:20
冻龄神话!庾澄庆携爱妻亮相张清芳60岁生日会,状态好似30岁小伙

冻龄神话!庾澄庆携爱妻亮相张清芳60岁生日会,状态好似30岁小伙

猪小艳吖
2026-09-06 12:22:04
就业降级上热搜,胖东来900个基层岗位8万人应聘,江浙沪重回月薪3000时代,劳务派遣成主流

就业降级上热搜,胖东来900个基层岗位8万人应聘,江浙沪重回月薪3000时代,劳务派遣成主流

Mr王的饭后茶
2026-09-05 18:17:40
终于破案!李月汝护照为啥非得寄递?隐情披露,宫鲁鸣错失抢救期

终于破案!李月汝护照为啥非得寄递?隐情披露,宫鲁鸣错失抢救期

动物奇奇怪怪
2026-09-06 08:38:20
人社部倾斜低待遇群体,定额调整占比为何向45%-60%靠拢?

人社部倾斜低待遇群体,定额调整占比为何向45%-60%靠拢?

记录生活日常阿蜴
2026-09-07 00:57:53
27岁博主去世引关注,发病到死亡仅1天多!妻子痛悔"全家都被误导了""两个女儿还太年幼"……

27岁博主去世引关注,发病到死亡仅1天多!妻子痛悔"全家都被误导了""两个女儿还太年幼"……

鲁中晨报
2026-09-05 16:50:05
日本网民:手机没电时的白嫖神技?这不是偷电吗?

日本网民:手机没电时的白嫖神技?这不是偷电吗?

2ch中文酱
2026-09-07 00:54:15
钱再多有什么用?河南企业家崔培军现状曝光,给所有老板上了一课:赚再多钱也换不来一样东西

钱再多有什么用?河南企业家崔培军现状曝光,给所有老板上了一课:赚再多钱也换不来一样东西

背包旅行
2026-08-01 17:10:16
千呼万唤!他要来广东开演唱会了!

千呼万唤!他要来广东开演唱会了!

东莞好生活
2026-09-06 22:16:06
命中关键三分难掩全场30分钟拉胯,这种后卫打国家队首发令人悲哀

命中关键三分难掩全场30分钟拉胯,这种后卫打国家队首发令人悲哀

弄月公子
2026-09-06 22:58:00
这就是赤裸裸的现实!工商银行已经到了最危险的时候?

这就是赤裸裸的现实!工商银行已经到了最危险的时候?

财经保探长
2026-08-23 21:43:55
安踏,快被自己养大的“小弟”挤下主位了!

安踏,快被自己养大的“小弟”挤下主位了!

可乐爱微笑
2026-09-03 22:56:06
发行价4.39元,这只新股中签率或成今年沪市最高

发行价4.39元,这只新股中签率或成今年沪市最高

全栈遛狗员
2026-09-06 20:50:59
梅西助攻+任意球中框!卡塞米罗进头球苏亚雷斯破门,球队2-2爆冷

梅西助攻+任意球中框!卡塞米罗进头球苏亚雷斯破门,球队2-2爆冷

体育知多少
2026-09-06 11:08:05
心理学:男人越到中年越离不开“性”,真相不是欲望更旺,也不是精力过剩,而是他在用身体的证明,对抗那个“我正在变得不再重要”的恐慌

心理学:男人越到中年越离不开“性”,真相不是欲望更旺,也不是精力过剩,而是他在用身体的证明,对抗那个“我正在变得不再重要”的恐慌

心理观察局
2026-08-28 06:15:03
“儿子只能用卫生纸自娱自乐了”,陪读爸爸晒窒息一幕,还不自知

“儿子只能用卫生纸自娱自乐了”,陪读爸爸晒窒息一幕,还不自知

泽泽先生
2026-09-06 12:24:18
四妻共侍一夫仅开胃菜,何超琼曝家族猛料,难怪至今不敢再婚生子

四妻共侍一夫仅开胃菜,何超琼曝家族猛料,难怪至今不敢再婚生子

社会日日鲜
2026-09-06 09:23:22
2-1!1.38亿新援建功,切尔西赛季首败,哈弗茨反戈一击,阿森纳3连胜

2-1!1.38亿新援建功,切尔西赛季首败,哈弗茨反戈一击,阿森纳3连胜

我的护球最独特
2026-09-07 01:35:59
几千块真的可以难倒英雄汉!东莞父亲掏不出女儿高中9300元学费急哭,兜里仅剩3000元

几千块真的可以难倒英雄汉!东莞父亲掏不出女儿高中9300元学费急哭,兜里仅剩3000元

捣蛋窝
2026-09-01 17:05:01
2026-09-07 02:23:00
人工智能学家 incentive-icons
人工智能学家
人工智能领域权威媒体
5027文章数 37516关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

中尼两国遇难失联人数为何相差如此大 专家解读

头条要闻

中尼两国遇难失联人数为何相差如此大 专家解读

体育要闻

3.9秒绝平!杨舒予18+5成女篮救世主

娱乐要闻

杨紫获白玉兰影后!爸爸:累了就回家

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

游戏
时尚
艺术
房产
家居

一台PS5的结局:败给家人拔电源 暑假工心血付诸东流

金秋最流行的鞋子,“红色”更时髦!

艺术要闻

张大千的终极秘密:心中没“仙气”,画一万遍也白搭!他这句话点醒了无数人!

房产要闻

突发重磅!海口出台楼市新政!

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版