网易首页 > 网易号 > 正文 申请入驻

字节的互联网时代过去了!字节要被取代了,取代它的是token

0
分享至

字节要被取代了,取代它的是token。

Karpathy昨天在推上回了Python之父Guido一句话:LLM = CPU,Agent = 操作系统内核。

但他补了一个很关键的细节:

LLM处理的数据单位不是字节,是token。

这个操作系统的运行方式不是确定性的,而是统计性的。

这是一种底层计算的范式转移。


过去六十年,计算机的世界建立在字节上。

一个字符8个bit,精确,确定,不会出错。你写一个1,存进去就是1,读出来还是1。

整个互联网、所有软件、所有数据库,都建立在这种确定性上。

现在LLM来了。它的基本单位是token,不是字节。

token是模糊的,一个词可能是一个token,也可能被拆成两个。

它的输出是概率性的,同一个输入跑两遍可能得到不同的结果。

这就像从牛顿力学进入量子力学。

精确让位于概率,确定让位于统计。

Karpathy把LLM比作CPU,Agent比作操作系统内核。

如果顺着这个类比往下推:

传统计算机:CPU处理字节 → 内核调度进程 → 操作系统服务用户

AI时代:LLM处理token → Agent编排任务 → AI OS服务用户

底层的数据单位变了,上面的一切都得跟着变。

操作系统要重写,软件要重做,人和计算机的交互方式要重新设计。

与其说是对上一代的升级,不如说是彻底换了轨道。

BYTE ERA ➤ TOKEN ERA

字节的世界里,谁掌握更多的数据(字节)谁就赢。

token的世界里,谁掌握更多的token谁就赢。

字节的时代属于互联网,token的时代属于Agent。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
前阿森纳球星坦言:“我最大的错误就是加盟巴塞罗那”

前阿森纳球星坦言:“我最大的错误就是加盟巴塞罗那”

中场哨
2026-10-24 11:25:06
父亲攒下1600亿商业帝国,女儿13年败光1400亿,"农牧龙头"亏大了

父亲攒下1600亿商业帝国,女儿13年败光1400亿,"农牧龙头"亏大了

青眼财经
2026-10-23 13:14:35
价格崩了?昔日网红卖不动

价格崩了?昔日网红卖不动

火锅餐见
2026-10-23 11:30:55
2026-10-25 13:03:00
齐天候 incentive-icons
齐天候
酷爱学习的候先生
588文章数 162395关注度
往期回顾 全部

科技要闻

苹果首款折叠屏没能养肥黄牛

头条要闻

江苏姑娘隔着屏幕花3.8万在鹤岗买房 搬进去后傻眼

头条要闻

江苏姑娘隔着屏幕花3.8万在鹤岗买房 搬进去后傻眼

体育要闻

从乐透秀到总冠军再到没工作 一共要几年?

娱乐要闻

低调复出后,全红婵当众落泪

财经要闻

手机洗牌:华为苹果守住了 小米OV换打法

汽车要闻

大众安徽与众09正式上市 双十一权益价16.99万起

态度原创

艺术
健康
亲子
本地
公开课

艺术要闻

莫奈《鸢尾花》,拍出3.74亿元天价,刷新纪录!

痘痘能根治吗?皮肤科医生说实话

亲子要闻

越制止越哭闹,拆解孩子情绪对抗背后的三个心理真相

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版