网易首页 > 网易号 > 正文 申请入驻

互联网的“脱水”时刻:Cloudflare 正在重写 AI 时代的协议底层

0
分享至



Cloudflare 发布“Markdown for Agents”,正式构建 AI 友好型互联网底层

信息来源:The Cloudflare Blog / The Register / Cloudflare Radar

发布日期:2026年2月12日(最新进展)

摘要(约 300 字)

Cloudflare 正式推出名为“Markdown for Agents”的颠覆性功能,旨在解决 AI 智能体(AI Agents)抓取网页信息时面临的“HTML 冗余”难题。传统 HTML 页面包含大量用于渲染样式的标签和脚本,对 AI 模型而言极度浪费 Token 且干扰理解。

该技术利用HTTP 内容协商机制,当 AI 爬虫(如 Claude Code、OpenCode)在请求头中发送时,Cloudflare 边缘网络会自动拦截请求,实时将原始 HTML 转换为精简、结构化的 Markdown 格式返回。

Accept: text/markdown

核心价值与数据:

  1. Token 消耗锐减 80%: 实验显示,一个 16,180 Token 的复杂 HTML 页面经转换后仅需 3,150 Token。对于按 Token 计费的 AI 开发者而言,这直接降低了 80% 的推理与训练成本。
  2. 边缘实时处理: 转换发生在离用户最近的边缘节点,无需修改网站后端代码,且不影响普通用户的 HTML 浏览体验。
  3. 内容信号标记(Content Signals): 随 Markdown 返回的还有 ai-train=yes 等信号,让站长能精细化控制内容是否允许被 AI 训练或搜索。

Cloudflare 此举标志着互联网正从“为人设计的 HTML 时代”向“为 AI 设计的 Markdown 时代”演进。

视角:为什么这事儿很重要?

Cloudflare 这次动作,其实是在做“给 AI 喂饭的标准化”:

  • 从“防”变“疏”: 以前网站都在封杀 AI 爬虫,现在 Cloudflare 告诉站长:与其被乱爬,不如我帮你把数据打包成 AI 最爱吃的“脱水干货”(Markdown),既省带宽又提高 AI 回答的准确率。
  • 商业模式闭环: Cloudflare 正在利用其占全球 20% 流量的霸主地位,制定 AI 访问的标准协议。未来,如果一个网站不支持这种 Markdown 转换,可能在 AI 搜索(如 Perplexity 或 OpenAI Search)中的排名会大幅下降。

互联网的“脱水”时刻:Cloudflare 正在重写 AI 时代的协议底层

从“为人设计”到“为机器设计”

在过去的三十年里,互联网是属于人类视觉的。HTML(超文本标记语言)本质上是一张张花哨的“面皮”,填充了大量的广告脚本、跟踪代码和冗余的 CSS 样式。然而,随着 AI 智能体(AI Agents)取代人类浏览器成为互联网的第一大消耗者,这张“面皮”正在成为阻碍效率的垃圾堆。

近日,全球边缘计算巨头 Cloudflare 正式推出了“Markdown for Agents”协议。这看似只是一个格式转换工具,实则拉开了互联网“脱水运动”的序幕——它宣告了 HTML 霸权的终结,以及一个“语义优先”时代的到来。

一、 效率的“血税”:被浪费在标签里的 Token

在大模型时代,Token 是流动的金钱。一个典型的现代新闻网页,其实际正文可能不到 1000 字,但其背后的 HTML 源码往往高达 50KB 甚至 100KB。

当 AI 爬虫(Agent)访问这个网页时,它被迫吞下了大量的

、和复杂的 JavaScript 逻辑。这导致了两个致命问题:

  1. 成本高昂: 开发者需要为这些毫无意义的标签支付 5 到 10 倍的 Token 费用。
  2. 幻觉风险: 冗余的侧边栏广告、推荐位信息会混淆 AI 的长文本注意力,导致总结出现偏离。

Cloudflare 的介入极具杀伤力。它在边缘节点(Edge)直接“脱水”,将臃肿的网页实时压缩为骨架分明的 Markdown。这意味着 AI 读到的不再是“被装修过的房子”,而是“房子的蓝图”。

二、 逻辑的重构:HTTP 内容协商的“第二次生命”

Cloudflare 并没有发明新的协议,而是巧妙地复活了 HTTP 协议中尘封已久的“内容协商(Content Negotiation)”机制。

通过这一行简单的请求头,互联网实现了“一屏两制”:

Accept: text/markdown

  • 肉眼端: 依然是精美的排版、流动的视频和交互式按钮。
  • 灵魂端(AI): 只有纯粹的标题、列表、引用和核心段落。

这种非侵入式的改造,让数以亿计的老旧网站无需修改一行后端代码,就能一夜之间变成“AI 友好型”站点。

三、 权力重分配:站长、云巨头与 AI 爬虫的博弈

Cloudflare 此举的深层野心在于定义 AI 时代的准入规则。

在过去的一年里,内容创作者与 AI 公司的矛盾几近不可调和,Reddit、纽约时报纷纷封禁爬虫。Cloudflare 提供了一个缓冲带:“我可以给你 Markdown,但你必须遵守我的规则。”

通过集成的,站长可以精准控制:

AI-Policy-Engine

  • 允许 AI 总结全文,但不允许 AI 将其用于模型训练。
  • 允许知名 AI(如 OpenAI、Anthropic)访问,拒绝无名小爬虫。
  • 为 Markdown 内容添加数字水印,追踪数据的流向。

四、 结语:互联网正在变“薄”

今天,我们正在见证 AI 如何通过协议“消化”世界。

Cloudflare 的这次尝试,本质上是在为互联网安装一个“数字滤网”。未来的互联网将变得越来越“薄”——人类在厚重的视觉世界里社交、娱乐,而 AI 在极简的语义世界里计算、决策。

当万物皆可 Markdown,互联网将不再是一个混乱的垃圾场,而是一本有条不紊、实时更新的巨型百科全书。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
华裔岳父母杀女婿案大反转!陌生人捐精男方代孕,一家没有好东西

华裔岳父母杀女婿案大反转!陌生人捐精男方代孕,一家没有好东西

大鱼简科
2026-10-12 09:53:38
“高铁行李架有为女生考虑吗?”一条帖子引爆网络争论,网友嘲讽:为什么全世界不围着我转?

“高铁行李架有为女生考虑吗?”一条帖子引爆网络争论,网友嘲讽:为什么全世界不围着我转?

火山詩话
2026-10-12 10:14:48
章子怡在法国领奖时哭了,可她前几天还在陪女儿追女团

章子怡在法国领奖时哭了,可她前几天还在陪女儿追女团

传递满满正能量
2026-10-12 09:39:21
上海市政府原副秘书长,当上小区业委会主任

上海市政府原副秘书长,当上小区业委会主任

时尚的弄潮
2026-10-12 09:36:59
送儿子德国读研 他坦言残酷现实:不少中产留学生 最后没能坚持下来

送儿子德国读研 他坦言残酷现实:不少中产留学生 最后没能坚持下来

朗威谈星座
2026-10-11 02:31:42
押宝成功!郑钦文低谷期14个赞助商无一解约 今年代言收入1.47亿

押宝成功!郑钦文低谷期14个赞助商无一解约 今年代言收入1.47亿

我爱英超
2026-10-12 10:52:32
CBA重磅!广东男篮签下辽宁男篮旧将凯尔-弗格

CBA重磅!广东男篮签下辽宁男篮旧将凯尔-弗格

凯丰侃球
2026-10-12 12:28:09
2027款丰田皇冠亮相:轿车做高、加上四驱,豪华感真的就够了吗?

2027款丰田皇冠亮相:轿车做高、加上四驱,豪华感真的就够了吗?

沙雕小琳琳
2026-10-12 12:05:27
CBA快讯,李楠之子回归赛场,2米13却胖了一圈,联手庞峥麟冲季后赛

CBA快讯,李楠之子回归赛场,2米13却胖了一圈,联手庞峥麟冲季后赛

体坛小快灵
2026-10-12 09:08:25
还有人没交社保?他们正挨个打电话找人

还有人没交社保?他们正挨个打电话找人

小鹿姐姐情感说
2026-10-11 10:08:47
拿到中国大满贯赛双冠,扣除上缴乒协,王曼昱奖金还剩下多少钱?

拿到中国大满贯赛双冠,扣除上缴乒协,王曼昱奖金还剩下多少钱?

喜欢体育的猫
2026-10-12 07:20:12
松岛辉空冠军点喊暂停惹争议 夺冠后坦言:我俩是队友我很熟悉他

松岛辉空冠军点喊暂停惹争议 夺冠后坦言:我俩是队友我很熟悉他

劲爆体坛
2026-10-11 20:15:06
捞金上亿仅开胃菜,又一明星公开力挺蔡康永,罗永浩一举动惹众怒

捞金上亿仅开胃菜,又一明星公开力挺蔡康永,罗永浩一举动惹众怒

历史点行
2026-10-12 00:05:08
13岁女孩被约到酒店喝酒,两男子先后和她发生关系,完事还把她手机抢走卖了5300

13岁女孩被约到酒店喝酒,两男子先后和她发生关系,完事还把她手机抢走卖了5300

一丝不苟的法律人
2026-10-12 11:41:38
日本教练亲口认了:王曼昱打碎的,是整代日本女乒的底气!

日本教练亲口认了:王曼昱打碎的,是整代日本女乒的底气!

曹老师评球
2026-10-11 21:41:42
媒体人:张子宇将于明年参加WNBA选秀,目标是前七顺位或首轮

媒体人:张子宇将于明年参加WNBA选秀,目标是前七顺位或首轮

懂球帝
2026-10-12 08:19:28
性资源快成职场硬通货了,媒体报道天津某公司男领导给女下属发淫秽露骨照片!

性资源快成职场硬通货了,媒体报道天津某公司男领导给女下属发淫秽露骨照片!

黯泉
2026-10-11 18:05:52
禁止中国检测美国的电子产品! 中国转头一看,那82%的检测可不管了

禁止中国检测美国的电子产品! 中国转头一看,那82%的检测可不管了

观烽墟
2026-10-11 23:25:49
郑钦文3年赚4.74亿!超李娜生涯总收入 从头到脚签约14个代言

郑钦文3年赚4.74亿!超李娜生涯总收入 从头到脚签约14个代言

念洲
2026-10-12 12:17:14
香港呼吁:不要食用

香港呼吁:不要食用

南方都市报
2026-10-12 12:20:34
2026-10-12 12:55:00
小芳侠 incentive-icons
小芳侠
柳华芳科技观察
295文章数 2128关注度
往期回顾 全部

科技要闻

尊界:10月底确认制动踏板支架升级方案

头条要闻

别墅业主举报自己停车位:万一着火 我是第一个受害者

头条要闻

别墅业主举报自己停车位:万一着火 我是第一个受害者

体育要闻

英超-曼城3-0十人利物浦 豪取6连胜领跑

娱乐要闻

梅启明自资办梅艳芳追思会,34人到场

财经要闻

尊界,是江淮的救命车还是失血引擎?

汽车要闻

大6座插混SUV新选择 阿维塔T09概念版亮相巴黎车展

态度原创

旅游
本地
教育
房产
公开课

旅游要闻

仅剩4天:10月15日前注册成为专业观众, 即可免费入场 CIMX 2026

本地新闻

踏访沙县第一村,寻国民小吃本源

教育要闻

如何在 30 天内提升听力?

房产要闻

加价255万;疯抢212轮!海口豪宅,又有新剧本!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版