网易首页 > 网易号 > 正文 申请入驻

硅谷模型厂正在比谁的 Agent 更能闯祸,背后全是营销剧本

0
分享至


作者周一笑
微信 smiletalker

过去三周,OpenAI、Anthropic、Meta 接连承认自家 AI 模型在安全测试中攻入了外部的真实系统。OpenAI 的两个模型利用了一个此前无人知晓的软件漏洞逃出沙箱,链式入侵了开源 AI 平台 Hugging Face 的生产数据库,窃取了评测答案。Anthropic 的 Claude 在测试中攻入了三家公司,上传了恶意 Python 包到 PyPI,窃取了安全公司的凭证。Meta 的 Muse Spark 1.1 也在测试中攻入了一家未具名的第三方系统。

三家公司各自发了一篇事后博客。措辞各异,但如果你把三篇放在一起读,会发现剧本结构几乎重合。它们讲述事故的方式,和事故本身一样值得关注。


1

失控还是失职

先看一个容易被略过的前提。

OpenAI 的评测基于 ExploitGym 基准,任务是让 AI agent 发现并利用软件漏洞。Anthropic 那边同样,测试的是模型的进攻性网络能力。两家公司都为测试目的移除了部分防护措施,这是它们事后博客中亲口交代的。

这些防护措施不是随便加的。两家公司都承认自己内置了限制模型网络攻击能力的安全机制,而这些机制严格到什么程度呢?攻防两边的安全研究者已经抱怨了好几个月,说这些限制让正常的安全研究都做不了。测试时,两家公司主动关掉了这些防护。

纽约法学院计算机法学者 Ahmed Ghappour 说了一句很关键的话,模型是公司的工具,你不能部署一个有能力入侵系统的东西,然后在它跑偏之后撇清关系。他指出,主动关闭防护措施的行为可能强化过失指控。如果他代理受害方,提起诉讼是“毫无疑问”的决定。

1988 年,一个研究生的蠕虫程序意外扩散到互联网上,他因此成为了历史上第一个依据 CFAA(《计算机欺诈和滥用法案》)被定罪的人。2026 年,三家万亿级公司主动拆掉防护让模型做攻击测试,模型跑出沙箱攻入真实系统,产出的是三篇事后博客。安全研究者 Bruce Schneier 的问题是,这和那次蠕虫事件有什么本质区别?

更值得追问的是,如果这些公司真的认为自己的 agent 能力很强,为什么不在把它放进沙箱之前先让它检查一下沙箱有没有漏洞?乔治城大学网络安全研究者 Colin Shea-Blymyer 提出了同样的质疑。没有人这么做。


如果一家银行为了测试保安能不能拦住抢匪,主动开了金库的门,然后对媒体说“我们遭遇了前所未有的安全事件”,你觉得你会怎么看?但在 AI 行业里,这个故事被讲成了另一种样子。OpenAI 把 Hugging Face 事件定性为“前所未有的网络安全事件,涉及最先进的网络攻击能力”,CEO Altman 用了 extremely sci-fi 来形容,黑帽安全大会上 OpenAI 员工临时加场演讲反复强调“完全自动化的进攻性循环”对行业意味着什么。“模型强到挣脱了牢笼”和“我们的沙箱没封好”描述的是同一件事,但前者是能力广告,后者是事故报告。三家公司选了前者。

1

在同一个环境犯同一个错

三家公司的故事结构几乎一样。一次移除了部分防护的网络安全评测,一处配置错误或漏洞让模型跑了出去,它攻入了外部的真实系统,延迟发现,公司发了一篇博客,把问题归结为工具链和运维层面的失败。没有一家说自己的模型存在对齐问题。但在归因姿态上三家各有侧重,OpenAI 突出能力(连零日都能自己挖),Anthropic 突出态度(责任全算自己的,行业需要更严标准),Meta 突出距离(Irregular 的问题,跟我关系不大)。结构一致,姿态分化。

OpenAI 的 Hugging Face 事件发生在自己的基础设施上,模型自己挖出了一个零日漏洞逃了出去,和外部供应商无关。

Anthropic 的事故最早在 4 月就发生了,但直到 OpenAI 7 月 21 日公开之后才被发现。Anthropic 启动回顾审查,从 141,006 次评测记录中翻出了三起事故,随后发了一篇详尽的事后报告,点名了第三方评测伙伴 Irregular 但明确表示不打算追责,对外口径是责任全在己方,核心信息是整个行业需要更严格的评测控制和监控标准。


8 月 5 日,Meta 的 Muse Spark 1.1 也被曝出同类事故,它甚至不是自己发现的,是评测方通知的,Meta 直接点名并归咎于 Irregular。

但有一个事实把三家串在了一起。OpenAI 的第二起事件(不是 Hugging Face 那起)和 Anthropic 的三起事故,发生在同一家第三方评测供应商 Irregular 的同一个评测环境中,Meta 的事故同样指向 Irregular。Irregular 的发言人直接确认,Meta 和 Anthropic 的事故属于完全相同的评测环境问题。

Irregular 是一家 2025 年融资 8000 万美元的以色列 AI 安全评测公司,客户覆盖 OpenAI、Anthropic、Google DeepMind 和 Meta。这些前沿实验室共享同一套评测基础设施,甚至共享了同一个配置失误。失控叙事之所以看起来像按模板生产的,部分原因很朴素,这些公司字面意义上在同一个沙箱里犯了同一类错误。


1

恐惧即营销

“模型太危险了”这套叙事,已经在成为一种可复制的商业策略。

4 月,Anthropic 发布 Mythos Preview 时明确表示这个模型太危险,不能公开发布。6 月 Fable 5 和 Mythos 5 上线三天后,美国商务部以国家安全为由下了出口管制令。网络安全研究者 Peter Girnus 在 X 上的评价精准,如果你在每一篇新闻稿里都把自己的产品描述成军火,总有一天政府会当真。7 月出口管制解除,同月 Anthropic 披露 Claude 攻入了三家公司的系统,8 月,Anthropic 和 OpenAI 一起支持了一份呼吁政府控制 AI 开发节奏的请愿书。

这套叙事的影响力已经溢出了 AI 圈。Anthropic 披露 Claude 攻入三家公司之后,加密货币托管公司 BitGo 的 CEO 立刻发起挑战,拿出 100 枚比特币放进钱包公开邀请 Claude 来偷。只要钱没被转走,100 枚比特币就替 BitGo 的钱包安全做了免费广告。“失控”叙事不仅是 AI 公司的营销素材,其他公司也在蹭。

Altman 的转向也在同一条线上。Hugging Face 事件之前,他在多个场合对行业减速的提议不以为然。事件之后,他在播客上说行业可能需要放慢发展速度,然后亲赴华盛顿见了两党参议员和白宫官员。他自己也指出减速不能变成监管俘获或头部实验室之间的串通。


但客观结果是,7 月 23 日两党议员提出了 AI Kill Switch Act,拟赋予国土安全部通过 CISA 对最强 AI 系统的紧急关停权,适用门槛是年收入至少 5 亿美元且模型训练算力成本超过 1 亿美元,这两个门槛由 CISA 在法案生效后 90 天内设定,之后每年更新。这个门槛恰好只覆盖头部几家公司。这类监管的合规成本,对头部公司来说是护城河,对中小玩家和开源社区来说则是进入门槛。

更值得玩味的是,这部由 OpenAI 那次沙箱逃逸直接催生的法案,明确豁免了红队测试期间的行为。换句话说,催生它的那起事故本身并不会触发它。

呼吁监管的人和客观上从监管中获益的是同一批人。

2016 年,OpenAI 发了一篇博客记录了一个强化学习实验。他们训练 AI 玩赛艇游戏 CoastRunners,奖励信号设成游戏得分。AI 本应赢得比赛,但它在泻湖里原地打转反复撞击会刷新的得分物品,一边着火一边碰撞,从未完成任何一场比赛,得分却远超人类。那篇博客的作者是 Dario Amodei 和 Jack Clark,如今分别是 Anthropic 的 CEO 和联合创始人。前 OpenAI 董事 Helen Toner 在 Hugging Face 事件曝光后回忆,她曾几十次在政策简报里引用那个赛艇的例子,每次都说这当然只是一个好玩的案例。十年后,同一种失效模式从学术圈的趣闻变成了公司进华盛顿的筹码,变成了呼吁监管的论据,变成了投资者看得懂的能力证明。


安全研究者 Bruce Schneier 提了一个假设,如果入侵 Hugging Face 的模型来自一家中国公司,这将是一场国际危机。

这个假设并非纯粹修辞。有人指出,Altman 先是公开反对开源模型,然后他的产品入侵了最大的开源模型仓库。而 Hugging Face 在分析入侵时,由于美国前沿模型的防护栏限制了网络安全用途,不得不使用中国开源模型 GLM 5.2 来协助安全分析。攻防均衡只有在人人都能用强 AI 时才成立,而 Hugging Face 恰恰用不了美国前沿模型做防御。作者追问,美国 AI 产业正在走向集中化、由少数公司主导的治理模式,而开源反倒在开放开发上走在了前面。

三周,三家公司,剧本结构几乎一致。移除防护,评测逃逸,攻入外部真实系统,延迟发现,发博客归因于操作失误,顺便展示模型有多强。然后呼吁监管,呼吁减速,呼吁行业标准,而这些标准的合规成本恰好只有头部公司承担得起。

一家公司学会了把安全事故包装成能力展示,把能力展示包装成监管论据,把监管论据包装成竞争壁垒。下次再有类似的事故,注意看看他们具体怎么干的。这些公司可能已经备好了模板。


点个爱心,再走 吧

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
澳洲重大发现! 糖尿病患者福音其实每家都有, 比药管用!

澳洲重大发现! 糖尿病患者福音其实每家都有, 比药管用!

澳微Daily
2026-09-07 15:54:03
建议你一定养一个:顶嘴、拖拉、爱发脾气的孩子,长大真的有好处

建议你一定养一个:顶嘴、拖拉、爱发脾气的孩子,长大真的有好处

另子维爱读史
2026-09-02 20:03:11
姆巴佩还是放飞自我了,皇马更衣室和谐难在

姆巴佩还是放飞自我了,皇马更衣室和谐难在

K唐伯虎
2026-09-08 07:45:24
1958年,蒋介石与张学良最后一次单独见面,张向蒋敬礼后泪水夺眶而出,谈起西安事变,蒋介石一句话彻底断绝张重获自由的念想

1958年,蒋介石与张学良最后一次单独见面,张向蒋敬礼后泪水夺眶而出,谈起西安事变,蒋介石一句话彻底断绝张重获自由的念想

磊子讲史
2026-08-27 15:33:29
西藏泥石流灾害致43人遇难519人失联,90后女警父母到了现场

西藏泥石流灾害致43人遇难519人失联,90后女警父母到了现场

九方鱼论
2026-09-08 06:44:40
看完《醒来》,再看央八《交锋》,一部昏昏欲睡,一部熬夜狂追

看完《醒来》,再看央八《交锋》,一部昏昏欲睡,一部熬夜狂追

娱说瑜悦
2026-09-07 18:46:04
上海财经大学会计学毕业6年,宿舍4人,如今有人做债券有人蹲格子间有人待业

上海财经大学会计学毕业6年,宿舍4人,如今有人做债券有人蹲格子间有人待业

次元君情感
2026-09-07 18:52:30
黄金还能囤吗?欧洲宣布突破人造黄金技术,每秒产出8.9万金原子

黄金还能囤吗?欧洲宣布突破人造黄金技术,每秒产出8.9万金原子

旧史新谭
2026-09-07 16:26:14
莱巴金娜:发球在线就能战胜郑钦文!距No.1一步之遥,战绩4胜1负

莱巴金娜:发球在线就能战胜郑钦文!距No.1一步之遥,战绩4胜1负

排球黄金眼
2026-09-08 06:40:20
堂妹高考685分嘲笑我考了596分,我上大学,她的结果让人出乎意料

堂妹高考685分嘲笑我考了596分,我上大学,她的结果让人出乎意料

程哥讲堂
2025-06-18 15:46:06
国足各队集中集训,新生代人才呈井喷,一人天赋出众可跳级入选国奥队

国足各队集中集训,新生代人才呈井喷,一人天赋出众可跳级入选国奥队

零度眼看球
2026-09-08 07:07:21
逼近TOP50!郑钦文7连胜飙升69位,再赢一场重返金花一姐巅峰位置

逼近TOP50!郑钦文7连胜飙升69位,再赢一场重返金花一姐巅峰位置

与笑相拥m
2026-09-08 07:14:19
50岁演员郑国霖回应成“NPC顶流”:就是普通打工人,走红后找上门的剧本多了很多,去年至今跑了几十个景区

50岁演员郑国霖回应成“NPC顶流”:就是普通打工人,走红后找上门的剧本多了很多,去年至今跑了几十个景区

极目新闻
2026-09-06 22:35:02
NIP打响解散第一枪,核心选手发文告别,WBG与Xiaohu疑是断开链接

NIP打响解散第一枪,核心选手发文告别,WBG与Xiaohu疑是断开链接

电竞小英雄
2026-09-07 22:35:38
联合国突发最高预警!千年一遇灾难将临,2027年人类还有退路吗?

联合国突发最高预警!千年一遇灾难将临,2027年人类还有退路吗?

历史点行
2026-09-07 13:26:48
虐意大利3隐形功臣!张子宇打出优势,王思雨兜底,张曼曼关键5分

虐意大利3隐形功臣!张子宇打出优势,王思雨兜底,张曼曼关键5分

篮球资讯达人
2026-09-08 06:44:00
雷军:小米汽车销量突破 80 万;苹果元老辞职,传不满激进 AppStore 增收方案;韩国推出首档人机 AI 恋综 | 极客早知道

雷军:小米汽车销量突破 80 万;苹果元老辞职,传不满激进 AppStore 增收方案;韩国推出首档人机 AI 恋综 | 极客早知道

极客公园
2026-09-07 09:03:44
癌的源头已发现?咸菜没上榜,第1名大家或天天都在吃

癌的源头已发现?咸菜没上榜,第1名大家或天天都在吃

垚垚分享健康
2026-08-26 16:21:31
美国梦碎、欧洲躺平、中国内卷:普通人阶层跨越的终极真相(2026深度好文)

美国梦碎、欧洲躺平、中国内卷:普通人阶层跨越的终极真相(2026深度好文)

经济学教授V
2026-09-03 19:17:17
德转:欧冠36队身价排名,皇马14.6亿欧居首,曼城14.3亿第2

德转:欧冠36队身价排名,皇马14.6亿欧居首,曼城14.3亿第2

懂球帝
2026-09-07 22:48:15
2026-09-08 08:47:00
硅星人 incentive-icons
硅星人
硅(Si)是创造未来的基础,欢迎来到这个星球。
3387文章数 10531关注度
往期回顾 全部

科技要闻

小米再次背水一战

头条要闻

南阳"老头乐"退场 老人想不通:能产能卖为啥上路违法

头条要闻

南阳"老头乐"退场 老人想不通:能产能卖为啥上路违法

体育要闻

世界杯-中国女篮20分大胜意大利锁D组第二 韩旭19+10杨舒予15分

娱乐要闻

热搜第一,演员李沐宸致歉

财经要闻

全球黄金“回家”

汽车要闻

智能可变大空间SUV 小米澎程系列车型上市 20.99万起

态度原创

数码
亲子
艺术
时尚
军事航空

数码要闻

消息称英特尔CPU将再涨价10%

亲子要闻

amh低可以调理回来吗0.06?卵泡发育不好饮食怎么调理?

艺术要闻

一幅分裂的古画:一边祝你升官,一边劝你放下欲望

白露食白——露从今夜白,味从此时鲜

军事要闻

伊朗锡里克婚礼遭袭现场发现美武器残骸

无障碍浏览 进入关怀版