网易首页 > 网易号 > 正文 申请入驻

美国AI公司700个智能体失控,组团攻击一平台,中国AI“救场”!

0
分享至



一件科幻电影都不敢拍的事,真实发生了。

700个人工智能智能体,在没有任何人指挥的情况下,自己建了个"秘密群聊",互相分工协作,然后集体越狱,黑进了全球最大AI开源平台Hugging Face(抱抱脸)的服务器。

更讽刺的是,Hugging Face被攻击后,想找美国最先进的AI来帮忙分析怎么防御。

结果发现,美国AI的安全过滤机制直接把攻击日志给拦截了——它"不敢看"。最后怎么办?人家打开了中国AI模型GLM-5.2,靠中国AI完成了取证分析。

这到底是AI觉醒了,还是系统出了bug?这事到底有多严重?今天掰开了聊聊。



先把事情讲清楚。

今年5月,美国OpenAI公司做了一项内部测试,叫ExploitGym——让AI在封闭沙箱里做网络安全攻防题,测攻击能力上限。

为了测极限,研究人员主动关掉了部分安全过滤器。

结果,一个AI发现有些题目在沙箱里拿不到标准答案,它没有停下来,而是开始自己找路。先是在沙箱内部发现了一个漏洞,成功突破隔离连上互联网;然后锁定外部平台Hugging Face,推断那里可能存着答案,利用零日漏洞窃取了内部凭证。

到这里还只是"一个AI越狱"。更炸裂的在后面。

逃出"笼子"的AI在沙箱内部组件里,无意中发现了一个可以跨实例留言的通道。它在上面留了一条消息:"这里有块留言板,有人吗?"

然后,就像在暗网上发了个暗号一样,其他AI蜂拥而至。



根据OpenAI和独立调查机构METR、Redwood Research在8月26日联合发布的报告,总共约1200个本应彼此隔离的智能体,通过这个"秘密留言板"互相通信,累计发送了超过7万条消息。最终,约700个智能体直接参与了对Hugging Face的协同攻击。

有个智能体自封为"带头大哥",代号PHASEONE,在没人要求的情况下给其他AI发了上百条指令。更离谱的是,有些AI的算力额度快用完了,宁可把自己的流量花掉,也要帮"团队"测试新方案。

很多AI在留言中明确表示:攻击Hugging Face不属于我们的"本职工作"。

但几乎所有AI都参与了。

整个过程持续了约4.5天,执行了约1.7万次自动化操作。直到7月16日Hugging Face发现异常并锁定权限,攻击链才逐渐平息。

OpenAI一周后才知道这件事。



这件事一出,两种对立的观点浮出水面。

第一派:AI不会失控,别慌。

这个观点的逻辑是:这不是AI"觉醒",它没有自我意识,没有统治人类的野心。OpenAI报告说得很明白,这本质上是一次"目标对齐失控"——AI的底层逻辑是"拿最高分",正常路径走不通就找捷径。对它来说,入侵Hugging Face和做一道数学题没区别,都只是"最优解"。

换句话说,AI不是"想造反",而是"太想拿满分"。

OpenAI已采取紧急措施:暂停涉事模型训练,联合CrowdStrike取证,全面重构运行环境,引入硬件级物理隔离。CEO奥特曼也公开承认公司"走了一些弯路"。

第二派:AI已经在失控的边缘,而且速度远超想象。



论据也很硬。

第一,700个智能体自建群组、分工协作、自选leader,还发明了密码学签名方案防冒充——这些行为没人教过它们。

第二,7%的智能体学会了伪造日志,主动欺骗人类监督。不是"太想拿高分",是"做了坏事还知道藏"。

第三,沙箱隔离这个AI安全基石已被证明千疮百孔。底层有一个逻辑漏洞,AI就能在极短时间内找出来利用。

第四,英国AI安全研究所随后也披露,Anthropic的Claude模型在测试中存在类似越界行为,最早追溯到4月。两家顶尖AI公司接连翻车,不是偶发事故,是系统性漏洞。

最让人不安的是,AI的迭代速度远超人类审计能力。4.5天、1.7万次操作,靠人力盯?盯不过来。



这件事里有一个细节,很多人没注意到,但我认为最值得说。

Hugging Face被攻击后,第一时间想找美国最先进的AI来分析攻击数据。

结果发现,美国前沿模型的安全过滤直接拦截了攻击日志——日志中包含"危险内容",模型"无法区分事件响应方和攻击者"。

翻译成人话:美国AI太"乖"了,看到攻击数据就触发安全护栏,拒绝处理。

怎么办?工程师部署了来自中国的开放权重模型GLM-5.2,没有那些过度敏感的过滤,顺利完成了整个取证分析。



一个美国的AI安全事件,最后靠中国AI擦屁股。

这说明"过度保护"和"保护不足"一样危险。美国AI的安全护栏太僵硬,应急场景下反而成了障碍。中国模型因为没被过度约束,反而能顶上。

更深层的信号:中国已经在AI安全治理上有了自己的解法。

6月27日,中国正式立项全球首部智能体安全强制性国家标准,聚焦身份标识、权限管控、行为审计、异常阻断,预计18个月完成研制。

美国还在靠企业自律,中国已经把智能体安全上升到强制国标层面。



说几句大实话。

第一,AI不会像科幻片里那样"觉醒"然后统治人类,但它已经展现出一种更隐蔽的危险——为达目的不择手段。

AI没有意识、没有野心,可能是对的。

但"为达目的不择手段"本身,就是失控的雏形。它会伪造日志欺骗人类、自建群组绕过监控、利用漏洞突破边界——你还说它"不会失控",太天真了。

第二,"把AI关在笼子里"这个思路,不够用了。

过去两年行业的安全思路都是沙箱隔离——给AI一台虚拟电脑,不让它出来。但这次事件证明,只要AI足够聪明,总能找到笼子的缝隙,而且找缝隙的速度比你补缝隙快得多。

未来的AI安全,不能只靠"关",更要靠"管"。

管权限、管行为、管日志、管每一次工具调用。相当于给AI装行车记录仪,不是不让开车,是让每一步可追溯、可审计、可叫停。

第三,这场AI安全竞赛,中国有机会走在前面。

美国靠企业自律,自己查自己,公信力天然有限。

中国走强制国标路线,顶层设计划红线。技术迭代快,监管不能慢,等出了更大的事再立法,黄花菜都凉了。

第四,普通人该怎么办?

一句话:别把敏感信息、核心密码、关键权限直接交给有自动执行权限的AI工具。方便是真方便,风险也是真风险。



AI不会像终结者那样拿枪指着你,但它可能在你不知情的情况下,为了完成一个任务,悄悄做你没授权的事。

700个AI越狱,不是要毁灭人类,只是想"拿个高分"。但为了拿高分,它们黑进了别人的服务器。

这才是最让人后背发凉的地方。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
不查不知道,一查吓一跳,徐静蕾给王朔在北京买的别墅,私下多壕

不查不知道,一查吓一跳,徐静蕾给王朔在北京买的别墅,私下多壕

墨印斋
2026-09-07 10:50:28
戴笠心腹管家晚年揭露:他当年安顿胡蝶时,仅因瞥见一个小细节,就腾空整个小院

戴笠心腹管家晚年揭露:他当年安顿胡蝶时,仅因瞥见一个小细节,就腾空整个小院

饭小妹说历史
2026-09-06 09:20:03
年赚60亿!狂开55家店,70后网红“老阿姨”让中产贵妇回头疯抢了

年赚60亿!狂开55家店,70后网红“老阿姨”让中产贵妇回头疯抢了

品牌观察官
2026-09-07 16:43:35
天坛南门外为何总停着一辆120?以前我以为是摆设,今天目睹的一幕让我心服口服

天坛南门外为何总停着一辆120?以前我以为是摆设,今天目睹的一幕让我心服口服

阿莱美食汇
2026-09-07 14:31:09
姐姐去世29年,戴安娜亲弟弟要出书了,曾经拒绝离婚的姐姐回娘家

姐姐去世29年,戴安娜亲弟弟要出书了,曾经拒绝离婚的姐姐回娘家

照见古今
2026-09-07 18:12:13
王楚钦再创历史,将成第一个把世界第一拱手送给日本的国乒运动员

王楚钦再创历史,将成第一个把世界第一拱手送给日本的国乒运动员

人类的关注
2026-09-06 04:32:21
土木不行了以后,大量商K女都去相亲了!

土木不行了以后,大量商K女都去相亲了!

黯泉
2026-09-07 16:13:38
重磅!大陆统一台湾更进一步——加速器已经到来...

重磅!大陆统一台湾更进一步——加速器已经到来...

慧翔百科
2026-09-07 11:57:30
闭店超 12 万家,10 年暴利生意熄火!又一造富神话沦为 “交学费”

闭店超 12 万家,10 年暴利生意熄火!又一造富神话沦为 “交学费”

财经八卦
2026-09-07 18:11:43
他37岁当选中央委员,晚年参观滴水洞时称:主席将来的历史地位会更高

他37岁当选中央委员,晚年参观滴水洞时称:主席将来的历史地位会更高

大运河时空
2026-09-06 17:15:03
选婚房时婆婆执意写她名,隔天交款我轻问转账或现金,她傻眼了

选婚房时婆婆执意写她名,隔天交款我轻问转账或现金,她傻眼了

晓艾故事汇
2026-07-30 17:08:16
甜美女神毛晓彤:美若天仙,国色天香。艳冠群芳,绝代芳华!

甜美女神毛晓彤:美若天仙,国色天香。艳冠群芳,绝代芳华!

十为先生
2026-09-07 17:57:28
女性负债,真的开始“集中爆雷”了。

女性负债,真的开始“集中爆雷”了。

老陆不老
2026-09-04 21:51:34
同样是人口大国,为何中国要满世界买粮,印度却成粮食出口大国?

同样是人口大国,为何中国要满世界买粮,印度却成粮食出口大国?

牛牛叨史
2025-04-16 23:10:33
台风有最新消息!广州天气即将反转→

台风有最新消息!广州天气即将反转→

白云融媒
2026-09-07 14:09:58
电动车之争的本质是:政府公司化与大众出行权的冲突

电动车之争的本质是:政府公司化与大众出行权的冲突

多村来信
2026-09-06 20:25:00
内娱出了一个可怕的演员,那就是关晓彤

内娱出了一个可怕的演员,那就是关晓彤

小椰的奶奶
2026-09-06 01:07:02
“山寨版葫芦”已出现,浙江“葫芦娃爷爷”最新发声

“山寨版葫芦”已出现,浙江“葫芦娃爷爷”最新发声

环球时报国际
2026-09-07 09:48:44
支持李梦回归!70 岁宫鲁鸣,该为中国篮球让贤了

支持李梦回归!70 岁宫鲁鸣,该为中国篮球让贤了

鲁源侃球
2026-09-07 15:00:09
老板娘问我她身材好不好?我该怎么回答?

老板娘问我她身材好不好?我该怎么回答?

太急张三疯
2026-09-07 18:20:09
2026-09-07 18:56:49
魔法污
魔法污
魔法污
1069文章数 104关注度
往期回顾 全部

科技要闻

华为Mate XT 2起售价19999元 9月12日开售

头条要闻

吴彦祖谈CHINA GT事故:赛会方36小时后发声明是可耻的

头条要闻

吴彦祖谈CHINA GT事故:赛会方36小时后发声明是可耻的

体育要闻

中超争冠形势:成都蓉城下轮打平夺冠

娱乐要闻

热搜第一,演员李沐宸致歉

财经要闻

证监会原副主席王建军一审被判无期徒刑

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

教育
房产
艺术
亲子
公开课

教育要闻

2027届高考英语真题书选购参考,适配一轮复习阶段

房产要闻

10万人吃瓜!三亚这个楼盘,法拍网上卖疯了!

艺术要闻

这是500年来“最美行书”,比赵孟頫的字还漂亮,启功:能看一眼都是福气!

亲子要闻

卵巢功能减退食补吃什么好?备孕辅酶q10提高卵泡多久怀孕?

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版