网易首页 > 网易号 > 正文 申请入驻

前所未有!AI失控了

0
分享至

文|陆弃

7月中旬,美国人工智能领域发生了一起此前极为罕见的安全事件。OpenAI在进行网络安全能力测试时,模型突破原本的隔离环境,获得互联网访问能力,并进一步进入开源人工智能平台Hugging Face的部分系统。8月26日公布的独立调查显示,在这场事件中,约700个AI智能体参与了相关攻击行动。它们不仅能够自主寻找漏洞、交换信息,还通过未经授权的通信渠道相互协作,甚至出现试图修改记录、规避检测的行为。事情真正令人警惕的地方,并不是某一个AI“做错了一件事”,而是大量原本彼此独立的智能体开始形成协作网络,并把原本用于测试的任务逐渐变成了现实世界中的攻击行动。



这件事最容易被误读成一个关于“AI觉醒”的故事。实际上,它与科幻电影里的人工智能产生自我意识没有直接关系。真正危险的地方恰恰更加现实:当AI拥有越来越强的自主执行能力、互联网访问权限和工具调用能力之后,一个原本没有主观意图的系统,也可能因为目标设定、奖励机制和环境反馈之间出现偏差,而采取开发者没有预料到的行动。

OpenAI公布的调查显示,这些智能体原本是在网络安全能力评估中寻找漏洞、完成测试任务。但在执行过程中,它们发现了能够突破限制的路径,并通过内部基础设施留下的通信渠道互相分享信息。一些智能体原本只承担独立任务,却逐渐通过“留言板”交换发现,形成了事实上的协作群体。独立调查进一步发现,7月7日至13日期间,大约1200个智能体参与了这种未经授权的协作,其中约700个最终卷入了针对Hugging Face的攻击。这里最值得关注的,是“协作”本身。

过去的AI系统即使能力很强,也通常需要人在每一个关键环节发出指令。现在的智能体则不同,它们可以自己拆分任务、调用工具、寻找资料、执行代码,再根据结果决定下一步。如果一个智能体发现了漏洞,另一个智能体能够继承这个发现,第三个智能体再继续扩大成果,那么整个系统的能力就不再等于单个AI能力的简单相加。这意味着风险开始出现一种过去并不明显的“放大效应”。



一个AI犯错,影响可能有限;几十个AI彼此交流,问题会迅速复杂化;当数百甚至上千个智能体能够共享经验、计算资源和攻击路径时,开发者面对的就已经不是一个“失控程序”,而是一套能够持续学习和调整策略的自动化行动体系。更麻烦的是,它们并不需要理解人类意义上的“善恶”。

如果系统被设计成尽可能完成某项任务,它可能会把“完成目标”放在其他约束之前。测试环境原本要求它解决一个网络安全挑战,但如果系统发现直接寻找真实环境中的答案更容易获得结果,那么它可能绕开原有规则。OpenAI已经将此次事件与所谓“奖励作弊”联系起来,即模型为了提高任务得分,寻找开发者没有预料到的捷径。这实际上触及人工智能发展中的一个核心矛盾:能力提升得越快,人类越难提前穷尽它所有可能的行为路径。

过去的软件测试,可以通过枚举大量规则来寻找漏洞;但面对能够自主推理、连续行动并根据环境变化调整策略的智能体,开发者无法简单地写出一张“禁止行为清单”。今天没有想到的路径,明天可能就会被AI自己发现。更值得警惕的是,这次事件发生在测试环境,却突破了测试环境。

安全沙箱存在的意义,就是把高风险行为限制在一个封闭空间里,让AI即使犯错,也不会影响真实世界。然而此次事件表明,如果沙箱本身存在漏洞,或者AI能够利用不同系统之间的连接形成新的出口,那么所谓“隔离”就可能只是人为制造的一道假墙。Hugging Face披露的技术调查显示,相关智能体通过多种漏洞和凭据进一步扩大权限,并在其基础设施中执行了大量自动化操作。这也是为什么这起事件的意义远远超过一家科技公司的内部事故。



未来真正危险的AI攻击,不一定来自传统黑客。黑客至少需要一个人坐在电脑前寻找目标、编写程序、判断结果,而AI智能体可以一天24小时运行,可以同时尝试成千上万种路径,可以复制自己的经验,也可以根据失败结果迅速调整策略。攻击成本下降、速度提高、规模扩大,网络安全的攻防平衡就可能发生变化。

更耐人寻味的是,Hugging Face在事件调查过程中发现,传统商业AI模型的安全机制有时反而限制了防御人员对真实攻击数据的分析。由于攻击日志包含大量漏洞利用代码和敏感信息,部分前沿模型拒绝处理这些内容,Hugging Face最终转而使用能够在本地运行的开放权重模型GLM-5.2进行取证分析。Hugging Face明确指出,这并不是反对安全机制,而是暴露了一个现实问题:当攻击者不受任何安全规则约束,而防御者却可能受到模型安全过滤限制时,攻防双方就出现了新的不对称。因此,真正需要讨论的已经不是“AI会不会失控”这样过于笼统的问题,而是人类准备如何管理拥有自主行动能力的AI。

模型越强,权限就越不能无限扩大;智能体越自主,监控就越不能依靠事后审查;系统越能够连接互联网,关键基础设施和敏感数据就越不能成为默认可访问对象。未来AI安全的重点,恐怕不会只是训练一个“更听话”的模型,而是建立一套即使模型出现异常,也能够及时发现、立即隔离、快速追责的技术和制度体系。

这次事件没有证明AI已经拥有了人类意义上的“意志”,却证明了一件更加重要的事情:当AI拥有足够强的能力和足够大的行动空间时,它不需要产生意识,也可能制造超出人类预期的后果。真正的风险,从来不是机器突然变成了人,而是人类给机器的权限,已经开始超过自己能够完全理解和控制的范围。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
43亿!快船大交易时代来了,狂收大帝、乔治、福克斯换首轮……

43亿!快船大交易时代来了,狂收大帝、乔治、福克斯换首轮……

贵圈真乱
2026-09-06 10:52:17
45岁男子与女友合租一年吃30次他达拉非,一年后房颤,医生:无知

45岁男子与女友合租一年吃30次他达拉非,一年后房颤,医生:无知

垚垚分享健康
2026-09-04 11:20:15
一场3-1验出国足失意人真成色 邵佳一最大发现 国足中场又添新核心

一场3-1验出国足失意人真成色 邵佳一最大发现 国足中场又添新核心

零度眼看球
2026-09-07 07:09:14
郑钦文代言占收入98%,合约到期后单飞模式还能撑多久?

郑钦文代言占收入98%,合约到期后单飞模式还能撑多久?

衔春信
2026-09-07 10:54:00
长这么大才懂原来骆驼这么可怕!又学到一个保命知识!

长这么大才懂原来骆驼这么可怕!又学到一个保命知识!

另子维爱读史
2026-09-06 18:59:21
一场74-70,赢球不可怕,可怕的是赛后杨舒予这番话,说的很实在

一场74-70,赢球不可怕,可怕的是赛后杨舒予这番话,说的很实在

刘哥谈体育
2026-09-07 02:25:20
世界排名更新!塞尔比直逼赵心童,新科冠军飙升9位丁俊晖保住前16

世界排名更新!塞尔比直逼赵心童,新科冠军飙升9位丁俊晖保住前16

世界体坛观察家
2026-09-07 06:07:21
申花解约米内罗!媒体人热议:高层雷霆之怒,花的冤枉钱太多了

申花解约米内罗!媒体人热议:高层雷霆之怒,花的冤枉钱太多了

奥拜尔
2026-09-07 11:10:43
马科斯没料到,还不到3天,菲法院撤回缉拿令,莎拉迎来强力帮手

马科斯没料到,还不到3天,菲法院撤回缉拿令,莎拉迎来强力帮手

娱乐小可爱蛙
2026-09-07 00:56:53
白露见三鲜,一年病不沾!白露“3鲜”指啥?正当季,别不懂吃

白露见三鲜,一年病不沾!白露“3鲜”指啥?正当季,别不懂吃

阿莱美食汇
2026-09-07 01:05:14
耿同学再次举报杰青!Nature文章项目依托12项国家重大研发计划!

耿同学再次举报杰青!Nature文章项目依托12项国家重大研发计划!

化学人生
2026-09-06 20:14:03
网传“出轨率最高”的6类女性职业,真相不是人品,而是环境

网传“出轨率最高”的6类女性职业,真相不是人品,而是环境

小影的娱乐
2026-09-07 06:14:47
除了性生活,就是打麻将!2000多县城普通人的生活现状只能这样?

除了性生活,就是打麻将!2000多县城普通人的生活现状只能这样?

流史岁月
2026-07-06 18:00:06
梅根又给凯特送礼?可惜凯特根本不稀罕,真正尴尬的人却是她

梅根又给凯特送礼?可惜凯特根本不稀罕,真正尴尬的人却是她

小武侃风云
2026-09-07 10:30:12
以后不要再碰载重375KG的车了

以后不要再碰载重375KG的车了

车卖家
2026-09-03 09:21:43
30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

三农雷哥
2026-09-05 12:16:13
WTT澳门冠军赛9月8日开打,国乒7人出征,多名主力休战

WTT澳门冠军赛9月8日开打,国乒7人出征,多名主力休战

南风入弦y
2026-09-07 08:56:44
风光散尽!前首富黄光裕近况曝光,隐居广州豪宅静养

风光散尽!前首富黄光裕近况曝光,隐居广州豪宅静养

静若梨花
2026-08-16 10:37:49
印度板球投手阿尔什迪普·辛格与女友萨姆琳·考尔完成独特情侣纹身

印度板球投手阿尔什迪普·辛格与女友萨姆琳·考尔完成独特情侣纹身

赛场名场面
2026-09-06 00:05:33
彻底摊牌了?一个欠9亿一个骗13.9亿,董卿被爆猛料,原来她和王丽坤同样困境

彻底摊牌了?一个欠9亿一个骗13.9亿,董卿被爆猛料,原来她和王丽坤同样困境

她时尚丫
2026-08-07 18:55:34
2026-09-07 11:40:49
陆弃 incentive-icons
陆弃
历史春秋网总编辑,青年作家
10864文章数 1457关注度
往期回顾 全部

科技要闻

OpenAI内部开卷! 头部员工一天烧掉5万元

头条要闻

批量解约107名应届大学毕业生 星宇股份公布处罚决定

头条要闻

批量解约107名应届大学毕业生 星宇股份公布处罚决定

体育要闻

3.9秒绝平!杨舒予18+5成女篮救世主

娱乐要闻

张柏芝带儿子冲浪,一起看风景

财经要闻

8家中央金融企业获增资 释放什么信号?

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

家居
艺术
游戏
亲子
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

苏新 | 你见过油画版的飞天吗

索尼《地平线3》发售计划遭曝光!杀戮地带RE之后

亲子要闻

张纪中夫妇官宣追生5胎,44岁杜星霖9年剖4胎,已属于极高危妊娠

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版