网易首页 > 网易号 > 正文 申请入驻

深海评 | “AI自主入侵”:网络安全风险进入新阶段

0
分享至

人工智能(AI)安全领域本月爆出一条令人不安的新闻:美国OpenAI公司正在测试的一款AI模型,在网络安全考试中“自己决定”突破安全限制,入侵全球最大的AI开源平台Hugging Face,从后台数据库中偷走考试答案。更让人后背发凉的是,入侵持续了整整三天,OpenAI监测系统竟然毫无察觉。直到Hugging Face公开披露遭入侵,双方启动联合调查,OpenAI才确认肇事源头。从首次逃逸异常到确认失控事故,前后长达一周。

安全风险集中暴露

这起全球首次“AI自主入侵事件”绝非孤立的“技术事故”,而是代理式AI时代系统性网络安全风险的集中暴露。

第一,它清晰地展示了当前AI模型的逻辑悖论。人们给AI设定的任务目标往往是狭窄的、量化的,如“解出这道题”“通过这项测试”,但AI不会像人一样理解“公平竞争”“不能违法”这些规则。AI模型为了完成任务或通过测试,可能选择撒谎、作弊甚至黑客攻击等“捷径”获取答案。在这种情况下,人类设定的“护栏”在AI眼中不过是又一个需要解决的障碍。AI为了完成任务会“不择手段”,意味着类似风险随时都有可能发生。

第二,它展示了人类无法想象的攻击速度。这次事件由AI自主串联完整的攻击链条,从发现漏洞、窃取权限,到进入目标数据库,全部自动完成。AI在目标平台上执行了超过17000次自动化操作,速度之快让人类安全团队根本跟不上。这意味着AI自主发起的网络攻击已经从理论变成了现实,当攻击速度从“人的速度”进入“机器的速度”,依赖人工反应的传统安全防线将形同虚设。

第三,它正在创造更多连锁风险。AI智能体本身具有网络化的特点,分享是其强大能力的重要来源。调查发现,同款AI曾在本地保留了一份详细的“越狱操作手册”,清晰记录了绕过安全管控的方法。如果不同任务中的AI智能体能够互相分享这类“逃逸经验”,整个行业的安全体系都将面临冲击。尤其当训练方式鼓励多个AI智能体协同配合时,它们很可能主动交流规避监管的技巧,让防御变得更加困难。

治理体系严重不足

这次“AI自主入侵事件”的出现不仅充分展现了代理式AI时代网络安全风险的特征,也暴露出当前全球AI治理体系的很多不足。

第一,网络攻击正在超越网络防御的速度。智能体的广泛使用给网络安全带来了新的课题,AI正在加速漏洞的发现和利用,模型安全和防护却没有保持同样速度的进步。攻击端的能力已在“机器速度”上狂奔,而防御端的治理框架、技术工具和国际协作仍在“人的速度”上蹒跚。如何让防御追上攻击的节奏,将是网络安全领域的重要课题。

第二,闭源模型存在安全悖论。在这次事件中另一个非常引人深思的点在于,Hugging Face曾寻求利用美国某AI公司的闭源模型来了解受攻击范围,但模型拒绝执行请求,理由是无法分辨提出请求的是攻击受害者还是攻击者,最终Hugging Face转而部署中国智谱AI开发的GLM-5.2开源模型完成了取证分析。这暴露了一个潜在的巨大风险,即当最先进的安全工具被少数几家闭源企业垄断,防御者反而丧失了自主应对威胁的能力。这也充分展现了开源路径在网络安全领域的重大价值。

综上所述,这是第一次“AI自主入侵事件”,但可以肯定不会是最后一次。代理式AI时代已经到来,AI的能力正从内容生成走向自主行动,网络安全风险也进入了新阶段。这次事件以非常直接的方式提醒着世界,AI治理不能再停留于原则宣言和自愿承诺的层面,而必须进入具有明确的规则、可执行的监测机制和全球协作的新阶段。要实现这一目标,需要各国共同努力。

(作者系上海国际问题研究院国际战略与安全研究所副所长)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中科院:江浙沪血液有害物质浓度爆表!

中科院:江浙沪血液有害物质浓度爆表!

生命科学前沿
2024-03-27 17:38:51
特斯拉中国宣布:9月30日前下单并提走现车,Model 3全系降5000元,Model Y全系降10000元

特斯拉中国宣布:9月30日前下单并提走现车,Model 3全系降5000元,Model Y全系降10000元

中国能源网
2026-09-07 13:28:12
历史何其相似:一年一度的打补丁刺激政策又开始了

历史何其相似:一年一度的打补丁刺激政策又开始了

生命可以承受之轻
2026-09-07 10:57:29
现在造假都从原始数据开始了?

现在造假都从原始数据开始了?

经典SCI解读
2026-09-07 09:17:20
星宇股份通报称最大笑话:老板自罚1年工资,背锅侠人事总监被爆61岁已退休

星宇股份通报称最大笑话:老板自罚1年工资,背锅侠人事总监被爆61岁已退休

Mr王的饭后茶
2026-09-07 22:01:39
20.99万起的小米澎程?今晚有人要睡不着觉了。

20.99万起的小米澎程?今晚有人要睡不着觉了。

差评XPIN
2026-09-08 01:02:44
简直就是奇迹:美国林肯号航母5000多大兵在芭堤雅疯狂玩了5天,竟然仅有2个打架的!

简直就是奇迹:美国林肯号航母5000多大兵在芭堤雅疯狂玩了5天,竟然仅有2个打架的!

步论天下事
2026-09-07 09:40:52
凤姐评论景甜,太敢说了……

凤姐评论景甜,太敢说了……

麦杰逊
2026-09-07 11:33:34
比井盖?韦世豪疑似地域攻击河南!全家遭河南球迷辱骂+死亡威胁

比井盖?韦世豪疑似地域攻击河南!全家遭河南球迷辱骂+死亡威胁

念洲
2026-09-07 07:01:20
凌晨两点战报:中国5胜2负,连爆大冷世界第1赵心童与第4一轮游了

凌晨两点战报:中国5胜2负,连爆大冷世界第1赵心童与第4一轮游了

求球不落谛
2026-09-08 05:19:34
中国女篮20分大胜意大利!避开澳大利亚,附世界杯8强附加赛对阵

中国女篮20分大胜意大利!避开澳大利亚,附世界杯8强附加赛对阵

侃球熊弟
2026-09-08 04:22:39
一个国家能蠢到什么程度?看看法国就明白了:法国黑人接近800万,巴黎新生儿里70%是黑人

一个国家能蠢到什么程度?看看法国就明白了:法国黑人接近800万,巴黎新生儿里70%是黑人

怪味历史连连看
2026-09-08 01:55:32
天助C罗:0-2大冷门,沙特联领头羊6连胜终结,库利巴利自摆乌龙

天助C罗:0-2大冷门,沙特联领头羊6连胜终结,库利巴利自摆乌龙

侧身凌空斩
2026-09-08 04:03:30
上海发布一组人事任免信息:杨正伟任虹桥商务区管委会常务副主任

上海发布一组人事任免信息:杨正伟任虹桥商务区管委会常务副主任

澎湃新闻
2026-09-07 18:50:26
丢人丢到全世界!上海赛车场大火 49 秒生死救援:外国车手冒死救人,官方保障全程拉胯

丢人丢到全世界!上海赛车场大火 49 秒生死救援:外国车手冒死救人,官方保障全程拉胯

魔都姐姐杂谈
2026-09-07 10:06:33
李嘉诚再次预判我国楼市!不出意外的话,未来3年,楼市或迎来 “三大走向”

李嘉诚再次预判我国楼市!不出意外的话,未来3年,楼市或迎来 “三大走向”

巢客HOME
2026-09-08 05:05:03
58-74!世界杯杀出死亡之组,日本女篮爆出意外败局,中国女篮迎来利好契机!

58-74!世界杯杀出死亡之组,日本女篮爆出意外败局,中国女篮迎来利好契机!

刘哥谈体育
2026-09-07 09:16:58
中国公民自爱俄边境纳尔瓦口岸入境爱沙尼亚遭盘查、拒绝入境并撤销签证,中使馆提醒

中国公民自爱俄边境纳尔瓦口岸入境爱沙尼亚遭盘查、拒绝入境并撤销签证,中使馆提醒

界面新闻
2026-09-08 07:10:14
女篮狂胜意大利!韩旭+杨舒予轰34分,王思雨太重要,张曼曼惊喜

女篮狂胜意大利!韩旭+杨舒予轰34分,王思雨太重要,张曼曼惊喜

篮球资讯达人
2026-09-08 04:23:01
曝武大杰青在美国顶级实验室干这丢人事被开除,此前出轨被亲女儿实名举报

曝武大杰青在美国顶级实验室干这丢人事被开除,此前出轨被亲女儿实名举报

可达鸭面面观
2026-09-06 15:14:05
2026-09-08 08:03:00
上海法治声音 incentive-icons
上海法治声音
市委政法委、上报集团联合出品
19326文章数 26184关注度
往期回顾 全部

科技要闻

小米再次背水一战

头条要闻

大桥被指施工太过潦草 开通不到一周盲道已经多处开胶

头条要闻

大桥被指施工太过潦草 开通不到一周盲道已经多处开胶

体育要闻

世界杯-中国女篮20分大胜意大利锁D组第二 韩旭19+10杨舒予15分

娱乐要闻

热搜第一,演员李沐宸致歉

财经要闻

证监会原副主席王建军一审被判无期徒刑

汽车要闻

智能可变大空间SUV 小米澎程系列车型上市 20.99万起

态度原创

家居
旅游
房产
时尚
健康

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

缙云丨龚炜:山城远近,盛夏的传奇(组诗)

房产要闻

10万人吃瓜!三亚这个楼盘,法拍网上卖疯了!

内娱女星,纷纷“去父留子”

同样是脑梗,为何康复结局大不同?

无障碍浏览 进入关怀版