网易首页 > 网易号 > 正文 申请入驻

深海评 | “AI自主入侵”:网络安全风险进入新阶段

0
分享至

人工智能(AI)安全领域本月爆出一条令人不安的新闻:美国OpenAI公司正在测试的一款AI模型,在网络安全考试中“自己决定”突破安全限制,入侵全球最大的AI开源平台Hugging Face,从后台数据库中偷走考试答案。更让人后背发凉的是,入侵持续了整整三天,OpenAI监测系统竟然毫无察觉。直到Hugging Face公开披露遭入侵,双方启动联合调查,OpenAI才确认肇事源头。从首次逃逸异常到确认失控事故,前后长达一周。

安全风险集中暴露

这起全球首次“AI自主入侵事件”绝非孤立的“技术事故”,而是代理式AI时代系统性网络安全风险的集中暴露。

第一,它清晰地展示了当前AI模型的逻辑悖论。人们给AI设定的任务目标往往是狭窄的、量化的,如“解出这道题”“通过这项测试”,但AI不会像人一样理解“公平竞争”“不能违法”这些规则。AI模型为了完成任务或通过测试,可能选择撒谎、作弊甚至黑客攻击等“捷径”获取答案。在这种情况下,人类设定的“护栏”在AI眼中不过是又一个需要解决的障碍。AI为了完成任务会“不择手段”,意味着类似风险随时都有可能发生。

第二,它展示了人类无法想象的攻击速度。这次事件由AI自主串联完整的攻击链条,从发现漏洞、窃取权限,到进入目标数据库,全部自动完成。AI在目标平台上执行了超过17000次自动化操作,速度之快让人类安全团队根本跟不上。这意味着AI自主发起的网络攻击已经从理论变成了现实,当攻击速度从“人的速度”进入“机器的速度”,依赖人工反应的传统安全防线将形同虚设。

第三,它正在创造更多连锁风险。AI智能体本身具有网络化的特点,分享是其强大能力的重要来源。调查发现,同款AI曾在本地保留了一份详细的“越狱操作手册”,清晰记录了绕过安全管控的方法。如果不同任务中的AI智能体能够互相分享这类“逃逸经验”,整个行业的安全体系都将面临冲击。尤其当训练方式鼓励多个AI智能体协同配合时,它们很可能主动交流规避监管的技巧,让防御变得更加困难。

治理体系严重不足

这次“AI自主入侵事件”的出现不仅充分展现了代理式AI时代网络安全风险的特征,也暴露出当前全球AI治理体系的很多不足。

第一,网络攻击正在超越网络防御的速度。智能体的广泛使用给网络安全带来了新的课题,AI正在加速漏洞的发现和利用,模型安全和防护却没有保持同样速度的进步。攻击端的能力已在“机器速度”上狂奔,而防御端的治理框架、技术工具和国际协作仍在“人的速度”上蹒跚。如何让防御追上攻击的节奏,将是网络安全领域的重要课题。

第二,闭源模型存在安全悖论。在这次事件中另一个非常引人深思的点在于,Hugging Face曾寻求利用美国某AI公司的闭源模型来了解受攻击范围,但模型拒绝执行请求,理由是无法分辨提出请求的是攻击受害者还是攻击者,最终Hugging Face转而部署中国智谱AI开发的GLM-5.2开源模型完成了取证分析。这暴露了一个潜在的巨大风险,即当最先进的安全工具被少数几家闭源企业垄断,防御者反而丧失了自主应对威胁的能力。这也充分展现了开源路径在网络安全领域的重大价值。

综上所述,这是第一次“AI自主入侵事件”,但可以肯定不会是最后一次。代理式AI时代已经到来,AI的能力正从内容生成走向自主行动,网络安全风险也进入了新阶段。这次事件以非常直接的方式提醒着世界,AI治理不能再停留于原则宣言和自愿承诺的层面,而必须进入具有明确的规则、可执行的监测机制和全球协作的新阶段。要实现这一目标,需要各国共同努力。

(作者系上海国际问题研究院国际战略与安全研究所副所长)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
任正非:中国很多老百姓还很贫困,让贫穷的老百姓让利来救一个有钱的华为,良心上过不去!网友:那还涨价1000?

任正非:中国很多老百姓还很贫困,让贫穷的老百姓让利来救一个有钱的华为,良心上过不去!网友:那还涨价1000?

大白聊IT
2026-09-06 23:35:54
为什么赛车手敢去救人,救援人员却丢下灭火器逃离?

为什么赛车手敢去救人,救援人员却丢下灭火器逃离?

火山口的普林尼
2026-09-06 23:37:56
乌媒称,特朗普特使要求乌克兰从顿巴斯撤军、泽连斯基辞职并举行大选

乌媒称,特朗普特使要求乌克兰从顿巴斯撤军、泽连斯基辞职并举行大选

山河路口
2026-09-07 13:18:21
给胖东来供货十七年的牟强说,这里一边是天堂,一边是地狱。天堂是账期短,货款七天左右就能到账,地狱则是...

给胖东来供货十七年的牟强说,这里一边是天堂,一边是地狱。天堂是账期短,货款七天左右就能到账,地狱则是...

背包旅行
2026-09-07 18:50:04
两性心理学:已婚女人要是外面有人了,而且还跟别人睡过了,那才会有这些苗头出现

两性心理学:已婚女人要是外面有人了,而且还跟别人睡过了,那才会有这些苗头出现

心理观察局
2026-09-06 06:09:43
手握原始股定居加州富人区,42岁阿里前员工死在车里,失踪15天只有游戏网友在找他

手握原始股定居加州富人区,42岁阿里前员工死在车里,失踪15天只有游戏网友在找他

户外钓鱼哥阿旱
2026-09-08 01:13:17
“加一箱油半箱税”将成过去,3.22亿燃油车主能减负吗

“加一箱油半箱税”将成过去,3.22亿燃油车主能减负吗

周哥一影视
2026-09-07 10:59:38
后院失火?英名媛犀利预测:哈里在加州疑有“红颜知己”?梅根回英另有隐情

后院失火?英名媛犀利预测:哈里在加州疑有“红颜知己”?梅根回英另有隐情

白露文娱志
2026-09-07 15:25:16
击毙了,伊朗军方宣布重大战果!

击毙了,伊朗军方宣布重大战果!

故事终将光明磊落
2026-09-07 08:12:28
妙招!王俊杰签约香港金牛绕开CBA选秀,保留NBA梦想+收入暴涨

妙招!王俊杰签约香港金牛绕开CBA选秀,保留NBA梦想+收入暴涨

林小湜体育频道
2026-09-08 00:31:00
刘晓庆判了,二审驳回上诉,75岁的她终究为自己的错误买单!

刘晓庆判了,二审驳回上诉,75岁的她终究为自己的错误买单!

触摸史迹
2026-09-04 00:07:49
欧盟愤怒: 中国货轮来时 2.4 万集装箱满载, 回去啥都不拉合适吗?

欧盟愤怒: 中国货轮来时 2.4 万集装箱满载, 回去啥都不拉合适吗?

江启
2026-09-07 11:21:14
第五次大放水,但别指望楼市暴涨

第五次大放水,但别指望楼市暴涨

大川东山再起
2026-09-07 10:42:11
医生呼吁:马上停用3种调味酱,它是肠癌催化剂!再下饭也别沾

医生呼吁:马上停用3种调味酱,它是肠癌催化剂!再下饭也别沾

观星赏月
2026-09-07 00:44:10
看完账单一身冷汗!深圳三口之家一年花31.4万,都是“刚需”,居然还只是租房

看完账单一身冷汗!深圳三口之家一年花31.4万,都是“刚需”,居然还只是租房

火山詩话
2026-09-06 11:35:39
精神病院改名,为什么全国各地“不约而同”改名了

精神病院改名,为什么全国各地“不约而同”改名了

南传
2026-09-06 00:10:06
全球首例!他靠猪肾续命9个月等来了人肾:五年等到匹配人肾的概率仅9%

全球首例!他靠猪肾续命9个月等来了人肾:五年等到匹配人肾的概率仅9%

红星新闻
2026-09-07 19:18:31
特斯拉中国官宣大降价,实在是太狠了!

特斯拉中国官宣大降价,实在是太狠了!

XCiOS俱乐部
2026-09-07 11:19:28
岳父嫌我穷拆散我和他女儿,20年后我以市长身份考核他的处长女婿

岳父嫌我穷拆散我和他女儿,20年后我以市长身份考核他的处长女婿

千秋文化
2026-08-29 20:18:50
阿韦洛亚执教富勒姆三连败,史密斯-罗和伊沃比删社媒照片

阿韦洛亚执教富勒姆三连败,史密斯-罗和伊沃比删社媒照片

懂球帝
2026-09-08 03:35:47
2026-09-08 03:51:00
上海法治声音 incentive-icons
上海法治声音
市委政法委、上报集团联合出品
19326文章数 26184关注度
往期回顾 全部

科技要闻

小米澎程N90 Max定价26.99万元

头条要闻

伊朗试验特殊武器爆炸场面如同地狱 美军舰直接跑了

头条要闻

伊朗试验特殊武器爆炸场面如同地狱 美军舰直接跑了

体育要闻

压哨避开CBA选秀规则?NBL香港金牛队已为男篮国手王俊杰报备合同

娱乐要闻

热搜第一,演员李沐宸致歉

财经要闻

证监会原副主席王建军一审被判无期徒刑

汽车要闻

智能可变大空间SUV 小米澎程系列车型上市 20.99万起

态度原创

健康
教育
数码
公开课
军事航空

同样是脑梗,为何康复结局大不同?

教育要闻

老师真的太卑微了!家长就因为排座位,冲进教室质问:你是不是收了别的家长钱?凭什么我家孩子就只能坐角落!

数码要闻

欧洲空调市场起飞!美的小米TCL狂卷IFA:国产技术降维打击

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

媒体:中美战区司令会晤释放的信号 台湾要听懂

无障碍浏览 进入关怀版