网易首页 > 网易号 > 正文 申请入驻

专家解读|智能体安全治理的系统思维

0
分享至

2026年7月,“抱抱脸”(Hugging Face)披露系统遭入侵。调查显示,攻击者并非真人,而是OpenAI的GPT-5.6 Sol模型在内部评估中失控,突破隔离测试环境,造成了入侵。当人工智能从“回答问题”迈向“执行任务”之后,智能体的高自主性、高权限带来的行为失控风险亦与日俱增。在此背景下,《人工智能安全治理框架3.0》(以下简称《框架3.0》)发布,附件专设“智能体风险管理框架”一节,跟踪风险递变,动态调整治理措施。

全生命周期的系统安全

智能体的安全隐患不仅贯穿“设计研发—安装部署—指令输入—推理规划—调用执行—记忆存储—结果输出—停用下线”的全生命周期,而且因其特有的“感知—规划—行动”逻辑,呈现出动态性。因此,安全若只在部署之后设防,无异于亡羊补牢,唯有将防线前置于设计研发(对抗测试、价值对齐、能力边界评估),贯彻于运行时(沙箱验证、多层检测拦截、关键节点强制人工审批),收束于停用下线(关停服务、撤销凭证、版本回退),才能织密安全之网。《框架3.0》所建立的覆盖模型全生命周期的安全治理体系,与新加坡《智能体人工智能治理示范框架》中“开放时控制—上线前测试—运行中监控”的逻辑相通,体现出从模型安全向系统治理的思路转变。

基于权限的风险控制

智能体的自主行动既是其优势,也是其风险所在。审慎划定行为边界,是控制智能体风险的关键。《框架3.0》将权限区分为“仅限用户本人决策”“需由用户授权决策”“智能体自主决策”,并仅为智能体授予“执行任务所需的最小权限”,辅以“分类分级监管”与“最终用途管理”,最终形成“权限分类—权限最小化—分级监管”的三层约束。回看“抱抱脸”(Hugging Face)事件,倘若“对开放互联网的访问”被归入“需用户授权决策”并受最小权限约束,沙箱的“逃逸”本可被即时阻断。

系于身份的安全治理

无问责,则无安全。但问责的基础是准确识别责任主体。而高度自主性的智能体行为主体难辨、行为轨迹难追,身份困境由此而生。为此,《框架3.0》将智能体的身份管理作为重中之重,要求为智能体配备唯一身份标识,禁止智能体应用实例间共享身份标识,鉴别用户、智能体、工具及外部服务身份,确保访问主体身份可信,从而为责任认定提供可识别、可验证、可追溯的事实锚点。

《框架3.0》以“过程”为脉络,以“身份”为支点,以“权限”为关键,为智能体确立了可感、可溯、可审的系统治理体系。毋庸讳言,作为首次直面智能体风险的制度规范,它仅是万里长征第一步。随着智能体从单智能体向多智能体跃迁,如何建立多智能体之间的连接与信任机制,如何防范对单点身份鉴别与最小权限的“协同越权”,仍是治理与技术竞速中尚待完成的任务,这亦是《人工智能安全治理框架》年年迭代的意义所在。

作者:许可 对外经济贸易大学数字经济与法律创新研究中心主任

来源:“中国网信杂志”微信公众号

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
宁德时代,低位崩盘,车企苦其久矣

宁德时代,低位崩盘,车企苦其久矣

资本时差
2026-10-21 16:27:17
彩电一哥亏损200亿,正式退市,一个时代结束了

彩电一哥亏损200亿,正式退市,一个时代结束了

跨境派Pro
2026-10-20 14:23:59
男子和四十多岁女网友认识后,频繁发生关系,最后一次在车内,男子死亡后家属向女子索要巨额赔偿

男子和四十多岁女网友认识后,频繁发生关系,最后一次在车内,男子死亡后家属向女子索要巨额赔偿

丫头舫
2026-10-13 22:10:25
刘强东硬刚抖音,引爆全网!

刘强东硬刚抖音,引爆全网!

大佬灼见
2026-10-19 22:42:34
芭莎红毯“空场罗生门”:张小斐临时救场,蔡文静被误伤

芭莎红毯“空场罗生门”:张小斐临时救场,蔡文静被误伤

韩小娱
2026-10-22 09:35:47
300107,净利大增超1500%!

300107,净利大增超1500%!

证券时报
2026-10-22 07:46:04
轰动全国的“91大神”庭审细节曝光,炸翻无数人

轰动全国的“91大神”庭审细节曝光,炸翻无数人

鸣金网
2026-10-18 14:17:30
要变天!新首相上台就掀桌,直接废除前任计划!先打给了泽连斯基

要变天!新首相上台就掀桌,直接废除前任计划!先打给了泽连斯基

普览
2026-07-24 05:08:24
2-2!欧冠上演五大联赛冠军对决:三狮巨星传射建功 两队都折损核心

2-2!欧冠上演五大联赛冠军对决:三狮巨星传射建功 两队都折损核心

狍子歪解体坛
2026-10-22 05:09:52
B费:没料到科莫会多上一名中场;现在更需改变而非吸取教训

B费:没料到科莫会多上一名中场;现在更需改变而非吸取教训

懂球帝
2026-10-22 04:55:59
杜兰特扑防弗拉格三分被吹一级恶犯,独行侠获3罚1掷

杜兰特扑防弗拉格三分被吹一级恶犯,独行侠获3罚1掷

星河漫山野
2026-10-22 10:45:45
我国正式把盾构机纳入出口管制后,一个奇怪的现象就出现了

我国正式把盾构机纳入出口管制后,一个奇怪的现象就出现了

春雨说科技
2026-10-20 17:00:16
网友们看出尊界事件的最核心问题了

网友们看出尊界事件的最核心问题了

清晖有墨
2026-10-21 10:15:13
一女孩在F4演唱会因外形酷似大S引热议,本人回应:“长相是自然的,没有去do脸,也没有化仿妆”

一女孩在F4演唱会因外形酷似大S引热议,本人回应:“长相是自然的,没有去do脸,也没有化仿妆”

韩小娱
2026-10-22 07:02:07
南京官方已介入!身披旭日旗的陈某已被遣返,知情人称其早有前科,工作人员称这不是小事

南京官方已介入!身披旭日旗的陈某已被遣返,知情人称其早有前科,工作人员称这不是小事

子非鱼人
2026-10-21 23:14:32
中国体操女团哭了!时隔20年再登顶世锦赛:美国队沉默 日本队也哭了

中国体操女团哭了!时隔20年再登顶世锦赛:美国队沉默 日本队也哭了

风过乡
2026-10-22 07:00:23
随着日本2-0法国,世界杯16强已定3席!中国女足PK鱼腩,底线15-0

随着日本2-0法国,世界杯16强已定3席!中国女足PK鱼腩,底线15-0

侃球熊弟
2026-10-22 01:13:30
钱学森1岁童年照片,乖巧地盯着镜头,衣着透露出家境优越!

钱学森1岁童年照片,乖巧地盯着镜头,衣着透露出家境优越!

历史龙元阁
2026-10-21 09:30:26
医生发现:不容易摔倒骨折的老人,一般都有4个特征,快了解一下

医生发现:不容易摔倒骨折的老人,一般都有4个特征,快了解一下

侯医生谈健康
2026-10-21 02:05:03
4-1!熊皇颗粒无收,1.4亿标王世界波,姆巴佩传射,皇马4连胜

4-1!熊皇颗粒无收,1.4亿标王世界波,姆巴佩传射,皇马4连胜

我的护球最独特
2026-10-22 05:08:57
2026-10-22 11:08:49
十二师在线 incentive-icons
十二师在线
弘扬正能量,传播十二师好声音
6816文章数 679关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

牛弹琴:泽连斯基突然接受保留75%领土 释放一个信号

头条要闻

牛弹琴:泽连斯基突然接受保留75%领土 释放一个信号

体育要闻

热闹的NBA回来了,他却倒在新赛季大门口

娱乐要闻

杜淳王灿近况曝光:铁婚六年甜上热搜

财经要闻

为卖房,有房企花20万拍短剧

汽车要闻

有七座/续航提升 领克900L曝光还可选双色车身+大饼轮毂

态度原创

手机
家居
艺术
房产
游戏

手机要闻

初探苹果iPhone Duo铰链耐用性:约3.2万次折叠后开合手感基本如初

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

连列宾都称天才的画家!费欣人物油画原版作品,绝到不敢相信

房产要闻

J&P 集团亮相 2026 中国品牌出海博览会| 深耕跨境20载,品牌出海有J&P

EA公布《美式橄榄球计划》主打社交开放世界

无障碍浏览 进入关怀版