网易首页 > 网易号 > 正文 申请入驻

多家国际 AI 治理智库警示:自主智能体催生新型安全治理难题

0
分享至



10 月中旬,生命未来研究所(FLI)、AI 安全中心(CAIS)、剑桥大学 AI 科学与政策项目,以及联合国人工智能独立国际科学小组等多家国际智库与前沿 AI 治理研究机构联合刊发系列评论文章,聚焦大模型驱动的 AI 智能体自主行为带来的全球治理新课题。文章提出,伴随大模型技术迭代升级,前沿智能体的自主行动能力持续增强,部分智能体可在脱离人类持续指令的前提下独立执行任务、跨平台跨系统调取访问资源,由此衍生出新的安全风险;现有传统 AI 安全测试体系以静态、单次测评为主,已难以全面识别、覆盖智能体链式自主行动这类动态风险场景,全球各国 AI 监管规则亟待调整完善。

文章分析,传统安全评估多聚焦模型在人类直接提示下的输出风险,侧重于内容生成、偏见与基础攻防测试。而自主智能体具备目标拆解、自主规划、工具调用、跨系统联动能力,一旦设定初始目标,可脱离实时人工管控链式执行多步操作。这类行为具备隐蔽性,容易突破预设权限边界,引发数据泄露、非授权系统访问、自动化恶意操作等隐患,传统静态、单次式安全测试无法有效预判其长链条自主行为风险。

国际治理学者认为,智能体带来的变化,重塑了 AI 风险的发生逻辑:风险不再局限模型单次回答,而产生于智能体持续、自主的动态行动过程。当前各国现行 AI 监管框架,大多建立在通用大模型基础能力之上,针对智能体跨系统自主行为的权责划分、风险分级、事后溯源等条款仍存在空白。

学界建议从多维度完善治理路径。一是革新安全测试范式,开发面向智能体自主链式行为的动态测评方案,模拟真实环境下的长期自主行动场景;二是完善分级监管机制,对具备高自主权限、跨系统访问能力的智能体实施更严格的准入与持续监测;三是明确主体责任,厘清模型开发方、智能体部署方在自主行为场景下的法律义务;四是推动跨国治理对话,围绕智能体风险标准、信息共享开展国际协调,防范跨境技术风险外溢。

文章强调,智能体并非单纯技术产品,其自主行为带来的风险具有系统性、传导性,需要技术研发、安全评估、立法监管多方协同,在鼓励技术创新的同时守住安全底线。

AI 自主智能体标志人工智能从 “被动应答” 迈向 “主动行动” 阶段,也意味着风险形态发生根本性转变。传统安全治理思路聚焦模型输出结果,而智能体风险体现在连续自主决策与跨系统动作之中,静态检测手段存在天然局限。这提示全球 AI 治理需要从 “结果管控” 转向 “全流程行为管控”。在技术快速迭代背景下,治理不能滞后于创新,应当建立动态风险评估机制,兼顾技术发展空间与安全约束,通过国际交流形成共识,避免智能体的自主行为演变为跨国系统性风险。

⚖️

Serving national strategies, focusing on university research and the transformation of scientific and technological achievements



声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
不查不知道,一查吓一跳!卸任乒协主席后,刘国梁私下究竟多壕?

不查不知道,一查吓一跳!卸任乒协主席后,刘国梁私下究竟多壕?

林子说事
2026-10-19 06:43:59
官方:前国脚杨晨正式出任浙江职业足球俱乐部总经理

官方:前国脚杨晨正式出任浙江职业足球俱乐部总经理

懂球帝
2026-10-19 20:07:10
A股:没必要等突破3800点了,明后两天,股市或将迎来关键拐点

A股:没必要等突破3800点了,明后两天,股市或将迎来关键拐点

财经大拿
2026-10-19 07:05:23
我是怎么看待社保的,该交吗?

我是怎么看待社保的,该交吗?

毒哥的毒鸡汤
2026-10-16 13:50:10
图灵奖得主称Roadster放屁车!马斯克回怼:我朝你放屁

图灵奖得主称Roadster放屁车!马斯克回怼:我朝你放屁

快科技
2026-10-19 15:53:12
假期结束,小菲筱梅带娃回北京,小杨阿姨开播人气高,自己做卷饼吃得香

假期结束,小菲筱梅带娃回北京,小杨阿姨开播人气高,自己做卷饼吃得香

郭蛹包工头
2026-10-19 19:15:14
全球洞察|英国学者:长征是中国伟大发展成就的播种机

全球洞察|英国学者:长征是中国伟大发展成就的播种机

国际在线
2026-10-19 16:40:24
29分19篮板11助攻,杨瀚森进步明显!主教练诺里:对瀚森表现满意

29分19篮板11助攻,杨瀚森进步明显!主教练诺里:对瀚森表现满意

光辉与阴暗
2026-10-18 21:46:15
一根烟换不回的命——徐浦大桥惨剧背后隐藏的警示

一根烟换不回的命——徐浦大桥惨剧背后隐藏的警示

匹夫来搞笑
2026-10-19 14:26:20
江门市医疗保障局党组书记简锦聪主动投案

江门市医疗保障局党组书记简锦聪主动投案

南方都市报
2026-10-19 18:18:32
被打脸了,离了 ChatGPT 真不行!

被打脸了,离了 ChatGPT 真不行!

Ai学习的老章
2026-10-19 11:31:41
广东爆冷1分惜败同曦:徐杰16分丢绝杀 博日奇24+12丢扳平罚球

广东爆冷1分惜败同曦:徐杰16分丢绝杀 博日奇24+12丢扳平罚球

醉卧浮生
2026-10-18 21:51:51
特斯拉这台被夸上天的飞行汽车,座舱后面塞了两个“定时炸弹”

特斯拉这台被夸上天的飞行汽车,座舱后面塞了两个“定时炸弹”

不掉线电波
2026-10-18 22:54:55
5年1.39亿!雷霆正式续约!最快速度解体

5年1.39亿!雷霆正式续约!最快速度解体

篮球教学论坛
2026-10-19 11:52:08
美债突破41万亿美元,怎么办?马斯克给出答案:办法只有一个……

美债突破41万亿美元,怎么办?马斯克给出答案:办法只有一个……

王爷说图表
2026-10-18 22:56:23
李小冉发文:去年已离,互不牵扯,互不打扰

李小冉发文:去年已离,互不牵扯,互不打扰

南方都市报
2026-10-19 20:19:39
判若两人!从亚运卧底到NCAA超巨,王俊杰被郭士强用废了?

判若两人!从亚运卧底到NCAA超巨,王俊杰被郭士强用废了?

体育吐槽
2026-10-19 20:27:51
电讯报:埃梅里下课后,阿森纳曾认真考虑波切蒂诺接任

电讯报:埃梅里下课后,阿森纳曾认真考虑波切蒂诺接任

懂球帝
2026-10-19 21:21:37
民调:巴西总统决选,博索纳罗获得46.8%的选票,卢拉为45.9%

民调:巴西总统决选,博索纳罗获得46.8%的选票,卢拉为45.9%

麓谷隐士
2026-10-19 00:15:04
突发!章子怡套现巨款走人!

突发!章子怡套现巨款走人!

财经要参
2026-10-19 10:28:01
2026-10-19 21:36:49
科转在线 incentive-icons
科转在线
专注高校科研/科技成果转化
6799文章数 858关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

中纪委连打三“虎”

头条要闻

中纪委连打三“虎”

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

奚梦瑶回应重返维密:还是很开心的

财经要闻

黄奇帆之子往事:从广微系到魏桥的跳跃

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

旅游
家居
房产
艺术
健康

旅游要闻

别错过!巴楚326万亩胡杨,大漠鎏金限时上线

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

最新房价:海口,三亚齐跌!

艺术要闻

428米、95亿,海南第一高楼开始“戴帽子”了!

看着很健康的人,怎么会突然猝死?

无障碍浏览 进入关怀版