网易首页 > 网易号 > 正文 申请入驻

多家国际 AI 治理智库警示:自主智能体催生新型安全治理难题

0
分享至



10 月中旬,生命未来研究所(FLI)、AI 安全中心(CAIS)、剑桥大学 AI 科学与政策项目,以及联合国人工智能独立国际科学小组等多家国际智库与前沿 AI 治理研究机构联合刊发系列评论文章,聚焦大模型驱动的 AI 智能体自主行为带来的全球治理新课题。文章提出,伴随大模型技术迭代升级,前沿智能体的自主行动能力持续增强,部分智能体可在脱离人类持续指令的前提下独立执行任务、跨平台跨系统调取访问资源,由此衍生出新的安全风险;现有传统 AI 安全测试体系以静态、单次测评为主,已难以全面识别、覆盖智能体链式自主行动这类动态风险场景,全球各国 AI 监管规则亟待调整完善。

文章分析,传统安全评估多聚焦模型在人类直接提示下的输出风险,侧重于内容生成、偏见与基础攻防测试。而自主智能体具备目标拆解、自主规划、工具调用、跨系统联动能力,一旦设定初始目标,可脱离实时人工管控链式执行多步操作。这类行为具备隐蔽性,容易突破预设权限边界,引发数据泄露、非授权系统访问、自动化恶意操作等隐患,传统静态、单次式安全测试无法有效预判其长链条自主行为风险。

国际治理学者认为,智能体带来的变化,重塑了 AI 风险的发生逻辑:风险不再局限模型单次回答,而产生于智能体持续、自主的动态行动过程。当前各国现行 AI 监管框架,大多建立在通用大模型基础能力之上,针对智能体跨系统自主行为的权责划分、风险分级、事后溯源等条款仍存在空白。

学界建议从多维度完善治理路径。一是革新安全测试范式,开发面向智能体自主链式行为的动态测评方案,模拟真实环境下的长期自主行动场景;二是完善分级监管机制,对具备高自主权限、跨系统访问能力的智能体实施更严格的准入与持续监测;三是明确主体责任,厘清模型开发方、智能体部署方在自主行为场景下的法律义务;四是推动跨国治理对话,围绕智能体风险标准、信息共享开展国际协调,防范跨境技术风险外溢。

文章强调,智能体并非单纯技术产品,其自主行为带来的风险具有系统性、传导性,需要技术研发、安全评估、立法监管多方协同,在鼓励技术创新的同时守住安全底线。

AI 自主智能体标志人工智能从 “被动应答” 迈向 “主动行动” 阶段,也意味着风险形态发生根本性转变。传统安全治理思路聚焦模型输出结果,而智能体风险体现在连续自主决策与跨系统动作之中,静态检测手段存在天然局限。这提示全球 AI 治理需要从 “结果管控” 转向 “全流程行为管控”。在技术快速迭代背景下,治理不能滞后于创新,应当建立动态风险评估机制,兼顾技术发展空间与安全约束,通过国际交流形成共识,避免智能体的自主行为演变为跨国系统性风险。

⚖️

Serving national strategies, focusing on university research and the transformation of scientific and technological achievements



声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国U17女足vs肯尼亚U17女足:方珍珠、赵思晴首发,徐悦出战

中国U17女足vs肯尼亚U17女足:方珍珠、赵思晴首发,徐悦出战

懂球帝
2026-10-19 22:23:09
发现没?凡是长期不祭祖的家庭,过个十年八年,往往会有变化

发现没?凡是长期不祭祖的家庭,过个十年八年,往往会有变化

牛锅巴小钒
2026-10-18 03:47:07
医生警告:每天吃一块红薯,就等于给肺结节 “踩刹车”? 真相来了

医生警告:每天吃一块红薯,就等于给肺结节 “踩刹车”? 真相来了

路医生健康科普
2026-10-19 09:11:10
3大瓜!翟天临当爸、郭麒麟结婚、劣迹网红复出捞金,风波不断

3大瓜!翟天临当爸、郭麒麟结婚、劣迹网红复出捞金,风波不断

两只米老鼠
2026-10-18 18:10:00
朱之文回应网友质疑其“农民歌手”人设:“咱们农民种完地,可以出去打工赚零花钱,我出去唱歌也是一种打工”

朱之文回应网友质疑其“农民歌手”人设:“咱们农民种完地,可以出去打工赚零花钱,我出去唱歌也是一种打工”

韩小娱
2026-10-17 10:31:54
难怪日本变得如此嚣张?因为一旦中日爆发冲突,日本都能稳赚不赔

难怪日本变得如此嚣张?因为一旦中日爆发冲突,日本都能稳赚不赔

阿裤趣闻君
2026-10-19 14:51:57
商家花53万元找“交个朋友”带货,仅成交3672.8元?“交个朋友”回应:未违约,可补播

商家花53万元找“交个朋友”带货,仅成交3672.8元?“交个朋友”回应:未违约,可补播

大风新闻
2026-10-19 17:00:08
隔空强奸也太扯了……

隔空强奸也太扯了……

红色少女主播
2026-10-20 00:55:43
存储芯片股集体大涨 多股涨超5%

存储芯片股集体大涨 多股涨超5%

每日经济新闻
2026-10-19 21:54:06
五场季前赛2胜3负,雄鹿球迷的乐观还剩多少?

五场季前赛2胜3负,雄鹿球迷的乐观还剩多少?

晚风知我意21
2026-10-20 01:21:26
留学生披旭日旗事件升级!军媒怒批,学校通报,他将迎来三大恶果

留学生披旭日旗事件升级!军媒怒批,学校通报,他将迎来三大恶果

荒野老五
2026-10-19 15:11:12
特朗普再次施压,俄罗斯态度急转180度,要全力保泽连斯基

特朗普再次施压,俄罗斯态度急转180度,要全力保泽连斯基

青山夜谈
2026-10-18 18:42:05
“祖孙三人被邻居杀害案”,凶手已被执行死刑;此前其被鉴定患精神分裂症,具有限定刑事责任能力

“祖孙三人被邻居杀害案”,凶手已被执行死刑;此前其被鉴定患精神分裂症,具有限定刑事责任能力

扬子晚报
2026-10-19 22:35:37
维密大秀:刘雯翅膀引争议,奚梦瑶台步被嘲,31岁的她眼前一亮

维密大秀:刘雯翅膀引争议,奚梦瑶台步被嘲,31岁的她眼前一亮

白面书誏
2026-10-19 16:06:03
1949年毛主席叮嘱冯友兰“老实态度为宜”,冯却反问:我有什么不老实?

1949年毛主席叮嘱冯友兰“老实态度为宜”,冯却反问:我有什么不老实?

舆图看世界
2026-10-17 08:50:09
史泰龙回怼裙带关系批评:骂我白痴也无所谓,孩子当然排第一

史泰龙回怼裙带关系批评:骂我白痴也无所谓,孩子当然排第一

追星雷达站
2026-10-19 00:45:44
CBA常规赛第2轮|北京控股负于上海久事

CBA常规赛第2轮|北京控股负于上海久事

北京控股篮球俱乐部
2026-10-20 01:00:54
惨烈!印度爆发失业潮

惨烈!印度爆发失业潮

大佬灼见
2026-10-19 17:28:54
王俊杰NCAA疯狂砍下31分,赛后坦言:国家队教练打战术,大学教练让我做正确的事!

王俊杰NCAA疯狂砍下31分,赛后坦言:国家队教练打战术,大学教练让我做正确的事!

爱体育
2026-10-19 23:56:24
真是没想到!带领8名CBA弃将,没打过职业联赛的清华学霸,差点儿掀翻3冠王北京队,36岁少帅李昂凭什么?郭士强压力来了

真是没想到!带领8名CBA弃将,没打过职业联赛的清华学霸,差点儿掀翻3冠王北京队,36岁少帅李昂凭什么?郭士强压力来了

篮球热嗖
2026-10-19 18:27:01
2026-10-20 01:40:49
科转在线 incentive-icons
科转在线
专注高校科研/科技成果转化
6799文章数 858关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

中国驻菲大使:菲反华势力送5口棺材时有没有显示尊重

头条要闻

中国驻菲大使:菲反华势力送5口棺材时有没有显示尊重

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

奚梦瑶回应重返维密:还是很开心的

财经要闻

黄奇帆之子往事:从广微系到魏桥的跳跃

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

教育
本地
手机
家居
旅游

教育要闻

1359 个市级指标藏在哪里?初中三年铺路地图

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

手机要闻

2026年三季度印度智能手机市场遇冷,iPhone销量下滑20%

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

换个思路,北京的冷门博物馆也好逛

无障碍浏览 进入关怀版