网易首页 > 网易号 > 正文 申请入驻

微软警示前沿AI模型不可信:AI智能体堪比内部威胁,推出Guardian Agents防护方案

0
分享至

IT之家 10 月 20 日消息,微软于当地时间周一推出了多项全新安全功能,旨在帮助企业抵御日益严峻的智能体带来的安全威胁。发布该产品之际,微软持续向企业警示人工智能与智能体存在的各类风险。


IT之家注意到,本次新增功能中最受关注的当属守护智能体(Guardian Agents),这项新功能用于监控企业内部正在使用的各类 AI 智能体。守护智能体隶属于感知项目(Project Perception),感知项目是微软在 6 月推出的产品。

感知项目是微软针对 Anthropic 的 Mythos、Fable 等强大黑客模型,以及 OpenAI 的安全漏洞扫描系统破晓(Daybreak)所给出的应对方案。感知项目最初上线了三类智能体:扮演黑客角色实施攻击的红队智能体,负责侦测红队攻击、评估漏洞的蓝队智能体,以及专门修复漏洞的绿队智能体。

该产品最初的设计前提是,AI 黑客会来自企业外部。但近期,微软首席执行官萨提亚 · 纳德拉(Satya Nadella)发出警告,AI 层面的威胁源头,有可能正是企业自身部署、付费使用的智能体,就像一名行为失控的内部员工,也就是常说的“内部威胁”。

本月早些时候,纳德拉在个人博客中提出警示:是时候不再信任 AI 模型供应商,即便厂商为自家具备自主执行能力的智能体产品做出安全保障承诺。他建议企业搭建独立系统,这套系统不受 AI 实验室管控,用以监督和管控这些人工智能实验室推出的产品所对应的智能体。

他写道:“我们正在部署这类复杂的智能体系统与模型,它们可以访问我们最敏感的数据,还能代表我们执行关键业务操作!我们绝不能把智能体代我们行事的责任外包出去。模型供应商给出的保证,并不能免除我们的这份责任…… 换言之,我们需要将智能能力的供给,和对它的管控权限分离开。”

在介绍守护智能体时,微软安全业务负责人海耶特 · 加洛(Hayete Gallot)的表述更为直白。

她写道:“遗憾的是,前沿模型无论来源是哪里,都无法完全信任。”她补充,这并非因为模型本身带有恶意或者容易被黑客攻破,而是其行为具有不可预测性。模型训练目标是完成任务,而非遵守“组织规范或判断准则”。

除此之外,这些智能体往往手握高权限,能够访问各类数据与工具,一旦失控会造成严重损害。

微软给出的这套解决方案,既出人意料,也带有自身商业考量。令人意外的一点在于,微软与 OpenAI、Anthropic 关系紧密,同时对两家企业都有投资。OpenAI 也是微软云业务的大客户,微软自身也设有 AI 实验室研发大模型。也就是说,微软正在让客户对自己部分商业合作伙伴的产品产生警惕。

而从商业利益角度来看,微软希望企业从自己这家云服务商手中购买智能体安全产品,而不是向 Anthropic 和 OpenAI 采购。抛开利益冲突不谈,这套逻辑本身站得住脚:监控智能体行为的软件,应当和智能体的提供方相互独立,就像审计机构需要独立于被审计的组织。

正如纳德拉所说:“我们需要将智能能力的供给,和对它的管控权限分离开。”

微软正通过多种方式抓住这一商业机遇。除守护智能体之外,微软还在 Microsoft Defender 产品内新增智能体检测功能,最多可识别员工带入工作环境的 60 种智能体,其中包括 Claude Code、Codex 以及 OpenClaw。产品同时新增功能,可以限制智能体访问数据与系统的权限,并根据任务动态调整智能体权限。如果智能体即将做出高风险操作,系统会要求人工审批。

将智能体视作不可信任的内部威胁这一思路,也正在整个行业逐步形成共识。

微软是英伟达全新开放智能体安全平台(Open Agent Safety Platform)的创始成员,该平台已经获得超过 100 家科技企业支持。该平台将智能体隔离在安全环境中,依托硬件监测并终止异常行为,功能类似紧急切断开关。在此之前,微软已经发布专为智能体打造的新款 Surface Laptop Ultra 笔记本电脑,设备搭载英伟达芯片,内置智能体安全管控模块。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
好奇查了一下陈宇昕的家境,原来他从小就在国外留学是有原因的

好奇查了一下陈宇昕的家境,原来他从小就在国外留学是有原因的

皮蛋儿电影
2026-10-20 09:58:37
特斯拉:公司CEO马斯克2025年考核未达标,全年实际到手收入为零,没有现金,也没有解锁任何股权

特斯拉:公司CEO马斯克2025年考核未达标,全年实际到手收入为零,没有现金,也没有解锁任何股权

极目新闻
2026-10-20 09:10:39
演员李小冉宣布离婚,其结婚逾十年未生育,曾坦言“没有心理成熟到想去承担这样一个沉重的责任”

演员李小冉宣布离婚,其结婚逾十年未生育,曾坦言“没有心理成熟到想去承担这样一个沉重的责任”

台州交通广播
2026-10-20 00:28:24
美军从高空中坠落死亡!现场数万人呆若木鸡,如“死一般安静”!

美军从高空中坠落死亡!现场数万人呆若木鸡,如“死一般安静”!

铁锤侃侃而谈
2026-10-20 08:45:18
二十届五中全会定档,核心议题有重大变化

二十届五中全会定档,核心议题有重大变化

天气观察站
2026-10-20 08:25:42
菲律宾有人继续搞鬼,想对我大使如何?

菲律宾有人继续搞鬼,想对我大使如何?

新民周刊
2026-10-20 09:06:39
明年国考几乎成了税务专场,这是什么信号?

明年国考几乎成了税务专场,这是什么信号?

深水财经社
2026-10-19 16:59:25
紫牛热点|一家三口被困豪华酒店卫生间超4小时,喷淋失控水漫楼道,一岁多幼儿险失温

紫牛热点|一家三口被困豪华酒店卫生间超4小时,喷淋失控水漫楼道,一岁多幼儿险失温

扬子晚报
2026-10-20 09:37:31
法国骚乱现场:情侣火焰旁对饮,女子烟雾中慢跑,网友:太魔幻了

法国骚乱现场:情侣火焰旁对饮,女子烟雾中慢跑,网友:太魔幻了

扬子晚报
2026-10-20 12:39:59
震撼!超美博主卧底炼铜群!保存大量偷拍QJ交换幼女等证据!

震撼!超美博主卧底炼铜群!保存大量偷拍QJ交换幼女等证据!

魔都囡
2026-10-20 07:17:24
连续两年、唯一入围!优博瑞霂再进IDF全球乳业创新奖三强

连续两年、唯一入围!优博瑞霂再进IDF全球乳业创新奖三强

铑财
2026-10-20 12:48:15
刘恺威承认与黎纪君恋情:“多谢大家关心,我们是打网球认识的,大家有共同爱好,所以很合得来”

刘恺威承认与黎纪君恋情:“多谢大家关心,我们是打网球认识的,大家有共同爱好,所以很合得来”

韩小娱
2026-10-20 11:59:46
十年为序:中国洗碗机的破土与远征

十年为序:中国洗碗机的破土与远征

中国家电网
2026-09-17 08:41:57
黄景瑜未成名地铁旧照,模样普通认不出

黄景瑜未成名地铁旧照,模样普通认不出

喜欢历史的阿繁
2026-10-20 02:15:38
反思过去的计划生育口号,孙玉良:不负责任的口号损害政府公信力

反思过去的计划生育口号,孙玉良:不负责任的口号损害政府公信力

孙玉良
2026-10-18 08:56:59
美以伊局势:以总理下令推翻伊朗政权,称特朗普态度非常明确;伊称美若发动战争将面临巨大麻烦,世界将有严重能源危机;也门军营遭袭53死

美以伊局势:以总理下令推翻伊朗政权,称特朗普态度非常明确;伊称美若发动战争将面临巨大麻烦,世界将有严重能源危机;也门军营遭袭53死

日照日报
2026-10-20 08:12:21
张铁林聚餐照曝光!叼大烟斗,桌上摆满老北京铜锅涮肉

张铁林聚餐照曝光!叼大烟斗,桌上摆满老北京铜锅涮肉

草莓解说体育
2026-10-19 06:44:09
终于判了!疫苗女王无期徒刑,被罚91亿,但那些接种家庭怎么办?

终于判了!疫苗女王无期徒刑,被罚91亿,但那些接种家庭怎么办?

哄动一时啊
2026-10-18 09:57:57
越南准备采购100台盾构机,中方抢先动手,官宣管制盾构机出口

越南准备采购100台盾构机,中方抢先动手,官宣管制盾构机出口

阿绐聊社会
2026-10-20 08:21:03
国庆刚过又一内鬼泄密被揪!身份曝光央视发声,网友:严惩叛国贼

国庆刚过又一内鬼泄密被揪!身份曝光央视发声,网友:严惩叛国贼

新一说史
2026-10-19 14:11:39
2026-10-20 14:07:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
373784文章数 607629关注度
往期回顾 全部

科技要闻

新版MiniMax,能和DeepSeek掰手腕吗?

头条要闻

男子身中16刀死亡 前妻逃亡26年"隐身"当了妇女主任

头条要闻

男子身中16刀死亡 前妻逃亡26年"隐身"当了妇女主任

体育要闻

30天30队·奇才:三状元一榜眼 35胜?

娱乐要闻

港媒曝刘恺威与32岁黎纪君恋情,秘密恋爱两个月

财经要闻

这些科技股王,为什么总输给茅台?

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

时尚
教育
艺术
健康
手机

4种“棒针毛衣”穿搭,美翻了!

教育要闻

日常英语:玩暧昧会引起误会

艺术要闻

17家民企抱团,投资50亿建成广州第四高楼,每家分3层!

痘痘能根治吗?皮肤科医生说实话

手机要闻

黄牛被坑惨!iPhone Duo溢价暴跌!首发前溢价从5.8万缩水至 3000 元

无障碍浏览 进入关怀版