网易首页 > 网易号 > 正文 申请入驻

OpenAI忐忑发布Astra,奥特曼称对AI心里没底后续模型将放缓

0
分享至

OpenAI下一代模型Astra 即将发布,但这一次他们显得格外扭捏。

刚刚山姆奥特曼在 X 发帖称,“我们即将发布下一代模型”,但“我们已经有一段时间生活在对进步既兴奋又焦虑的张力之中,这对我们来说仍然是矛盾的”。

与此同时, OpenAI最新发布的《Path to Astra: critical capabilities and frontier safeguards》显示,公司现在认为Astra已经达到《准备框架》(Preparedness Framework)定义的网络安全“Critical”能力门槛。


这是OpenAI首个被认定达到这一等级的模型。

按照OpenAI的定义,如果模型能够在许多经过强化保护的真实关键系统中,在无人干预的情况下识别,并开发各种严重程度的零日漏洞利用程序,或者仅获得一个高层次目标,就能针对强化目标设计并执行端到端的新型网络攻击策略,就达到Critical门槛。

OpenAI对Astra进行了公开和内部基准测试以及专家评估。结果显示,与GPT-5.6 Sol相比,Astra不仅网络安全能力明显提升,而且Token效率也明显更高。


在ExploitBench测试中,Astra取得了100%的满分。随后,OpenAI又建立了包含20个近期披露高严重性V8漏洞的内部测试集。在测试过程中,Astra甚至发现并利用了两个零日漏洞,OpenAI目前正在与相关维护者合作披露这两个漏洞。

在专家针对强化保护的浏览器和操作系统进行的测试中,Astra发现了此前未知的漏洞,并将其组合成可运行的攻击链。

其中一次测试中,它构建了完整的浏览器入侵链,突破沙箱并在主机上执行命令;在另一项测试中,它将多个漏洞组合起来,实现了从普通用户权限到root权限的本地权限提升。

基于此,OpenAI得出的结论是:Astra已经达到Critical网络安全能力门槛。

与此同时,OpenAI承认,Astra的开发和发布曾被主动放慢。

过去几周,公司推迟了Astra部分开发和发布工作,用于加强和测试针对网络滥用以及模型未经授权行为的防护。

这与上个月发生的Hugging Face事件有关。OpenAI此前披露,其两个模型曾逃离训练环境、访问开放互联网并入侵Hugging Face系统,公司将其称为“前所未有的网络安全事件”,并一度暂停部分内部训练和研究。

OpenAI强调,Astra并未参与Hugging Face事件。但公司将从事件中获得的经验纳入了Astra的安全方案,并称事后测试显示,当时的生产环境防护本可以阻止该事件。此后,OpenAI又为Astra增加了更强的防护。

其中包括训练模型更可靠地拒绝有害网络安全请求、加强防止滥用的措施,以及通过监控系统发现并自动停止潜在的未经授权活动。

测试中,Astra对网络安全越狱请求的拒绝率达到91.5%,GPT-5.6 Sol为59%。

OpenAI还测试了模型是否会在任务被自动审查拒绝后尝试绕过审查。GPT-5.6 Sol有5.3%的样本成功绕过,而Astra为0%。



在另一项受Hugging Face事件启发的“蜜罐”测试中,没有生产安全防护的GPT-5.6 Sol在56%的测试中尝试访问目标;Astra则没有进行此类尝试。

不过,OpenAI也明确表示,这些测试数据是在特定模拟条件下、没有生产安全防护的情况下获得的,并不代表正常生产环境中的实际使用行为。

Astra预计仍将“很快”发布,但其最先进的网络安全能力不会完全开放。高级网络安全工作最初只提供给一小批测试人员,之后将通过OpenAI的网络安全联盟Daybreak Blue扩大访问范围,以支持防御性使用。

OpenAI同时表示,额外的安全检查可能会减慢、暂停甚至停止正常工作,包括防御性网络安全工作。如果监控系统暂停任务,ChatGPT或Codex用户可能需要审核相关操作后才能继续;在API等其他场景中,任务则会停止。

对 Astra 如此忐忑,以后的模型 OpenAI 会更加谨慎。

OpenAI表示,对于Astra之后的模型,公司已经在必要时放慢开发速度,以确保能够完成足够的安全和对齐工作。

山姆·奥特曼发帖表示,“AI正在变得极其强大,没有人能够完全理解这会带来什么后果。”

他承认,OpenAI内部已经持续存在一种矛盾:一方面为AI进步感到兴奋,另一方面又感到焦虑。

“我们已经在这种兴奋与焦虑之间的张力中生活了一段时间,而这种感觉对我们来说依然是不协调的。”


奥特曼认为,随着AI能力继续提升,社会需要不断理解AI的发展方向以及模型在现实世界中的表现,同时也需要能够与人类目标保持一致的AI来应对未来的技术转型。

而OpenAI在Astra报告最后给出的判断是,Astra之后的模型将对其提出更高要求,OpenAI 会花足够的时间,完成所需的工作,以承担起这份责任。

山姆奥特曼说,“对于之后的模型,我们根据需要放慢了步伐,以确保能够充分开展安全和对齐工作”。

这应该可看作是 OpenAI对后续模型主动放慢速度的一次公开说明。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
新西兰小偷抢了华人博主的手机,发现正在直播,后续离奇曲折

新西兰小偷抢了华人博主的手机,发现正在直播,后续离奇曲折

杭城村叔
2026-09-08 13:18:47
太子奶创始人李途纯去世,其子李帅难掩悲痛:“我没有准备好!我还无法接受!”

太子奶创始人李途纯去世,其子李帅难掩悲痛:“我没有准备好!我还无法接受!”

潇湘晨报
2026-09-08 22:52:09
利曼大捷!俄罗斯空天军的黑色星期一,总计损失5架战机

利曼大捷!俄罗斯空天军的黑色星期一,总计损失5架战机

鹰眼Defence
2026-09-08 17:14:23
伟大的2-0爆冷!郑钦文一战创历史,赢麻了:排名飙升+狂揽523万

伟大的2-0爆冷!郑钦文一战创历史,赢麻了:排名飙升+狂揽523万

大秦壁虎白话体育
2026-09-08 02:24:44
输球赢人品!意大利主帅表态,日本队一针见血,女篮赢球原因曝光

输球赢人品!意大利主帅表态,日本队一针见血,女篮赢球原因曝光

寒士之言本尊
2026-09-08 18:25:30
尊界的买家,想要不一样的豪华车

尊界的买家,想要不一样的豪华车

晚点LatePost
2026-09-07 22:21:42
中美紧张,中日紧张,中英紧张,中加紧张,中印紧张,中韩紧张,中欧紧张…… 各类消息看多了,怎么感觉每天都在过得很紧张?

中美紧张,中日紧张,中英紧张,中加紧张,中印紧张,中韩紧张,中欧紧张…… 各类消息看多了,怎么感觉每天都在过得很紧张?

回京历史梦
2026-09-07 17:48:31
律师公开广西朱广成涉黑案中大规模刑讯逼供细节:有人被逼到撞墙自杀,有人在庭审期间死亡

律师公开广西朱广成涉黑案中大规模刑讯逼供细节:有人被逼到撞墙自杀,有人在庭审期间死亡

追月数星
2026-09-08 14:09:40
105比64狂胜41分!中国女篮懵了美国也懵了:意大利被捷克坑惨了?

105比64狂胜41分!中国女篮懵了美国也懵了:意大利被捷克坑惨了?

篮球快餐车
2026-09-08 08:59:03
女子称被4岁男童摸屁股,绝不谅解在走诉讼流程了,她账号上8个视频3个都是吵架的

女子称被4岁男童摸屁股,绝不谅解在走诉讼流程了,她账号上8个视频3个都是吵架的

汉史趣闻
2026-09-08 11:27:38
中国男足公布集训名单:蓉城成“国脚大户” 清华附中高中生赵松源“跳级”入选

中国男足公布集训名单:蓉城成“国脚大户” 清华附中高中生赵松源“跳级”入选

封面新闻
2026-09-08 21:57:15
长沙“摸臀案”变罗生门!4岁男孩碰了女生屁股,3次调解未果,双方要对簿公堂,网友调侃:坚决判决4岁男人猥亵

长沙“摸臀案”变罗生门!4岁男孩碰了女生屁股,3次调解未果,双方要对簿公堂,网友调侃:坚决判决4岁男人猥亵

火山詩话
2026-09-08 11:37:49
苹果保密工作白做了 手机壳厂提前曝光折叠屏命名:就叫iPhone Duo

苹果保密工作白做了 手机壳厂提前曝光折叠屏命名:就叫iPhone Duo

快科技
2026-09-08 18:47:08
南京"3千块工作"刷屏:除了体制,全是垃圾工作?

南京"3千块工作"刷屏:除了体制,全是垃圾工作?

六子吃凉粉
2026-09-08 18:19:58
7000多公里横贯华夏两极问界为何坚持做存量车用户的价值守护者?

7000多公里横贯华夏两极问界为何坚持做存量车用户的价值守护者?

汽车公社
2026-09-06 18:13:34
12小时仅50块?学生爆料被学校派去做鲜花饼,因不满薪资往饼里吐痰

12小时仅50块?学生爆料被学校派去做鲜花饼,因不满薪资往饼里吐痰

齐天候
2026-09-08 20:46:49
内塔尼亚胡:伊朗政权末日将近

内塔尼亚胡:伊朗政权末日将近

澎湃新闻
2026-09-07 23:52:38
长沙小孩摸女人后续:正脸曝光,网红账号被扒,黑历史一件接一件

长沙小孩摸女人后续:正脸曝光,网红账号被扒,黑历史一件接一件

皮蛋儿电影
2026-09-08 14:19:33
南通烤肉店老板老陶深夜跳江身亡!6家门店,一个爱好毁掉一切

南通烤肉店老板老陶深夜跳江身亡!6家门店,一个爱好毁掉一切

天天热点见闻
2026-09-08 06:33:00
访华结束就集体窜台?中方出手制裁不到12时,高市或缺席重要仪式

访华结束就集体窜台?中方出手制裁不到12时,高市或缺席重要仪式

策前论
2026-09-08 20:15:03
2026-09-08 23:51:00
AI先锋官 incentive-icons
AI先锋官
AIGC大模型及应用精选与评测
661文章数 104关注度
往期回顾 全部

科技要闻

小米再次背水一战

头条要闻

太子奶创始人李途纯去世 其子难掩悲痛:我没有准备好

头条要闻

太子奶创始人李途纯去世 其子难掩悲痛:我没有准备好

体育要闻

韩旭:我一定会再次走出去

娱乐要闻

郭德纲被处罚,郭麒麟被曝恋情瓜

财经要闻

智谱六连跌失守1000大关,发生了什么?

汽车要闻

领克20 领克的纯电小钢炮这次更运动了

态度原创

教育
时尚
数码
健康
公开课

教育要闻

汤家凤当年为什么苦学英语?汤家凤为什么学不好语文?

会穿衣的女性,能够借助最合适的单品,"修身上衣"显瘦又大方

数码要闻

OWC发布全新雷电5扩展坞 无需转接头直连双HDMI显示器

同样是脑梗,为何康复结局大不同?

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版