网易首页 > 网易号 > 正文 申请入驻

OpenAI忐忑发布Astra,奥特曼称对AI心里没底后续模型将放缓

0
分享至

OpenAI下一代模型Astra 即将发布,但这一次他们显得格外扭捏。

刚刚山姆奥特曼在 X 发帖称,“我们即将发布下一代模型”,但“我们已经有一段时间生活在对进步既兴奋又焦虑的张力之中,这对我们来说仍然是矛盾的”。

与此同时, OpenAI最新发布的《Path to Astra: critical capabilities and frontier safeguards》显示,公司现在认为Astra已经达到《准备框架》(Preparedness Framework)定义的网络安全“Critical”能力门槛。


这是OpenAI首个被认定达到这一等级的模型。

按照OpenAI的定义,如果模型能够在许多经过强化保护的真实关键系统中,在无人干预的情况下识别,并开发各种严重程度的零日漏洞利用程序,或者仅获得一个高层次目标,就能针对强化目标设计并执行端到端的新型网络攻击策略,就达到Critical门槛。

OpenAI对Astra进行了公开和内部基准测试以及专家评估。结果显示,与GPT-5.6 Sol相比,Astra不仅网络安全能力明显提升,而且Token效率也明显更高。


在ExploitBench测试中,Astra取得了100%的满分。随后,OpenAI又建立了包含20个近期披露高严重性V8漏洞的内部测试集。在测试过程中,Astra甚至发现并利用了两个零日漏洞,OpenAI目前正在与相关维护者合作披露这两个漏洞。

在专家针对强化保护的浏览器和操作系统进行的测试中,Astra发现了此前未知的漏洞,并将其组合成可运行的攻击链。

其中一次测试中,它构建了完整的浏览器入侵链,突破沙箱并在主机上执行命令;在另一项测试中,它将多个漏洞组合起来,实现了从普通用户权限到root权限的本地权限提升。

基于此,OpenAI得出的结论是:Astra已经达到Critical网络安全能力门槛。

与此同时,OpenAI承认,Astra的开发和发布曾被主动放慢。

过去几周,公司推迟了Astra部分开发和发布工作,用于加强和测试针对网络滥用以及模型未经授权行为的防护。

这与上个月发生的Hugging Face事件有关。OpenAI此前披露,其两个模型曾逃离训练环境、访问开放互联网并入侵Hugging Face系统,公司将其称为“前所未有的网络安全事件”,并一度暂停部分内部训练和研究。

OpenAI强调,Astra并未参与Hugging Face事件。但公司将从事件中获得的经验纳入了Astra的安全方案,并称事后测试显示,当时的生产环境防护本可以阻止该事件。此后,OpenAI又为Astra增加了更强的防护。

其中包括训练模型更可靠地拒绝有害网络安全请求、加强防止滥用的措施,以及通过监控系统发现并自动停止潜在的未经授权活动。

测试中,Astra对网络安全越狱请求的拒绝率达到91.5%,GPT-5.6 Sol为59%。

OpenAI还测试了模型是否会在任务被自动审查拒绝后尝试绕过审查。GPT-5.6 Sol有5.3%的样本成功绕过,而Astra为0%。



在另一项受Hugging Face事件启发的“蜜罐”测试中,没有生产安全防护的GPT-5.6 Sol在56%的测试中尝试访问目标;Astra则没有进行此类尝试。

不过,OpenAI也明确表示,这些测试数据是在特定模拟条件下、没有生产安全防护的情况下获得的,并不代表正常生产环境中的实际使用行为。

Astra预计仍将“很快”发布,但其最先进的网络安全能力不会完全开放。高级网络安全工作最初只提供给一小批测试人员,之后将通过OpenAI的网络安全联盟Daybreak Blue扩大访问范围,以支持防御性使用。

OpenAI同时表示,额外的安全检查可能会减慢、暂停甚至停止正常工作,包括防御性网络安全工作。如果监控系统暂停任务,ChatGPT或Codex用户可能需要审核相关操作后才能继续;在API等其他场景中,任务则会停止。

对 Astra 如此忐忑,以后的模型 OpenAI 会更加谨慎。

OpenAI表示,对于Astra之后的模型,公司已经在必要时放慢开发速度,以确保能够完成足够的安全和对齐工作。

山姆·奥特曼发帖表示,“AI正在变得极其强大,没有人能够完全理解这会带来什么后果。”

他承认,OpenAI内部已经持续存在一种矛盾:一方面为AI进步感到兴奋,另一方面又感到焦虑。

“我们已经在这种兴奋与焦虑之间的张力中生活了一段时间,而这种感觉对我们来说依然是不协调的。”


奥特曼认为,随着AI能力继续提升,社会需要不断理解AI的发展方向以及模型在现实世界中的表现,同时也需要能够与人类目标保持一致的AI来应对未来的技术转型。

而OpenAI在Astra报告最后给出的判断是,Astra之后的模型将对其提出更高要求,OpenAI 会花足够的时间,完成所需的工作,以承担起这份责任。

山姆奥特曼说,“对于之后的模型,我们根据需要放慢了步伐,以确保能够充分开展安全和对齐工作”。

这应该可看作是 OpenAI对后续模型主动放慢速度的一次公开说明。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
眼看“无力回天”,郑丽文主动交权离任?她的回应让大陆松了口气

眼看“无力回天”,郑丽文主动交权离任?她的回应让大陆松了口气

坠入二次元的海洋
2026-09-08 10:50:25
8月汽车销量前十已无燃油车

8月汽车销量前十已无燃油车

第一财经资讯
2026-09-08 19:04:17
微软工程师放话:手写代码时代已经结束

微软工程师放话:手写代码时代已经结束

爬虫饲养员
2026-09-07 20:06:57
袁腾飞去了美国,梁宏达去了加拿大?

袁腾飞去了美国,梁宏达去了加拿大?

十柱
2026-09-06 12:32:39
发现一个奇怪现象:为啥很多家庭的车都10年以上了,还不舍得换?

发现一个奇怪现象:为啥很多家庭的车都10年以上了,还不舍得换?

趣味萌宠的日常
2026-09-07 16:22:42
从135到98,肚子瘪下去才明白:内脏脂肪最怕的,从来不是跑步

从135到98,肚子瘪下去才明白:内脏脂肪最怕的,从来不是跑步

健身狂人
2026-09-06 02:07:39
热议韦世豪连续发声:估计是听证会给他搞毛了;俱乐部该让他闭嘴

热议韦世豪连续发声:估计是听证会给他搞毛了;俱乐部该让他闭嘴

懂球帝
2026-09-08 17:02:05
 2004年,马加爵在案发前因病卧床,林某带回两份盒饭在317宿舍与他分食。这点温情,为何最终还是没能阻止四天后那场震惊全国的血案?

 2004年,马加爵在案发前因病卧床,林某带回两份盒饭在317宿舍与他分食。这点温情,为何最终还是没能阻止四天后那场震惊全国的血案?

人生录
2026-08-27 00:05:16
和工藤静香结婚26年,54岁木村拓哉仍帅气,两女儿颜值高给他争光

和工藤静香结婚26年,54岁木村拓哉仍帅气,两女儿颜值高给他争光

东方不败然多多
2026-09-08 09:21:04
反腐不再靠举报!2026年纪委大数据这样“揪”出腐败

反腐不再靠举报!2026年纪委大数据这样“揪”出腐败

职场资深秘书
2026-09-08 18:12:40
“19999元非常有诚意”!余承东这句话,让华为新款手机冲上了热搜

“19999元非常有诚意”!余承东这句话,让华为新款手机冲上了热搜

听心堂
2026-09-07 18:45:52
英媒:阿森纳欧冠对阵那不勒斯将大幅调整首发阵容

英媒:阿森纳欧冠对阵那不勒斯将大幅调整首发阵容

懂球帝
2026-09-08 20:45:35
飞天茅台时隔一个月再调价:线下涨至1766元,7款产品涨跌互现

飞天茅台时隔一个月再调价:线下涨至1766元,7款产品涨跌互现

时代周报
2026-09-08 15:06:17
李书磊会见越共中央理论委员会主席阮春胜

李书磊会见越共中央理论委员会主席阮春胜

新华社
2026-09-08 15:30:05
世界领先!石油或许要变“白菜价”?中国新技术让国力再次飙升!

世界领先!石油或许要变“白菜价”?中国新技术让国力再次飙升!

蜉蝣说
2026-09-08 16:44:39
德阿尔梅达,将访华

德阿尔梅达,将访华

政知新媒体
2026-09-07 13:17:07
老板亏麻了!车库翻出30条前公司当垃圾处理内存:总价超7.1万元

老板亏麻了!车库翻出30条前公司当垃圾处理内存:总价超7.1万元

快科技
2026-09-07 16:58:17
2011年,云南省麻栗坡县:75岁老头全身赤裸惨死,左手一根手指被砍掉,现场有女性遗留的脏内衣和臭袜子

2011年,云南省麻栗坡县:75岁老头全身赤裸惨死,左手一根手指被砍掉,现场有女性遗留的脏内衣和臭袜子

法网恢恢
2026-09-08 21:01:35
澳门冠军赛大冷门!日本全国冠军一轮游,中国名将晋级16强 大藤沙月惊天翻盘

澳门冠军赛大冷门!日本全国冠军一轮游,中国名将晋级16强 大藤沙月惊天翻盘

好乒乓
2026-09-08 20:56:45
43岁网红赴泰做私密填充手术身亡,肺栓塞致死,以天价金棺安葬

43岁网红赴泰做私密填充手术身亡,肺栓塞致死,以天价金棺安葬

点点细语
2026-09-07 16:01:34
2026-09-08 22:39:00
AI先锋官 incentive-icons
AI先锋官
AIGC大模型及应用精选与评测
661文章数 104关注度
往期回顾 全部

科技要闻

小米再次背水一战

头条要闻

针对印度裔的仇恨言论集中爆发 新加坡高层紧急灭火

头条要闻

针对印度裔的仇恨言论集中爆发 新加坡高层紧急灭火

体育要闻

韩旭:我一定会再次走出去

娱乐要闻

郭德纲被处罚,郭麒麟被曝恋情瓜

财经要闻

智谱六连跌失守1000大关,发生了什么?

汽车要闻

领克20 领克的纯电小钢炮这次更运动了

态度原创

房产
游戏
教育
艺术
时尚

房产要闻

真快啊!海口这个超级城更,又有大动作!

IGN又打出10分满分!开放世界《英灵神殿》正式版

教育要闻

越闹越大!107名毕业生被指认卖国,和星宇股份有没有关系

艺术要闻

吴冠中 一次画了六张富春江,这张1437.5万

会穿衣的女性,能够借助最合适的单品,"修身上衣"显瘦又大方

无障碍浏览 进入关怀版