网易首页 > 网易号 > 正文 申请入驻

50道未发表物理难题,GPT-6 Astra从88%改到98%

0
分享至

五十道题,全部来自物理学家尚未发表的研究笔记。GPT-6 Astra 第一次跑出约 88%,专家复核后,分数被改到了 98%。改分的理由不是模型答错了,而是它指出了出题人自己的计算错误。


这套新基准叫 TheoPhysEval,论文挂在 arXiv(编号 2610.16733)。参与机构横跨国际理论科学中心、塔塔基础研究所、UT Austin、东京大学、哈佛、UPenn、杜克和 Google DeepMind。题目覆盖量子场论、全息对偶及相邻领域。

出题阵容里有 Suvrat Raju、Sudip Chakraborty、A. Ramesh Chandra 等数十位物理学家。难度标尺定得很硬:相关子领域的顶尖专家,不用 AI 独立解一道题,需要一整天甚至更久;相邻领域的专家可能耗掉大量时间,也可能完全解不出来。

为什么要专门造一套新题?因为互联网上的题库早已被吸进训练数据,考不出真实推理上限。TheoPhysEval 的做法是只用未发表的笔记出题,从源头上切断记忆路径。

首轮成绩单上,Claude Opus 5.5 拿到 92%,高于 Astra 的 88%。受测模型还包括 Gemini 3.8 Flash 和开源模型 DeepSeek-V4.1-Flash。转折出现在专家审计评分环节:Astra 对自己的答案异常坚持,审计下来,模型抓到的是出题人写题时的计算失误。

人类专家承认错误之后,Astra 的分数从 88% 升到 98%。一个模型在量子场论和全息对偶这类题目上挑出顶尖理论物理学家的题面漏洞,指向的已经不只是题库背诵能力,而是逼近专家级原创推理的边缘。

另一组数据来自 MIT 的独立测量:过去两年,前沿 AI 求解理论科学问题的能力提升了 17 倍。研究者给出的判断是,科学正处在剧变前夜——数学之后,量子场论、宇宙学、经济学正在被逐步纳入 AI 辅助的工作流。

对科研机构来说,这件事有两面。一面是 TheoPhysEval 提供了一把真正抗污染的标尺,可以用来量科学推理;另一面是结果本身在提示,用未发表笔记出题这套当前防数据泄漏的黄金方法,保质期可能不会太长——模型正在物理科学各领域逼近专家水平。

关键数据摆在一起看:

  • TheoPhysEval:50 道未发表前沿题,取自量子场论与全息对偶
  • GPT-6 Astra:初评 88%,专家修正自身错误后升至 98%
  • Claude Opus 5.5:92%
  • 其他受测模型:Gemini 3.8 Flash、开源 DeepSeek-V4.1-Flash
  • MIT 测量:前沿 AI 科学问题求解能力两年提升 17 倍

分数从 88 到 98 的那 10 个百分点,不是模型变强了,是人类的题被改对了。这个细节比 98% 本身更值得记一笔。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
油价又要变!下一轮调价窗口定在10月29日

油价又要变!下一轮调价窗口定在10月29日

沙雕小琳琳
2026-10-19 01:32:33
张本宇被永久吊销教练执照:归化教练到底踩了日本乒协哪条红线?

张本宇被永久吊销教练执照:归化教练到底踩了日本乒协哪条红线?

猪猪爱影视
2026-10-19 04:06:05
演都不演了!电影节上,周迅获奖她撇嘴满脸不屑,对着镜头翻白眼

演都不演了!电影节上,周迅获奖她撇嘴满脸不屑,对着镜头翻白眼

历史的烟火
2026-10-18 13:03:43
北京人艺院长冯远征怒批艺考门槛,一米六几的演员连考场都进不去

北京人艺院长冯远征怒批艺考门槛,一米六几的演员连考场都进不去

江启
2026-10-18 14:14:44
官方:武网冠军赫瓦林斯卡因左腿伤势退出宁波网球公开赛

官方:武网冠军赫瓦林斯卡因左腿伤势退出宁波网球公开赛

懂球帝
2026-10-19 16:15:44
当着全世界的面!日本给赖清德“当头一棒”,祖国统一众望所归

当着全世界的面!日本给赖清德“当头一棒”,祖国统一众望所归

阿器谈史
2026-10-18 16:00:56
“这拿筷子姿势,太恶心了”,一段母女吃饭视频火了,又一个贫民窟的小公主

“这拿筷子姿势,太恶心了”,一段母女吃饭视频火了,又一个贫民窟的小公主

蝴蝶花雨话教育
2026-10-06 11:47:56
还是老辈子相亲有意思,网友:搁现在都得黄

还是老辈子相亲有意思,网友:搁现在都得黄

康富贵碎碎念
2026-10-19 14:12:23
真面目露出来了?马英九曾直言:我不希望台湾成为第二个香港!

真面目露出来了?马英九曾直言:我不希望台湾成为第二个香港!

郭蛹包工头
2026-10-19 16:53:54
600487,近60万手封板!300852,20%涨停!CPO,全线反弹

600487,近60万手封板!300852,20%涨停!CPO,全线反弹

证券时报
2026-10-19 11:46:04
退款只够半张卡!RTX 5090损坏商家只退原价3.4万:店里同款现价6.6万

退款只够半张卡!RTX 5090损坏商家只退原价3.4万:店里同款现价6.6万

快科技
2026-10-19 17:19:10
释永信怎么也没想到,当年举报自己的释延鲁,如今年收入过亿

释永信怎么也没想到,当年举报自己的释延鲁,如今年收入过亿

街上的行人很刺眼
2026-09-03 19:22:26
纪委已明确!2026年将“重点查处”4类人群,一个都别想跑!

纪委已明确!2026年将“重点查处”4类人群,一个都别想跑!

职场资深秘书
2026-10-18 17:09:19
你信与不信,男性过了65,基本没有如下3个方面的需求

你信与不信,男性过了65,基本没有如下3个方面的需求

荔子言
2026-10-19 10:30:33
刘畊宏直播间凉了,“老板娘”的身材戳破了多少人的减肥梦?

刘畊宏直播间凉了,“老板娘”的身材戳破了多少人的减肥梦?

看尽落尘花q
2026-08-23 19:28:46
上将是终身军衔,上将退休后仍然能穿上将制服

上将是终身军衔,上将退休后仍然能穿上将制服

袁老师说历史
2026-10-03 15:47:50
油价或将大幅下调!10 月 92号还挂在8块5上下,回7元那是瞎热闹

油价或将大幅下调!10 月 92号还挂在8块5上下,回7元那是瞎热闹

沙雕小琳琳
2026-10-19 01:32:32
为什么我感受不到985的实力?网友分享让人感慨万千!

为什么我感受不到985的实力?网友分享让人感慨万千!

另子维爱读史
2026-10-18 20:44:15
炸串女摊主被顾客差评后跳河轻生,家属:对方购买10元炸菜为自选模式,因对菜量不满,在多平台发布“避雷”帖;警方介入调查

炸串女摊主被顾客差评后跳河轻生,家属:对方购买10元炸菜为自选模式,因对菜量不满,在多平台发布“避雷”帖;警方介入调查

大爱三湘
2026-10-18 19:14:26
字节把微信逼急了?

字节把微信逼急了?

虎嗅APP
2026-10-19 17:08:22
2026-10-19 17:48:49
闪存猎手
闪存猎手
全网蹲好价的野生捕手,算力与羊毛都不可辜负。
225文章数 81关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

一男子在成都租走坦克300 失联半年后GPS在境外上线

头条要闻

一男子在成都租走坦克300 失联半年后GPS在境外上线

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

奚梦瑶回应重返维密:还是很开心的

财经要闻

黄奇帆之子往事:从广微系到魏桥的跳跃

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

艺术
本地
数码
房产
公开课

艺术要闻

缅怀 | 著名油画家 宋惠民先生逝世,享年89岁

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

数码要闻

179元 小米米家热敷坐姿垫发布:三挡恒温、久坐提醒

房产要闻

最新房价:海口,三亚齐跌!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版