网易首页 > 网易号 > 正文 申请入驻

50道未发表物理难题,GPT-6 Astra从88%改到98%

0
分享至

五十道题,全部来自物理学家尚未发表的研究笔记。GPT-6 Astra 第一次跑出约 88%,专家复核后,分数被改到了 98%。改分的理由不是模型答错了,而是它指出了出题人自己的计算错误。


这套新基准叫 TheoPhysEval,论文挂在 arXiv(编号 2610.16733)。参与机构横跨国际理论科学中心、塔塔基础研究所、UT Austin、东京大学、哈佛、UPenn、杜克和 Google DeepMind。题目覆盖量子场论、全息对偶及相邻领域。

出题阵容里有 Suvrat Raju、Sudip Chakraborty、A. Ramesh Chandra 等数十位物理学家。难度标尺定得很硬:相关子领域的顶尖专家,不用 AI 独立解一道题,需要一整天甚至更久;相邻领域的专家可能耗掉大量时间,也可能完全解不出来。

为什么要专门造一套新题?因为互联网上的题库早已被吸进训练数据,考不出真实推理上限。TheoPhysEval 的做法是只用未发表的笔记出题,从源头上切断记忆路径。

首轮成绩单上,Claude Opus 5.5 拿到 92%,高于 Astra 的 88%。受测模型还包括 Gemini 3.8 Flash 和开源模型 DeepSeek-V4.1-Flash。转折出现在专家审计评分环节:Astra 对自己的答案异常坚持,审计下来,模型抓到的是出题人写题时的计算失误。

人类专家承认错误之后,Astra 的分数从 88% 升到 98%。一个模型在量子场论和全息对偶这类题目上挑出顶尖理论物理学家的题面漏洞,指向的已经不只是题库背诵能力,而是逼近专家级原创推理的边缘。

另一组数据来自 MIT 的独立测量:过去两年,前沿 AI 求解理论科学问题的能力提升了 17 倍。研究者给出的判断是,科学正处在剧变前夜——数学之后,量子场论、宇宙学、经济学正在被逐步纳入 AI 辅助的工作流。

对科研机构来说,这件事有两面。一面是 TheoPhysEval 提供了一把真正抗污染的标尺,可以用来量科学推理;另一面是结果本身在提示,用未发表笔记出题这套当前防数据泄漏的黄金方法,保质期可能不会太长——模型正在物理科学各领域逼近专家水平。

关键数据摆在一起看:

  • TheoPhysEval:50 道未发表前沿题,取自量子场论与全息对偶
  • GPT-6 Astra:初评 88%,专家修正自身错误后升至 98%
  • Claude Opus 5.5:92%
  • 其他受测模型:Gemini 3.8 Flash、开源 DeepSeek-V4.1-Flash
  • MIT 测量:前沿 AI 科学问题求解能力两年提升 17 倍

分数从 88 到 98 的那 10 个百分点,不是模型变强了,是人类的题被改对了。这个细节比 98% 本身更值得记一笔。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
上汽新车官宣:10月23日,正式上市

上汽新车官宣:10月23日,正式上市

科技堡垒
2026-10-18 10:09:25
上海锋线双核联盟独挡!张镇麟锁死小外攻守齐爆,李弘权万金油!

上海锋线双核联盟独挡!张镇麟锁死小外攻守齐爆,李弘权万金油!

篮球资讯达人
2026-10-19 21:56:04
3种豆子,已被列入肝病“黑名单”,再爱吃也不要碰了

3种豆子,已被列入肝病“黑名单”,再爱吃也不要碰了

路医生健康科普
2026-09-28 16:52:58
没想到,红婵重返跳水赛场仅3天,搭档陈芋汐因一个举动口碑暴涨

没想到,红婵重返跳水赛场仅3天,搭档陈芋汐因一个举动口碑暴涨

生命之泉的奥秘
2026-10-19 05:43:48
安志杰新片爆了,若选择春节档上映,或将取代《镖人》登顶全球冠军

安志杰新片爆了,若选择春节档上映,或将取代《镖人》登顶全球冠军

影视高原说
2026-10-19 16:02:22
注意保暖!北京明日有阵雨+大风+降温→

注意保暖!北京明日有阵雨+大风+降温→

家住东西城
2026-10-19 20:48:02
俄圣彼得堡石油码头遭袭起火!年吞吐量超1250万吨,数据中心也遇袭,2万人断电

俄圣彼得堡石油码头遭袭起火!年吞吐量超1250万吨,数据中心也遇袭,2万人断电

红星新闻
2026-10-18 16:58:20
简直离谱,小米正式宣布接入苹果生态功能!

简直离谱,小米正式宣布接入苹果生态功能!

XCiOS俱乐部
2026-10-18 09:27:19
未来国足边锋强得可怕!李昊炎3场轰6球,布尼亚明昨晚中超再度爆发

未来国足边锋强得可怕!李昊炎3场轰6球,布尼亚明昨晚中超再度爆发

林子说事
2026-10-19 06:54:09
你越无相,孩子越顺!

你越无相,孩子越顺!

南京择校
2026-10-18 22:28:20
CBA:卫冕冠军105-92送北控首败,深圳客场89-81逆转江苏迎首胜!

CBA:卫冕冠军105-92送北控首败,深圳客场89-81逆转江苏迎首胜!

老牛体育解说
2026-10-19 23:18:23
危险信号来了!战争爆发前兆四起,美四大警示,张召忠预言将成真

危险信号来了!战争爆发前兆四起,美四大警示,张召忠预言将成真

利刃号
2026-10-18 21:12:39
绝杀+三连胜!梅西隔空观战庆祝,谁能想到月初还是垫底弱旅?

绝杀+三连胜!梅西隔空观战庆祝,谁能想到月初还是垫底弱旅?

创造精彩剧情
2026-10-19 16:51:33
被传上午被免职,下午被带走,登 24 年春晚却忽然消失的黄宏今咋样

被传上午被免职,下午被带走,登 24 年春晚却忽然消失的黄宏今咋样

星娱叨叨社
2026-10-08 14:52:34
发现没?凡是长期不祭祖的家庭,过个十年八年,往往会有变化

发现没?凡是长期不祭祖的家庭,过个十年八年,往往会有变化

牛锅巴小钒
2026-10-18 03:47:07
取消特权,全民赞成!郑秉文被骂上了热搜,到底发生什么事?

取消特权,全民赞成!郑秉文被骂上了热搜,到底发生什么事?

大鱼简科
2026-08-18 16:44:54
5中1仅得3分2失误,登场21分钟输18分,男篮天才锋霸彻底陨落?

5中1仅得3分2失误,登场21分钟输18分,男篮天才锋霸彻底陨落?

弄月公子
2026-10-19 00:15:03
因为“真有人用”,所以取消了所有福利?这波操作太真实了

因为“真有人用”,所以取消了所有福利?这波操作太真实了

夜深爱杂谈
2026-10-03 20:30:57
阿斯:皇马高层对穆帅回归后的表现失望,德尚或成其继任者

阿斯:皇马高层对穆帅回归后的表现失望,德尚或成其继任者

懂球帝
2026-10-19 22:02:18
中国必须高度警惕南边邻居越南正面临分裂大危机!

中国必须高度警惕南边邻居越南正面临分裂大危机!

小马姨
2026-10-18 17:17:04
2026-10-20 00:24:49
闪存猎手
闪存猎手
全网蹲好价的野生捕手,算力与羊毛都不可辜负。
232文章数 82关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

21岁男生在稻城亚丁严重高反遇难 驴友透露营救细节

头条要闻

21岁男生在稻城亚丁严重高反遇难 驴友透露营救细节

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

奚梦瑶回应重返维密:还是很开心的

财经要闻

黄奇帆之子往事:从广微系到魏桥的跳跃

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

数码
家居
艺术
房产
军事航空

数码要闻

提前3年布局!LG Display意在拿下苹果29年高端显示器订单

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

俄罗斯当代画家 叶夫根尼·戈洛洛博夫风景油画选

房产要闻

最新房价:海口,三亚齐跌!

军事要闻

泽连斯基:若乌“被要求”举行战时选举 他将竞选连任

无障碍浏览 进入关怀版