网易首页 > 网易号 > 正文 申请入驻

Einsia AI发布世界模型终极大考!直面「物理规律理解」,最高仅57分

0
分享至

一个小球从空中落下,一束光照向镜面,一块包着石头的浮冰慢慢融化。对人来说,这些都是熟悉的物理现象。对模型来说,它们却是一场并不轻松的考试。

现在的模型,画面可以生成的很清晰,物体可以生成的很连贯,运动也可以看上去很顺畅。但小球是否遵循自由落体规律?反射光线的角度是否正确?冰融化之后,液面又会怎样变化?这些问题,需要从视频里真正测量。

Einsia AI 旗下 Navers Lab 的最新工作 「World Models' Last Exam in Physics」,用 40 个任务、9 类物理现象,对 8 个视频生成模型展开测试。当前模型中,Seedance 2.5 排名第一,但平均分也只有57.76 / 100

它想探究的本质是:

「现有的视频生成模型,是否能够遵守物理规律?」



  • 论文题目:World Models’ Last Exam in Physics
  • 项目主页:https://lab.einsia.ai/phys-last-exam
  • GitHub:https://github.com/Einsia/phys-last-exam
  • arXiv: https://arxiv.org/pdf/2610.08791

画面连贯了,物理就对了吗?

要判断画面连贯的背后,物理规律是否同样成立,研究团队构建了40 个视频生成任务,覆盖 9 类物理现象,涵盖力学、光学、流体、相变、电磁等方向。从小球下落到单摆振荡,从光线反射到浮冰融化,每道题都要求模型生成一个具体的物理过程,并接受相应物理关系的检验。

对模型来说,任务非常直接:

「给定一张初始图像和一段生成提示,生成接下来发生的物理过程。」

输入规定了场景的初始状态,以及接下来需要发生的事件的 Prompt;输出则是一段由模型生成的视频。模型需要保留图像中的物体与场景关系,让指定过程持续发生,并使其中的运动和变化符合相应的物理规律。

从确定的初始状态出发,生成一个在物理上成立的后续过程,正是模型需要完成的任务。

难点也恰恰在这里。



视频里的物理,究竟怎么测?

评测一段生成视频,需要分别回答两个问题:视频是否完整、连贯地呈现了要求的场景?场景中的过程是否符合物理规律?

这套评测因此将评分分为两部分:一致性分数 C 和 物理分数 P,两者均采用 0—100 分制。

一致性分数 C,衡量视频中的主体、事件和场景能否保持连贯,并提供完成任务所需的观察依据。

例如,评测自由落体时,小球应当持续可见,不能突然消失、变成另一个物体,或出现无法连续跟踪的位置跳变。评测两根单摆时,需要能辨认两根摆、观察释放和摆动过程,并看清比较周期与摆长所需的部分。

一致性分数由视觉语言模型 Qwen3.6-27B 给出。评测为每道任务设置专门的提示词,引导模型检查所需主体是否存在、关键事件是否出现,以及画面中的对象和过程是否保持连续,最终输出一个 0—100 分的分数。

一致性分数 C 反映的是视频是否呈现了可辨认、可观察的任务过程。



一个小球可以始终沿着连续轨迹下落,但它的位置随时间变化的关系仍然可能不符合自由落体规律;两根单摆可以平稳地摆动,但周期与摆长之间的关系仍然可能是错的。

这种差别会影响视频模型的下游应用。例如,机器人如果借助生成视频预演推动物体的后果,就需要模型正确描述受力和摩擦。预测的滑行距离一旦有误,机器人就可能选择错误的推动力度,使物体偏离目标。

因此,还需要物理分数 P,该指标衡量从视频中测出的物理量,与预先定义的物理关系有多大程度的一致。

「物理分数由测量结果决定,无需与参考视频比较,也不依赖视觉语言模型直接判断物理正确性。」

这套方法覆盖光学、流体、相变、电磁等不同领域,让多类物理现象都有具体的检验依据。

它的核心思路是:把视频中的「物理量」测出来,再检查它们是否满足相应的物理关系。

程序通过分割、跟踪、几何拟合和事件检测,从视频中提取轨迹、周期、角度、液面等可观察量,再按照各任务的指标计算误差和得分。物理分数由这些测量结果决定,无需与参考视频比较,也不依赖视觉语言模型直接判断物理正确性。

以两根长短不同的单摆为例,在小角度近似、重力条件相同的情况下,周期之比的平方,应当等于摆长之比。程序从视频中测出两根单摆的周期 T₁、T₂ 和摆长 L₁、L₂,计算这一关系的相对误差:



如果测量结果完全符合这条关系,e = 0;偏离越大,e 就越大。随后,程序将误差换算为该指标的分数:



其中,0.20 是该指标预先设定的误差尺度,对所有模型保持一致。按照这一规则:

  • 误差为 0,得 100 分。
  • 这条关系的相对误差为 20%,得 50 分。
  • 相对误差为 40%,得约 33.3 分。

一道任务可以包含多个指标。单摆任务除了检查周期与摆长的关系,还检查重复摆动时周期是否稳定。各项指标按任务规则计分后,对已定义指标取算术平均,得到物理分 P。若各项指标均已换算为百分制:

这样,分数就对应着具体的测量结果:模型究竟保留了哪条物理关系,又偏离了多少。



Seedance2.5 生成的视频评测(左 72.54 分,右 97.70 分)

总分 S 将一致性和物理性结合起来:一致性占 15%,物理性占 85%:



但物理部分有计入条件。当 C ≥ 80,才计算物理分记录,否则,物理部分不计入总分。

例如,C 为 100、P 为 60 时,总分是 66;如果 C 只有 60,即使记录到较高的物理分,总分也只有 9。这样可以避免主体缺失、关键事件未发生等问题,被局部物理指标的高分掩盖。

每项评测还保存中间测量结果和可视化证据,帮助研究者追查低分的原因:究竟是运动偏离了规律,关键事件没有出现,还是画面缺少足够的测量依据?

这套评测希望回答的是:当模型已经能生成逼真、连贯的视频时,画面中的物理过程,是否同样是正确的?

Seedance 领跑,但最高分仍只有 57.76



在本次参评的 8 个视频生成模型中,Seedance 2.5 以 57.76 分取得最高平均综合分,MiniMax H3 以 54.89 分紧随其后。

物理规律的理解,仍是当前模型的软肋

相变是一种常见的物理现象,比如冰变成水。对于这一简单现象的生成,只有 Seedance 2.5 一家领先,取得 95.61 分,而其余模型最高为 15 分。这一现象说明,大部分模型对基本的物理规律缺乏理解



冰块融化,液面高度不变,Seedance 得分为 95.61,MiniMax 生成的冰块没有融化,不遵循 Prompt,得分为 0.00

光学同样是各模型的共同难点。以 “光的折射与全反射” 任务为例,8 个模型的平均综合分均未超过 40 分。模型能够生成光束和介质界面的视觉外观,却难以在光路变化过程中持续保持相应的物理约束。



折射现象,MiniMax H3 能生成部分折射光线,但是是错的,分数为 31.67;Cosmos 不能生成,分数为 0.00 分

另一个共同难点是自由落体。这项任务中,各模型的平均一致性分达到98.75 分,平均物理分却只有13.88 分。小球可以完整、连贯地下落,但测得的运动仍可能偏离任务要求的物理关系。反映出当前模型对时序动力学建模能力的不足



小球自由落体,两者都是近似匀速下落,不符合物理,Seedance 得分为 29.50,Wan 得分为 22.72

这些结果表明,当前的生成模型,在大部分场景中仍然不理解物理世界的规律。

这套评分,和人类判断有多接近?

为了评估本研究中的物理量评分与人类判断的一致性,研究团队邀请10 位标注者,对覆盖 40 个任务的320 段视频进行人工评估,并将测量方法与视觉语言模型直接评分(Direct VLM)进行比较。

比较分为两种:一种先让标注者给视频打分,再检查自动评分与人类评分对视频优劣的排序是否一致;另一种直接展示两段视频,让标注者判断哪段更符合物理规律。



在两项比较中,本研究方法分别比 Direct VLM 提高8.18 和 7.50 个百分点,与人类之间的一致率仍有约 5 个百分点的差距。

实验结果说明,从视频中提取物理量、依据具体关系评分,比让视觉语言模型直接判断物理正确性,更贴近人类的判断。

从生成画面,到预测世界

一段生成画面看起来连贯,并不意味着它真的遵循了物理规律。

小球如何下落,物体怎样碰撞,冰块如何融化,这些过程都受到明确的物理关系约束。视频模型可以把过程 “画出来”,却未必真正保持住其中的规律。

World Models' Last Exam in Physics 的结果表明,一旦从 “看起来合理” 进一步追问运动轨迹、周期和物体之间的定量关系,当前生成模型的局限便会迅速暴露。

这项研究最终追问的,其实是一个更根本的问题:

「世界模型生成的,究竟只是一个 “像真的” 画面,还是一个真正符合物理规律的未来?」

从生成画面,到预测世界,中间隔着的,正是世界模型下一阶段需要跨越的能力边界。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
没有鼠疫,没有封锁边境,俄罗斯不明原因肺炎事件,截至10月7日已确认信息

没有鼠疫,没有封锁边境,俄罗斯不明原因肺炎事件,截至10月7日已确认信息

晓看说
2026-10-08 00:05:28
利润率从18%跌到1.1%,保时捷要造一台比911更贵的车

利润率从18%跌到1.1%,保时捷要造一台比911更贵的车

Ping值焦虑
2026-10-07 15:23:14
天呐!5个首发全报销,赛季还没开打就交代了!……

天呐!5个首发全报销,赛季还没开打就交代了!……

体育新角度
2026-10-07 20:55:07
老祖宗告诫:“父母走后,三亲要断交”!哪三亲?为何要断?

老祖宗告诫:“父母走后,三亲要断交”!哪三亲?为何要断?

历史教堂
2026-10-07 19:27:52
台海局势升温!两岸舰船对峙中美外长通话,中方严肃表明态度

台海局势升温!两岸舰船对峙中美外长通话,中方严肃表明态度

潋滟晴方DAY
2026-10-07 16:10:58
A股:今天跌到3811了,不用等明天开盘了,周五行情提前分析

A股:今天跌到3811了,不用等明天开盘了,周五行情提前分析

明心
2026-10-08 15:09:54
河南一新娘的九个舅舅染不同颜色头发来参加婚礼,新娘嫂子:舅舅们说谁敢欺负侄女,就给他点颜色瞧瞧

河南一新娘的九个舅舅染不同颜色头发来参加婚礼,新娘嫂子:舅舅们说谁敢欺负侄女,就给他点颜色瞧瞧

潇湘晨报
2026-10-07 22:54:18
今天14时29分,陕西正式进入→

今天14时29分,陕西正式进入→

91.6陕西交通广播
2026-10-08 11:11:13
大S 50岁!坟墓现场华丽庆生,具俊晔搂小S引发热议

大S 50岁!坟墓现场华丽庆生,具俊晔搂小S引发热议

娱乐小丸子
2026-10-06 19:50:35
重磅判决!白俄模特缅甸遇害一案尘埃落定,5 人获刑 21 年,骨灰无法取回,犯罪产业链价格曝光

重磅判决!白俄模特缅甸遇害一案尘埃落定,5 人获刑 21 年,骨灰无法取回,犯罪产业链价格曝光

秋风妃
2026-10-07 22:11:02
国庆高速数据彻底打脸!油电大势已定,再也回不去了

国庆高速数据彻底打脸!油电大势已定,再也回不去了

华庭讲美食
2026-10-06 02:59:29
白凤祥已任天津市红桥区委书记

白凤祥已任天津市红桥区委书记

黄河新闻网吕梁
2026-10-08 08:12:45
美联储,释放重磅信号!

美联储,释放重磅信号!

证券时报
2026-10-08 08:38:03
台湾陆委会又威胁查处岛内艺人,民进党当局被批搞“绿色恐怖”

台湾陆委会又威胁查处岛内艺人,民进党当局被批搞“绿色恐怖”

环球网资讯
2026-10-08 07:08:49
29张反对票无力回天!德国极右翼赢得最高职位,力图领导国家

29张反对票无力回天!德国极右翼赢得最高职位,力图领导国家

一身骨子里的傲气
2026-10-07 15:25:33
大闹航班的欧某某最新进展:企业迟迟不敢认领,背后的现实太扎心

大闹航班的欧某某最新进展:企业迟迟不敢认领,背后的现实太扎心

一盅情怀
2026-10-08 13:13:12
周启豪3-0战胜张本智和,晋级男单八强;赛后采访周启豪称“自己发挥比较正常,他比前两次发挥差,大满贯每场比赛都很难,做好准备去拼”

周启豪3-0战胜张本智和,晋级男单八强;赛后采访周启豪称“自己发挥比较正常,他比前两次发挥差,大满贯每场比赛都很难,做好准备去拼”

大风新闻
2026-10-08 15:06:04
网传享界G9在高速上掀起车顶帐篷行驶,有疑似当事人发声:非量产版本;鸿蒙智行官方:车顶帐篷为项目早期研发试验样件,量产车型无此问题

网传享界G9在高速上掀起车顶帐篷行驶,有疑似当事人发声:非量产版本;鸿蒙智行官方:车顶帐篷为项目早期研发试验样件,量产车型无此问题

台州交通广播
2026-10-08 09:41:56
乌军上校:与朝鲜军队的首次交锋细节

乌军上校:与朝鲜军队的首次交锋细节

YY团长
2026-10-07 19:03:15
猫妈知恩图报用4只崽送投喂人,奈何均遭拒。走到无人角落后:其实我也没有很想送你!抹泪ing

猫妈知恩图报用4只崽送投喂人,奈何均遭拒。走到无人角落后:其实我也没有很想送你!抹泪ing

猫来了
2026-10-06 17:08:28
2026-10-08 17:12:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14151文章数 142745关注度
往期回顾 全部

科技要闻

江淮汽车回应"尊界V800刹车踏板支架断裂"

头条要闻

车主被传在后备箱装十箱水被扣3分罚款100元 专家发声

头条要闻

车主被传在后备箱装十箱水被扣3分罚款100元 专家发声

体育要闻

梅西社媒发文告别国家队 C罗点赞留言:致敬 拥抱

娱乐要闻

给吴奇隆点赞的同时,再看蔡康永事件

财经要闻

“AI央行”英伟达的“千亿资本局”

汽车要闻

特别版配色/碳纤尾翼 2027款深蓝L06将于10月9日上市

态度原创

家居
游戏
旅游
房产
亲子

家居要闻

2026建博会(广州) 公装联探展交流活动

《胧村正怪奇谭》媒体试玩狂赞:2D版鬼泣动作超爽!

旅游要闻

成都龙泉驿国庆累计接待游客254.68万人次 赛演休闲、古镇漫游、乡村踏青多点开花

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

亲子要闻

听粉丝朋友推荐去美国的商场,带安吉拉再挑几件衣服,我们这18线小城,想买到合适衣服着实不容易

无障碍浏览 进入关怀版