网易首页 > 网易号 > 正文 申请入驻

李飞飞推出多模态世界模型,可精确控镜生成视频,能三维重建并服务机器人仿真

0
分享至



9月2日,被称作“AI教母”的斯坦福教授李飞飞创立的空间智能公司World Labs宣布推出新一代全模态世界模型Atlas。这是该公司继商用产品Marble和World API之后,在三维世界理解与生成方向上的最新进展。

World Labs由李飞飞与Justin Johnson、Ben Mildenhall、Christoph Lassner于2024年共同创办,目标是让人工智能具备空间智能,也就是理解物体如何存在于三维空间、场景如何延伸、动作如何改变环境。公司当年以约2.3亿美元融资出道并成为独角兽,2026年2月又完成约10亿美元新一轮融资。李飞飞一直认为,语言模型让机器学会了说话,但真正走向物理世界,还需要能够感知、生成并与三维空间交互的世界模型。

Atlas被官方称为omni world model。它从零开始预训练,原生同时处理文本、图像、视频和三维数据,采用多模态自回归扩散Transformer架构。所有输入会被编码进同一个共享的空间上下文,每张图像都带有明确的相机位姿,模型据此生成后续内容,既保持三维一致性,又能对未见区域作出合理想象。公司表示,该模型性能会随训练算力增加而提升,并计划将其用于未来版本的Marble及其他产品。早期访问将向选定合作伙伴开放。

据官方介绍,Atlas覆盖生成、重建和模拟三类任务。在相机控制生成方面,用户只需提供一张或几张参考图,就能指定精确相机路径,输出最高1440p、最长约一分钟的视频。与依赖模糊文字指令控制镜头的方式不同,Atlas把相机几何作为原生输入,创作者可以更接近“布景和调度”而不是“碰运气写提示词”。在三维重建方面,模型可从少量普通照片重建真实场景,同时输出新视角画面和点云、高斯溅射等显式三维结果。公司公布的内部对比显示,在多个稀疏视角重建基准上,Atlas的平均误差低于当时领先的专用三维重建模型。输入图像越多,模型越少依赖想象、越接近忠实还原。

在时空模拟方面,Atlas能从少量视频中同时建模空间结构与时间变化。一个直观例子是“子弹时间”:用几部手机拍下的素材,即可冻结时间并从新角度重拍。对机器人而言,这意味着更便宜的Real-to-Sim路径——拍摄真实环境后,模型可生成机器人视角的图像与深度,并进一步模拟物体交互,用于训练和测试。此外,Atlas也能根据文本生成图像和360度全景,并支持多种风格。

这条产品线并非突然出现。2025年10月,World Labs发布研究预览RTFM,尝试在单卡上实时生成可交互视频;同年11月推出首个商用产品Marble,用户可用文本、图像、视频或粗略三维布局生成可探索、可导出的持久三维世界;2026年1月上线World API,7月收购SceniX以加强机器人仿真。Atlas被放在这条路线的下一站:它介于“渲染画面”和“模拟世界如何响应动作”之间,既能生成一致的三维视图,也能输出可供后续物理引擎使用的几何。

对影视、设计、建筑和机器人团队来说,这意味着现场几张照片就可能快速重建场地,镜头调度可以更精确,仿真环境不必完全依赖昂贵扫描和手工建模。不过,目前公开的对比数据仍以公司内部评测为主,独立第三方验证尚未全面展开,世界模型赛道上的竞争也在加快。即便如此,Atlas仍代表一种明确方向:把文本、图像、视频和三维几何放进同一个空间上下文里联合建模,让机器不只描述世界,而是开始在三维中理解、想象并辅助行动。从ImageNet让计算机看见二维图像,到Atlas试图让计算机走进三维世界,李飞飞和World Labs的这条线依然清晰。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
以后不要再碰载重375KG的车了

以后不要再碰载重375KG的车了

车卖家
2026-09-03 09:21:43
65岁刘德华登新闻联播冲上热搜:四十载沉淀,影协副主席职位加身

65岁刘德华登新闻联播冲上热搜:四十载沉淀,影协副主席职位加身

行者聊官
2026-09-04 17:29:47
59岁江珊现状:满头白发步履蹒跚,胖到160斤,无单位也无退休金

59岁江珊现状:满头白发步履蹒跚,胖到160斤,无单位也无退休金

观星赏月
2026-09-06 05:31:21
红颜薄命!龚爽37岁病逝,私生活被曝,她的坏习惯或成催命符

红颜薄命!龚爽37岁病逝,私生活被曝,她的坏习惯或成催命符

天马幸福的人生
2026-09-07 10:06:04
知乎关于“片刻欢愉”最佳回答,人生经历或许就只为活几个瞬间

知乎关于“片刻欢愉”最佳回答,人生经历或许就只为活几个瞬间

蓬辉堂
2026-09-05 23:34:26
1941年,革命夫妻狱中生子,为了保命忍痛将孩子托付给特务,结局出人意料

1941年,革命夫妻狱中生子,为了保命忍痛将孩子托付给特务,结局出人意料

磊子讲史
2026-07-10 17:00:05
李楠上任拿首冠!霸气发声,透露赵睿缺阵原因,媒体人盛赞新打法

李楠上任拿首冠!霸气发声,透露赵睿缺阵原因,媒体人盛赞新打法

萌兰聊个球
2026-09-07 08:45:43
这是恩比德?大帝暴瘦,新赛季已做好准备!

这是恩比德?大帝暴瘦,新赛季已做好准备!

篮球实录
2026-09-07 01:27:24
琼瑶真的很好看,气质也好,那些她挑选的演员都比不上她

琼瑶真的很好看,气质也好,那些她挑选的演员都比不上她

手工制作阿歼
2026-09-07 05:37:29
部分地区公交回归燃油?不是新能源输了,是现实给了一课

部分地区公交回归燃油?不是新能源输了,是现实给了一课

王新喜
2026-09-07 13:51:57
贾玲彻底陷入死局:新片不敢上,综艺路也走不通,两头全堵死

贾玲彻底陷入死局:新片不敢上,综艺路也走不通,两头全堵死

乐悠悠娱乐
2026-09-07 10:10:12
菲律宾传来一个消息!
2026年9月5日,菲律宾国家安全委员会对外发表声明,明确表态菲律宾无意插手台湾问题,将恪守一个中国原则

菲律宾传来一个消息! 2026年9月5日,菲律宾国家安全委员会对外发表声明,明确表态菲律宾无意插手台湾问题,将恪守一个中国原则

扶苏聊历史
2026-09-07 13:54:22
管不了马杜罗,还管不了你吗?中方:要想动我合法权益,寸步不让

管不了马杜罗,还管不了你吗?中方:要想动我合法权益,寸步不让

泠泠说史
2026-09-06 08:33:59
曼晚:拉什福德被换下后埃弗顿士气大振,卡里克下了一步错棋

曼晚:拉什福德被换下后埃弗顿士气大振,卡里克下了一步错棋

懂球帝
2026-09-07 00:08:18
别再只骂赵勇!女排下滑根本不在教练,傀儡主帅谁上都白搭

别再只骂赵勇!女排下滑根本不在教练,傀儡主帅谁上都白搭

金毛爱女排
2026-09-07 07:34:54
前裁判:劳塔罗不该被罚下,庆祝也不该染黄

前裁判:劳塔罗不该被罚下,庆祝也不该染黄

懂球帝
2026-09-07 07:42:07
一夜乱战!六队提前出线+两队凉透!美国女篮帮中国女篮大忙

一夜乱战!六队提前出线+两队凉透!美国女篮帮中国女篮大忙

一纸情书s
2026-09-07 13:26:24
这下轮到马科斯难受了!莎拉发声明,马科斯政府陷入公众信任危机

这下轮到马科斯难受了!莎拉发声明,马科斯政府陷入公众信任危机

小樾说历史
2026-09-07 02:41:03
说不尽的魔幻与荒诞,终于还是瞒不住了

说不尽的魔幻与荒诞,终于还是瞒不住了

胖胖说他不胖
2026-09-05 20:23:19
星宇事件再起争端!网友:星宇股份二次“罚”了所有人,却没一个人真疼——这波操作,把打工人当傻子

星宇事件再起争端!网友:星宇股份二次“罚”了所有人,却没一个人真疼——这波操作,把打工人当傻子

火山詩话
2026-09-07 12:46:48
2026-09-07 14:48:49
不看车bukanche incentive-icons
不看车bukanche
全网同名:不看车,粉丝合计超60万~
2556文章数 10794关注度
往期回顾 全部

科技要闻

特斯拉中国宣布本月Model 3和Y全系"降价"

头条要闻

媒体:中美战区司令会晤释放的信号 台湾要听懂

头条要闻

媒体:中美战区司令会晤释放的信号 台湾要听懂

体育要闻

3.9秒绝平!杨舒予18+5成女篮救世主

娱乐要闻

张柏芝带儿子冲浪,一起看风景

财经要闻

8家中央金融企业获增资 释放什么信号?

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

游戏
房产
亲子
公开课
军事航空

3D区新大将:《第一后裔》美乳新女主穿性感新衣

房产要闻

突发重磅!海口出台楼市新政!

亲子要闻

卵巢功能下降吃什么调理能怀孕?dheaamh的作用与功效?

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美伊互袭油轮 伊朗军方称或对美进行更大规模打击

无障碍浏览 进入关怀版