网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建


NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染


模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题


通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。




“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”


此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。



如需了解此次NeoVerse相关研究论文的更多细节,请访问:https://arxiv.org/abs/2601.00393

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
菲律宾前大使威胁:就算中国军队世界第二,也不该忘了玉通战役

菲律宾前大使威胁:就算中国军队世界第二,也不该忘了玉通战役

影孖看世界
2026-11-02 23:34:30
开法拉利探店、住上海豪宅,4000万粉丝的白冰,现在连一句话都发不出来了

开法拉利探店、住上海豪宅,4000万粉丝的白冰,现在连一句话都发不出来了

奶油芒
2026-11-03 08:10:38
经济越差,这3个行业反而越赚钱:日本萧条30年,早就给出好答案

经济越差,这3个行业反而越赚钱:日本萧条30年,早就给出好答案

白色得季节
2026-10-30 18:29:39
猫为什么把你当陌生人?因为你回家太少。

猫为什么把你当陌生人?因为你回家太少。

小眼睛小世界
2026-11-04 04:33:41
斯诺克国锦赛:8强中国占5席!丁俊晖6-5绝杀,挥拳庆祝胜利,赵心童将对阵常冰玉

斯诺克国锦赛:8强中国占5席!丁俊晖6-5绝杀,挥拳庆祝胜利,赵心童将对阵常冰玉

体育就你秀
2026-11-04 00:28:18
印度移民为什么能把全世界都印度化

印度移民为什么能把全世界都印度化

小眼睛小世界
2026-11-04 04:32:10
1929年毛主席唯一合影,80年后才被发现,那时他正值风华正茂!

1929年毛主席唯一合影,80年后才被发现,那时他正值风华正茂!

春秋砚
2026-11-03 08:10:25
法国足协力挺姆巴佩,扇了全网一巴掌!

法国足协力挺姆巴佩,扇了全网一巴掌!

互联网品牌官
2026-11-03 12:26:36
挺好的训练装,硬是穿出不协调的感觉!

挺好的训练装,硬是穿出不协调的感觉!

穿的像个人样
2026-10-15 07:52:49
为什么反腐要拿潜规则开刀?

为什么反腐要拿潜规则开刀?

小眼睛小世界
2026-11-04 04:30:46
5连败到11胜2负!马奎尔难阻丁俊晖晋级,20岁天才成决赛拦路虎

5连败到11胜2负!马奎尔难阻丁俊晖晋级,20岁天才成决赛拦路虎

夜深聊球
2026-11-03 20:22:44
WTT冠军赛:第9位名将退赛!男单奥运亚军放弃,此前国乒3人退出

WTT冠军赛:第9位名将退赛!男单奥运亚军放弃,此前国乒3人退出

全言作品
2026-11-04 02:51:16
乌克兰摧毁俄最大的雅罗斯拉夫尔炼油厂!莫斯科机场关闭

乌克兰摧毁俄最大的雅罗斯拉夫尔炼油厂!莫斯科机场关闭

项鹏飞
2026-11-03 20:52:29
中日电器巨头对比:日本松下年营收580亿美元,美的集团多少?

中日电器巨头对比:日本松下年营收580亿美元,美的集团多少?

浩渺青史
2026-11-02 13:48:50
0.6秒绝杀吉林仅一夜,,上海传来主帅卢伟消息,张镇麟说的很实在!

0.6秒绝杀吉林仅一夜,,上海传来主帅卢伟消息,张镇麟说的很实在!

陈赩爱体育
2026-11-04 00:40:02
延安大学鲁艺学院一副教授去世,疑似遗书称被“横向课题经费”所难

延安大学鲁艺学院一副教授去世,疑似遗书称被“横向课题经费”所难

界面新闻
2026-11-03 19:09:15
清透浅蓝瑜伽套装|网纱露肩设计,柔和勾勒舒展身形

清透浅蓝瑜伽套装|网纱露肩设计,柔和勾勒舒展身形

只要高兴就好
2026-10-31 05:31:29
篮球记者:广东队主教练正式下课!

篮球记者:广东队主教练正式下课!

体育哲人
2026-11-04 01:05:10
冯远征在人民日报发文:“黄胖子”找不到合适演员,艺术院校本就该高矮胖瘦、千姿百态,生旦净丑各个行当的苗子都要吸纳,才能凝成一出戏

冯远征在人民日报发文:“黄胖子”找不到合适演员,艺术院校本就该高矮胖瘦、千姿百态,生旦净丑各个行当的苗子都要吸纳,才能凝成一出戏

吉刻新闻
2026-11-03 13:46:58
演员童瑶发文告别

演员童瑶发文告别

背包旅行
2026-10-16 11:55:16
2026-11-04 04:55:00
正见TrueView incentive-icons
正见TrueView
去见证,用正见。
343文章数 235关注度
往期回顾 全部

科技要闻

马斯克也哭穷!Grok Bot额度暴跌

头条要闻

金价大跌 商家:今年最少亏100万 甚至有人亏几千万

头条要闻

金价大跌 商家:今年最少亏100万 甚至有人亏几千万

体育要闻

领意甲最低的工资,踢着最幸福的足球

娱乐要闻

巴图自曝已改姓后,英如嫡直播摊牌

财经要闻

巨额开支"难落地" 美国数据中心建设遇阻

汽车要闻

可油可甲醇/每公里成本2毛 银河星耀6EF焕新价7.68万起

态度原创

艺术
健康
本地
教育
公开课

艺术要闻

谁被戳中了?罗中立:有钱没文化,才是真可悲!

痘痘长到25岁还没完?查查内分泌

本地新闻

乌兰察布:以前种土豆,现在种Token

教育要闻

第43届物理竞赛金银铜牌名单公布!国集江苏3人全部来自南师附中!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版