网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建


NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染


模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题


通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。




“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”


此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。



如需了解此次NeoVerse相关研究论文的更多细节,请访问:https://arxiv.org/abs/2601.00393

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
偷看战术也没用!C罗遭吉达联合官推嘲讽:作弊了还是输球

偷看战术也没用!C罗遭吉达联合官推嘲讽:作弊了还是输球

星耀国际足坛
2026-09-08 21:25:45
演员陈都灵现身南航开学典礼VCR,全场新生尖叫不断;曾621分考入飞行器制造工程专业,大学期间平均绩点3.5

演员陈都灵现身南航开学典礼VCR,全场新生尖叫不断;曾621分考入飞行器制造工程专业,大学期间平均绩点3.5

台州交通广播
2026-09-05 18:39:03
特朗普再发扩张地图

特朗普再发扩张地图

陆弃
2026-09-08 11:14:40
皇马1.4亿欧引进!穆帅不给标王机会:5场全替补只踢94分钟0球0助

皇马1.4亿欧引进!穆帅不给标王机会:5场全替补只踢94分钟0球0助

风过乡
2026-09-09 08:52:06
恩佐:球员们立刻就接纳了我,我非常期待继续前进

恩佐:球员们立刻就接纳了我,我非常期待继续前进

懂球帝
2026-09-09 11:45:06
巴克利:新赛季的湖人可能比2024年总决赛的独行侠更强

巴克利:新赛季的湖人可能比2024年总决赛的独行侠更强

林子说事
2026-09-09 10:28:02
“梅姨”落网更多细节:在广州约10平米的出租屋落网,月租550元左右,被抓捕时未抗拒,称拐卖合伙人为“靓仔”“靓女”

“梅姨”落网更多细节:在广州约10平米的出租屋落网,月租550元左右,被抓捕时未抗拒,称拐卖合伙人为“靓仔”“靓女”

澎湃新闻
2026-09-09 11:56:25
钾是香蕉28倍!入秋隔天吃这菜,腿脚有劲精神足!

钾是香蕉28倍!入秋隔天吃这菜,腿脚有劲精神足!

美食店主
2026-09-05 08:18:38
一觉醒来,中国斯诺克5胜4负!2场下克上,吴宜泽赢德比,肖国栋翻车!

一觉醒来,中国斯诺克5胜4负!2场下克上,吴宜泽赢德比,肖国栋翻车!

刘姚尧的文字城堡
2026-09-09 07:32:14
未来五年,最危险的不是你没钱,而是你还在用十年前的方式花钱

未来五年,最危险的不是你没钱,而是你还在用十年前的方式花钱

流苏晚晴
2026-09-04 18:44:02
苹果突然改名!iPhone Ultra再见,iPhone Duo实锤

苹果突然改名!iPhone Ultra再见,iPhone Duo实锤

搞机小帝
2026-09-09 15:29:48
46年李立三拜访毛主席,离开后主席面露不悦:让后勤部给他换套衣服

46年李立三拜访毛主席,离开后主席面露不悦:让后勤部给他换套衣服

微野谈写作
2026-09-09 08:10:12
黄仁勋大发慈悲!RTX 5090公版显卡只卖1.35万元:市场价已超3.35万元

黄仁勋大发慈悲!RTX 5090公版显卡只卖1.35万元:市场价已超3.35万元

快科技
2026-09-07 10:18:21
民政局两份告知书流出!韩红基金会争议调查结果,按常规期限推算,9月23日左右将呼之欲出

民政局两份告知书流出!韩红基金会争议调查结果,按常规期限推算,9月23日左右将呼之欲出

火山詩话
2026-09-08 05:48:48
经济学家刘元春捅破窗户纸:消费率上不去,根子在蛋糕切法不对!

经济学家刘元春捅破窗户纸:消费率上不去,根子在蛋糕切法不对!

户外钓鱼哥阿旱
2026-09-09 03:42:09
事关这笔钱和保障!上海很多人收到了一条短信!重要提醒:这是真的→

事关这笔钱和保障!上海很多人收到了一条短信!重要提醒:这是真的→

新民晚报
2026-09-09 14:12:56
风波过后深挖资本!郭德纲的商业版图,藏着很多人不知道的真相

风波过后深挖资本!郭德纲的商业版图,藏着很多人不知道的真相

春天来了啊
2026-09-09 15:06:43
曾被吹上天,如今却“沦为笑柄”的4个羽绒服,看谁还在乱跟风?

曾被吹上天,如今却“沦为笑柄”的4个羽绒服,看谁还在乱跟风?

鹤羽说个事
2026-09-04 00:17:03
全球狂卖920亿美元,欧美人顿顿离不开,中国就成了“妈见打”?

全球狂卖920亿美元,欧美人顿顿离不开,中国就成了“妈见打”?

乌克兰小静
2026-08-29 02:29:20
美智库:美国已双线失守,必要时或通过军事打击,阻止中国AI发展

美智库:美国已双线失守,必要时或通过军事打击,阻止中国AI发展

乌克兰小静
2026-09-08 07:12:34
2026-09-09 16:04:49
正见TrueView incentive-icons
正见TrueView
去见证,用正见。
325文章数 235关注度
往期回顾 全部

科技要闻

AI重大突破!OpenAI称解开近百年数学难题

头条要闻

卡德罗夫:俄乌冲突爆发以来 车臣共和国派出超7.6万人

头条要闻

卡德罗夫:俄乌冲突爆发以来 车臣共和国派出超7.6万人

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭麒麟最便宜贵公子争议,本人未回应

财经要闻

8月CPI同比涨0.8% PPI环比由降转涨

汽车要闻

魏牌全新蓝山申报信息曝光 方盒子造型 5/6座可选

态度原创

房产
健康
家居
本地
手机

房产要闻

砸388亿+首个方案出炉!三亚,又一片区要起飞!

中风康复为何像“抽丝剥茧”?

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

宁波,中国制造的隐藏大佬

手机要闻

中国联通:智能手机正式开启一机四号模式!eSIM手机将冲击2000万台

无障碍浏览 进入关怀版