网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建


NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染


模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题


通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。




“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”


此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。



如需了解此次NeoVerse相关研究论文的更多细节,请访问:https://arxiv.org/abs/2601.00393

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
搜狐市值只剩3.5亿美元,可公司账上却有12亿现金,张朝阳宁可错过短视频等风口,也不多花每一分钱

搜狐市值只剩3.5亿美元,可公司账上却有12亿现金,张朝阳宁可错过短视频等风口,也不多花每一分钱

新浪财经
2026-10-13 21:44:48
1-4爆大冷!就在刚刚,亚冠疯狂一夜:41岁C罗轮休,胜利反而更顺,6-2造惨案,吉达联合掉链子,拖拉机读秒绝平

1-4爆大冷!就在刚刚,亚冠疯狂一夜:41岁C罗轮休,胜利反而更顺,6-2造惨案,吉达联合掉链子,拖拉机读秒绝平

篮球热嗖
2026-11-03 10:07:38
印度跟中方磨了一年多,反复提要求:开放新疆和田一带的领空

印度跟中方磨了一年多,反复提要求:开放新疆和田一带的领空

瞩望云霄
2026-10-31 19:15:25
曾因准确预判俄乌冲突而闻名的日本学者矢野义昭此前断言,若中日再度开战,日本绝不会沦为第二个乌克兰

曾因准确预判俄乌冲突而闻名的日本学者矢野义昭此前断言,若中日再度开战,日本绝不会沦为第二个乌克兰

人生录
2026-10-29 00:50:04
CBA一阶段排名!京沪辽居前三,北控福建黑马,山东广东引失望!

CBA一阶段排名!京沪辽居前三,北控福建黑马,山东广东引失望!

篮球资讯达人
2026-11-04 03:15:28
“慰安椅”根本不是椅子,是把每个年轻姑娘活生生碾碎的吃人机器

“慰安椅”根本不是椅子,是把每个年轻姑娘活生生碾碎的吃人机器

千秋文化
2026-09-22 19:32:48
男篮世预赛12人名单出炉:周琦领衔,焦泊乔崔永熙遭淘汰

男篮世预赛12人名单出炉:周琦领衔,焦泊乔崔永熙遭淘汰

汤圆看体育
2026-11-03 10:08:33
“火箭7子”高下立判!送走的全部陨落,留下的全打出身价!

“火箭7子”高下立判!送走的全部陨落,留下的全打出身价!

畅评篮球
2026-11-02 14:49:07
男子靠AI生成旅游攻略,结果到现场一看:景点完全不符、地铁查无此站

男子靠AI生成旅游攻略,结果到现场一看:景点完全不符、地铁查无此站

黄河新闻网吕梁
2026-11-03 17:06:19
谁敢动中国我就灭谁!这两国曾向全球发出警告,如今枪口对准中国

谁敢动中国我就灭谁!这两国曾向全球发出警告,如今枪口对准中国

琴音缭绕回
2026-10-28 11:30:18
8场比赛仓促谢幕!亚科夫列维奇下课,广东男篮的困局不止是战绩

8场比赛仓促谢幕!亚科夫列维奇下课,广东男篮的困局不止是战绩

你的雷达站
2026-11-04 03:15:38
丈夫抱回男婴让我先喂,我偷偷做亲子鉴定,结果出来全家傻眼了

丈夫抱回男婴让我先喂,我偷偷做亲子鉴定,结果出来全家傻眼了

晓艾故事汇
2026-06-08 08:19:26
张本智和:已在法国休整完毕!从0-3到3-0完成复仇,德国赛开门红

张本智和:已在法国休整完毕!从0-3到3-0完成复仇,德国赛开门红

排球黄金眼
2026-11-04 04:08:37
独居泰国的戴军,55岁还没孩子没家庭,与母亲为伴,老了会后悔吗

独居泰国的戴军,55岁还没孩子没家庭,与母亲为伴,老了会后悔吗

娱说瑜悦
2026-11-03 16:39:15
俄方寸步不让:天然气管道非得取道蒙古进入中国

俄方寸步不让:天然气管道非得取道蒙古进入中国

果妈聊娱乐
2026-10-01 16:13:46
证监会最新发声:全力维护资本市场平稳运行

证监会最新发声:全力维护资本市场平稳运行

证券时报
2026-11-03 16:33:02
原中石化董事长傅成玉:退而不休的典型,退休不是退场,光环不可变现

原中石化董事长傅成玉:退而不休的典型,退休不是退场,光环不可变现

十为先生
2026-11-03 17:32:47
WTT冠军赛:国乒开门红!周启豪轰3-0速胜,率先晋级男单16强

WTT冠军赛:国乒开门红!周启豪轰3-0速胜,率先晋级男单16强

全言作品
2026-11-03 20:21:27
金价银价集体反弹,黄金涨近2%

金价银价集体反弹,黄金涨近2%

每日经济新闻
2026-11-03 08:56:55
我是一个27岁的女人,老公出差,昨天半夜,前男友让我去酒店

我是一个27岁的女人,老公出差,昨天半夜,前男友让我去酒店

千秋文化
2026-06-17 20:25:05
2026-11-04 05:51:00
正见TrueView incentive-icons
正见TrueView
去见证,用正见。
343文章数 235关注度
往期回顾 全部

科技要闻

马斯克也哭穷!Grok Bot额度暴跌

头条要闻

金价大跌 商家:今年最少亏100万 甚至有人亏几千万

头条要闻

金价大跌 商家:今年最少亏100万 甚至有人亏几千万

体育要闻

领意甲最低的工资,踢着最幸福的足球

娱乐要闻

巴图自曝已改姓后,英如嫡直播摊牌

财经要闻

巨额开支"难落地" 美国数据中心建设遇阻

汽车要闻

可油可甲醇/每公里成本2毛 银河星耀6EF焕新价7.68万起

态度原创

亲子
游戏
健康
本地
公开课

亲子要闻

孩子熬夜防二胎,家产保卫战打响

《人类2》将于2027年登陆PC 包含气候变化和更深层次文化

痘痘长到25岁还没完?查查内分泌

本地新闻

乌兰察布:以前种土豆,现在种Token

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版