网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建


NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染


模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题


通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。




“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”


此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。



如需了解此次NeoVerse相关研究论文的更多细节,请访问:https://arxiv.org/abs/2601.00393

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
极端蔑视——内塔尼亚胡称呼英国为英国伊斯兰共和国

极端蔑视——内塔尼亚胡称呼英国为英国伊斯兰共和国

老王说正义
2026-08-19 01:00:07
马克·古尔曼:苹果首款折叠屏手机被命名为“iPhone Duo”,起售价2000美元

马克·古尔曼:苹果首款折叠屏手机被命名为“iPhone Duo”,起售价2000美元

界面新闻
2026-09-09 12:10:42
54岁演员王新昉去世,死因曝光,生前刚拍完剧,儿子悲痛料理后事

54岁演员王新昉去世,死因曝光,生前刚拍完剧,儿子悲痛料理后事

草莓解说体育
2026-09-09 10:32:10
警方抓获卖淫女后不追查嫖客,不是懒政,而是法律不允许?

警方抓获卖淫女后不追查嫖客,不是懒政,而是法律不允许?

网络易不易
2026-09-09 12:40:11
体育总局罕见发声!女排4大主力集体亮相,赵勇一句“信心满满”令球迷热议

体育总局罕见发声!女排4大主力集体亮相,赵勇一句“信心满满”令球迷热议

生活新鲜市
2026-09-09 07:11:57
一场2 1逆转、5连胜,美网女单四强决出两席!恭喜大坂 直美 萨巴对手敲定

一场2 1逆转、5连胜,美网女单四强决出两席!恭喜大坂 直美 萨巴对手敲定

萌宠呵护侠
2026-09-09 11:06:09
欧冠首夜6战全分胜负,曼城零封,皇马险过关

欧冠首夜6战全分胜负,曼城零封,皇马险过关

赛场热点说
2026-09-09 12:33:02
心理学:男人但凡有退休金或存款,没了老婆,总想再找一个,而且可能找比他小很多,甚至还有点姿色,大概率女方没退休金,也没什么存款

心理学:男人但凡有退休金或存款,没了老婆,总想再找一个,而且可能找比他小很多,甚至还有点姿色,大概率女方没退休金,也没什么存款

心理观察局
2026-09-08 07:04:04
美国商务部长“出卖”特朗普:总统什么都干,就不愿谈伊朗局势

美国商务部长“出卖”特朗普:总统什么都干,就不愿谈伊朗局势

相思赋予谁a
2026-09-08 14:34:27
相比于历史,英语确实更应该退出主科

相比于历史,英语确实更应该退出主科

Marx乖巧
2026-09-06 15:52:12
谢贤前女友Coco直播被说丑,本人回应:“姐都40岁了,把头发往下一放还是迷倒一大片的”

谢贤前女友Coco直播被说丑,本人回应:“姐都40岁了,把头发往下一放还是迷倒一大片的”

韩小娱
2026-09-04 05:54:22
“民办太子爷”发型火了,宝妈还沾沾自喜,老师:遇到你儿子都绕道走

“民办太子爷”发型火了,宝妈还沾沾自喜,老师:遇到你儿子都绕道走

熙熙说教
2026-09-08 12:24:27
苹果9月9日发布会终极曝光:比折叠屏更炸的,也来了

苹果9月9日发布会终极曝光:比折叠屏更炸的,也来了

ZAKER科技
2026-09-07 10:23:29
国米主帅齐沃向恩师皇马主帅穆里尼奥表达敬意:遇到穆里尼奥是我的幸运!

国米主帅齐沃向恩师皇马主帅穆里尼奥表达敬意:遇到穆里尼奥是我的幸运!

福酱的小时光
2026-09-08 15:18:09
1967年,邓小平胞弟被迫害致死;1984年闻讯后,邓小平说了6个字

1967年,邓小平胞弟被迫害致死;1984年闻讯后,邓小平说了6个字

明月清风阁
2026-09-09 13:00:12
已进8强!郑钦文想夺冠有多难?需翻过3座大山:总交手2胜15负

已进8强!郑钦文想夺冠有多难?需翻过3座大山:总交手2胜15负

念洲
2026-09-08 14:13:13
郑钦文连续3场大翻盘?詹俊:若0-5落后莱巴金娜 观众真的可以睡了

郑钦文连续3场大翻盘?詹俊:若0-5落后莱巴金娜 观众真的可以睡了

风过乡
2026-09-08 15:22:33
他是最懂郑钦文的人,帮她拿下奥运冠军,如今仍是郑钦文的靠山

他是最懂郑钦文的人,帮她拿下奥运冠军,如今仍是郑钦文的靠山

青橘罐头
2026-09-08 14:36:32
54岁演员王新昉去世,死因曝光是猝死,刚拍完剧,儿子悲痛处理后事

54岁演员王新昉去世,死因曝光是猝死,刚拍完剧,儿子悲痛处理后事

全球风情大揭秘
2026-09-09 08:31:50
雷军发布小米迄今最贵手机,售价10999元起

雷军发布小米迄今最贵手机,售价10999元起

极目新闻
2026-09-07 20:38:42
2026-09-09 13:35:00
正见TrueView incentive-icons
正见TrueView
去见证,用正见。
325文章数 235关注度
往期回顾 全部

科技要闻

AI重大突破!OpenAI称解开近百年数学难题

头条要闻

4岁男童被指摸臀 父亲发声:无法接受出具书面道歉要求

头条要闻

4岁男童被指摸臀 父亲发声:无法接受出具书面道歉要求

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭麒麟最便宜贵公子争议,本人未回应

财经要闻

8月CPI同比涨0.8% PPI环比由降转涨

汽车要闻

坦克700申报信息曝光 长轴距版轴距增150mm/首搭6座

态度原创

房产
数码
游戏
亲子
教育

房产要闻

砸388亿+首个方案出炉!三亚,又一片区要起飞!

数码要闻

OWC发布双HDMI 2.1雷电5扩展坞、1.5m雷电5 USB-C线材

《女神异闻录6》主角团名曝光 舞台确认 还有新机制

亲子要闻

我们ee也有了属于自己的天籁之音

教育要闻

盘点高考日语老师眼中印象深刻的学生逆袭成长案例?

无障碍浏览 进入关怀版