网易首页 > 网易号 > 正文 申请入驻

一张图生成3D梦中情房,桌椅摆件随心换,又一世界生成模型来了

0
分享至


智东西
作者 杨京丽
编辑 李水青

智东西9月1日报道,今天,上海3D生成大模型公司影眸科技发布世界生成模型Hyper3D WorldGen,推动3D生成从“单个资产”走向“完整场景”

用户上传一张场景图片后,模型可以自动识别画面中的主要物体,并生成对应的3D资产,也支持手动框选目标生成,并通过影眸Hyper3D团队自研的CAST架构,重建物体之间的空间与物理关系,最终生成由多个独立、可编辑、可替换、可交互资产组成的3D场景。


CAST为“基于单张RGB图像的组件对齐式3D场景重建”,是影眸Hyper3D团队在2025年发布的场景级生成研究成果。其核心是从单张图片中补全被遮挡物体的三维结构,判断物体之间的接触、支撑、悬挂等关系,并将多个独立物体放入统一、物理合理的三维空间。该研究曾获SIGGRAPH 2025最佳论文。


值得注意的是,WorldGen的生成能力已经进入具身智能仿真训练、影视制作、游戏开发与XR等真实生产场景,推动场景级3D生成从视觉展示走向产业工作流。

模型发布前,智东西等媒体采访了影眸科技创始人、CEO吴迪和联合创始人、CTO张启煊,围绕WorldGen的技术路线、应用进展及3D生成行业趋势等问题进行了交流。

一、一张图片生成场景,场景内资产可交互

媒体交流会上,张启煊演示了WorldGen的生成过程:上传一张办公室盥洗室的图片后,系统能够自动识别水龙头、盘子、水果等主要物体,约2-3秒生成单个物体的3D预览,并在约2-3分钟内还原出完整场景。


这些物体都是可以被选择、移动和替换的独立资产。开启SimReady功能后,系统可以为资产估计出物体质量、大小和摩擦系数等物理属性,水果能够在力的作用下滚入水池中。


此外,用户还可以根据物体的重要程度选择不同的生成精度,先快速确定场景结构,再对重点资产进行精修。

吴迪举例称,如果用生成模型直接将会议室的图片转化为一个3D场景,画面中的桌椅、墙壁和其他物体通常会被合并在一起,难以单独选择和编辑。WorldGen在生成过程中能够拆分场景中的主要物体,分别生成独立资产,同时还原它们之间的空间与物理关系。

为了兼顾场景可用性与视觉完整性,WorldGen采用混合表达方式:需要编辑和交互的物体使用具备完整几何结构的网格模型(Mesh),方便后续调整和添加物理属性;背景则采用侧重还原场景外观的3D高斯泼溅(3D Gaussian Splatting),保留更多环境细节。


二、覆盖四类应用场景,具身智能、影视领域率先推进

张启煊向智东西介绍,WorldGen并非针对某个单一行业开发的模型,其应用场景覆盖具身智能、游戏、影视制作和XR等领域。目前,WorldGen已经在不同方向上推进落地应用。

在具身智能领域,影眸Hyper3D已与地瓜机器人、谋先飞展开合作,推出仿真训练方案:WorldGen负责生成可用于仿真的3D场景,谋先飞则进行仿真适配,地瓜机器人提供算力与开发工具链。

张启煊称:“生成式3D可以快速扩充物体种类和场景布局,但不会完全替代真实数据,机器人训练未来更可能混合使用仿真与真实数据。”


在影视领域,WorldGen能够解决视频模型在多镜头中难以保持空间和物体位置一致的问题。创作者可以先生成空间结构明确的3D场景,在其中调整镜头、移动物体和修改布局,再交给Seedance 2.5等视频模型补充人物表现、材质、光影和画面风格。


在游戏和专业3D制作领域,WorldGen生成的独立网格资产可以进入Blender、Unity、PlayCanvas和Unreal Engine等数字内容创作(DCC)工具及实时引擎,继续进行材质调整、动画绑定、关卡编辑和性能优化。今年7月,影眸Hyper3D还与Unity中国宣布合作,尝试打通从3D生成到实时游戏应用的流程。


在XR领域,WorldGen可以将参考图片还原为可编辑的三维空间,用户能够从不同视角观察场景,并调整物体和空间布局,可用于室内设计、空间展示和沉浸式体验。


张启煊告诉智东西,WorldGen在上述行业的应用目前主要处于内测或技术验证阶段,团队将根据实际客户需求确定后续投入重点。

三、以刚体生成为主,向“构建世界”继续演进

在采访交流环节,针对WorldGen技术边界的提问,张启煊称,系统生成的质量、摩擦系数等物理属性并非对真实物体的精确测量,主要结合资产体积、视觉信息、周围物体关系、传统估计算法以及视觉语言模型,对质量分布、摩擦系数和碰撞体进行推断。


因而,这些结果不能作为精密工程数据使用。现阶段,WorldGen主要支持刚体生成,尚未覆盖关节化资产、柔体和流体等。

关于WorldGen与“世界模型”的关系,吴迪称,世界模型既包括面向决策和行动的行动模型(Action Model),也包括生成可交互、可训练环境的模型,WorldGen更接近后者。影眸Hyper3D不会因此将自身定义为世界模型公司,其核心定位仍是3D生成。

吴迪认为,视频模型擅长最终画面呈现,3D则能够明确保存物体、空间结构和物理关系,两条路线并非相互取代,未来更可能以混合方式结合。

从单个资产走向完整场景,WorldGen让生成结果具备更强的可控性、可编辑性和工作流兼容能力。随着3D生成从“看起来好看”走向“真正可用”,场景级生成也正在成为连接游戏、影视、具身智能和XR等行业的新基础能力。

结语:3D生成竞争转向场景可用性

WorldGen的3D生成能力,并不只是局限于生成单个资产或是一个3D空间,它能够构建多个独立资产、理解空间关系与物理属性,形成可继续编辑、交互和运行的完整场景。3D生成的竞争重点正在从单个模型的视觉质量,进一步转向场景的可控性、物理合理性和工作流兼容能力。

现阶段,WorldGen仍以刚体生成为主,部分物理属性也依赖模型推断,在具身智能、游戏、影视和XR等领域仍处于验证与早期落地阶段。其后续价值能否真正释放,还要看生成结果能否稳定进入专业生产流程,但从“生成资产”走向“构建场景”,已经成为3D生成领域可行性较高的方案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
我军上将曾当着日方的面,称若支持琉球群岛独立,日方会有何感想

我军上将曾当着日方的面,称若支持琉球群岛独立,日方会有何感想

快乐彼岸
2026-09-04 23:17:12
“一个月陪睡一两次”:网红魏莹的榜一大哥照片曝光,他身价过亿,是个大企业家

“一个月陪睡一两次”:网红魏莹的榜一大哥照片曝光,他身价过亿,是个大企业家

江山挥笔
2026-08-25 16:40:36
皇马内讧?21岁辱华中卫与居莱尔激烈争吵 安东尼愤怒将球踢他身上

皇马内讧?21岁辱华中卫与居莱尔激烈争吵 安东尼愤怒将球踢他身上

风过乡
2026-09-05 09:00:20
27.98万起!奥迪官宣:降价18.78万!

27.98万起!奥迪官宣:降价18.78万!

DeepAuto车探
2026-09-04 14:07:08
1.5亿房奴侧夜难眠,26年的楼市迎来了不好的消息,日子很难过

1.5亿房奴侧夜难眠,26年的楼市迎来了不好的消息,日子很难过

房产有点意思
2026-09-04 20:41:32
押上口碑豪赌!星宇股份周晓萍心存侥幸,这场危机根本赌不赢

押上口碑豪赌!星宇股份周晓萍心存侥幸,这场危机根本赌不赢

爱看剧的阿峰
2026-09-05 10:01:33
刘德华当选中国影协副主席!西装革履冲上热搜,64岁比吴京还精神

刘德华当选中国影协副主席!西装革履冲上热搜,64岁比吴京还精神

为学机械设计
2026-09-04 18:55:02
“白天白露,热死牛;夜晚白露,把扇丢”,下周一白露,具体在几时?

“白天白露,热死牛;夜晚白露,把扇丢”,下周一白露,具体在几时?

小谈食刻美食
2026-09-05 09:46:03
香奈儿果然不坑穷人,这鞋根本不是给走路的人穿的,是给专车接送、脚几乎不沾地的人设计的

香奈儿果然不坑穷人,这鞋根本不是给走路的人穿的,是给专车接送、脚几乎不沾地的人设计的

背包旅行
2026-09-03 11:56:50
赵勇作出最新回应!王媛媛离队原因曝光,中国女排备战重心公布

赵勇作出最新回应!王媛媛离队原因曝光,中国女排备战重心公布

跑者排球视角
2026-09-05 18:13:57
18岁女孩惨遭已婚男友殴打致死:ICU 里面目全非,母亲哭到眼睛反复就医,知情人爆料更多内幕

18岁女孩惨遭已婚男友殴打致死:ICU 里面目全非,母亲哭到眼睛反复就医,知情人爆料更多内幕

笔尖下的人生
2026-09-05 15:39:48
全世界都还没反应过来,中国果断出手,全球猝不及防目瞪口呆

全世界都还没反应过来,中国果断出手,全球猝不及防目瞪口呆

凡知
2026-09-04 12:50:30
顶流男星与前女团成员被曝隐婚生娃,已同居带娃

顶流男星与前女团成员被曝隐婚生娃,已同居带娃

时光慢旅人
2026-09-04 23:20:24
马竞0 3大败!失利缘由单一,1人需负责,揭示其3大失误

马竞0 3大败!失利缘由单一,1人需负责,揭示其3大失误

只愿一生l
2026-09-06 06:20:22
方博:打不过西蒙,还打什么球?时隔9年方博再遇西蒙,冲击四强

方博:打不过西蒙,还打什么球?时隔9年方博再遇西蒙,冲击四强

爱情的滋味我也想尝尝
2026-09-05 23:32:04
为什么一条新闻,会缺失最关键的信息?

为什么一条新闻,会缺失最关键的信息?

走读新生
2026-08-31 23:07:22
联合国秘书长退休前,没什么是他不敢说的,丝毫不给这两国留情面

联合国秘书长退休前,没什么是他不敢说的,丝毫不给这两国留情面

毒sir财经
2026-09-05 07:00:19
吉林男大学生做包皮手术,13天后突然死亡,母亲状告医院却傻眼

吉林男大学生做包皮手术,13天后突然死亡,母亲状告医院却傻眼

灿烂夏天
2025-02-14 21:18:50
周涛与前夫姚科未离婚之前的一张合影照,儒雅的姚科,终究留不住周涛

周涛与前夫姚科未离婚之前的一张合影照,儒雅的姚科,终究留不住周涛

南万说娱26
2026-08-22 08:56:48
一夜输光几十万,打工小伙喝下整瓶百草枯:被伤透的妻子选择放弃治疗

一夜输光几十万,打工小伙喝下整瓶百草枯:被伤透的妻子选择放弃治疗

民生故事会
2026-09-05 23:23:10
2026-09-06 08:03:00
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12549文章数 117166关注度
往期回顾 全部

科技要闻

华为何庭波,再次更新韬定律论文

头条要闻

决胜盘一度0比5落后 郑钦文连赢七局上演"史诗级逆转"

头条要闻

决胜盘一度0比5落后 郑钦文连赢七局上演"史诗级逆转"

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

阿Sa蔡卓妍首度求婚细节,感动落泪

财经要闻

被曝试药后死亡,药企董事竟怒怼记者

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

手机
时尚
艺术
本地
军事航空

手机要闻

华为Pura 90系列未加入涨价潮:价格最稳的华为影像旗舰

推广中奖名单-更新至2026年8月25日推广

艺术要闻

别再说外星人了!三星堆最新发掘,直接实锤“龙的传人”

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

军事要闻

俄罗斯建"粉碎大日本帝国"纪念碑 日本急了

无障碍浏览 进入关怀版