网易首页 > 网易号 > 正文 申请入驻

京东重磅发布可交互视听世界模型,长视频生成同步升级

0
分享至

9月9日,在京东全球科技探索者大会(JDD)上,京东探索研究院发布JoyAI-Echo系列两项最新进展:超长音视频生成模型升级至JoyAI-Echo 1.5,同时发布并开源可交互视听世界模型EchoWM。前者支持10分钟以上音视频持续生成,后者将原生视听生成与用户控制结合,让AI生成内容进一步从“可以看”走向“可以进入和探索”。



打通视听生成与世界交互,JoyAI-Echo系列突破长视频生成边界

随着AI视频画质不断提升,行业竞争正转向生成时长、推理效率与持续交互。JoyAI-Echo 1.5基于音视频Memory Bank架构,在多镜头、长时程生成中保持人物形象、声音和故事线索连贯,支持10分钟以上音视频持续生成。模型通过长视频后训练实现最高7.5倍推理加速,仅需2张H200,即可在480P下平均每秒生成24帧,实现1:1等时生成;Director Agent还可根据自然语言完成故事展开、分镜规划、生成审核与成片组装。

当前世界模型通常沿两条路线发展:一类能够根据用户操作持续生成画面,却缺少自然声音;另一类可以联合生成音视频,但用户难以持续进入并改变内容。EchoWM将两类能力结合,可原生联合生成720P视频、环境音、音乐和语音,使声音随场景、摄像机与主体运动同步变化;通过统一的“相机意图”,模型支持第一人称导航、第三人称摄像机与主体协同控制,以及多轮连续探索。在WBench Navigation评测中,EchoWM与四步因果流式版本EchoWM-Flash位列前两名。



在涵盖 158个多轮导航案例的WBench Navigation上,EchoWM取得综合排名第一的成绩

JoyAI基础模型矩阵集中升级,完善面向物理世界的技术体系

本次大会上,京东集中呈现JoyAI基础模型矩阵,能力覆盖图像与视频生成、多模态理解、实时交互、世界建模、智能语音和具身操作等方向,推动JoyAI从内容生成进一步拓展至对动态环境的感知、模拟与交互。

JDD现场,京东还展示了新一代音视频基础模型JoyAI-Video。该模型重点提升商业视频生成、物理规律呈现、第一人称视角和多镜头连续叙事能力,可应用于电商广告、短剧创作与具身智能演练等场景,并将于10月正式发布。

在模型之外,京东同步展示EgoLive真实数据、JoyAI-Sim仿真转换工具链及大模型基础设施,形成涵盖真实数据、仿真转换和模型开发的研发支撑体系,为面向物理世界的模型研发提供基础能力。



五大行业模型集中亮相,京东产业基因加速AI场景落地

在基础模型持续拓展能力边界的同时,京东还集中呈现零售、物流、医疗、工业和政务五大行业模型与智能体应用,依托长期积累的专业数据、供应链能力和真实业务流程,推动AI进入产业核心环节。

其中,零售多模态模型服务图搜、智能导购和素材质检;物流超脑3.0以Agentic智能体框架连接决策、流程和物理执行;京医千询3.0强化医疗影像分析、模拟问诊与可信推理;工业大模型深入专业选型、维保与CAD设计;政务大模型则服务政策咨询、智能办公和数据分析。

基础模型创新与产业AI实践双线推进,构成京东推动AI从数字世界迈向物理世界的整体布局,助力京东构建成为全球最大的物理世界运营中心。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
名嘴:詹姆斯用脑子赢球,东部悬念只剩76人和热火

名嘴:詹姆斯用脑子赢球,东部悬念只剩76人和热火

体坛观察猿
2026-10-21 20:25:37
什么东西在山姆买比在外面便宜?网友:买一次能用几代人!

什么东西在山姆买比在外面便宜?网友:买一次能用几代人!

另子维爱读史
2026-10-20 20:11:45
国家发展改革委资源节约和环境保护司原司长任树本被查

国家发展改革委资源节约和环境保护司原司长任树本被查

新京报
2026-10-21 17:20:10
埃及王牌飞行员试驾我国歼 - 16 返航,再度坐上阵风座舱久久不语,说出的一席话让大家无言以对

埃及王牌飞行员试驾我国歼 - 16 返航,再度坐上阵风座舱久久不语,说出的一席话让大家无言以对

唠叨说历史
2026-10-21 16:32:45
现场图丨中国企业向阿联酋交付首架飞行汽车

现场图丨中国企业向阿联酋交付首架飞行汽车

澎湃新闻
2026-10-21 08:18:04
土耳其的距离哲学,对 4500 公里外的新疆喊话,对 200 公里外的希腊沉默

土耳其的距离哲学,对 4500 公里外的新疆喊话,对 200 公里外的希腊沉默

海外说事
2026-10-20 13:03:29
台当局禁赴大陆参加孙中山诞辰纪念活动,国台办回应

台当局禁赴大陆参加孙中山诞辰纪念活动,国台办回应

澎湃新闻
2026-10-21 10:54:26
豆包回应“国内超一半算力在造爽剧”:字节只有约10%算力用于视频生成模型的训练和推理

豆包回应“国内超一半算力在造爽剧”:字节只有约10%算力用于视频生成模型的训练和推理

澎湃新闻
2026-10-19 13:08:27
防中国对手崛起!三星、SK海力士紧急升级中国工厂:200层以上NAND量产

防中国对手崛起!三星、SK海力士紧急升级中国工厂:200层以上NAND量产

快科技
2026-10-21 14:42:10
骇人听闻!身披旭日旗的陈宇昕被遣返,还有律师为他辩护

骇人听闻!身披旭日旗的陈宇昕被遣返,还有律师为他辩护

平老师666
2026-10-21 11:01:22
好奇查了一下陈宇昕的家境,原来他从小就在国外留学是有原因的

好奇查了一下陈宇昕的家境,原来他从小就在国外留学是有原因的

皮蛋儿电影
2026-10-20 09:58:37
就在今天!詹姆斯创下80年NBA纪录,前无古人

就在今天!詹姆斯创下80年NBA纪录,前无古人

徐扙老表哥
2026-10-21 12:26:25
李楠太过分了,比许利民还狠!连1秒钟时间都不给范子铭,人家可是顶薪

李楠太过分了,比许利民还狠!连1秒钟时间都不给范子铭,人家可是顶薪

萌兰聊个球
2026-10-21 07:39:24
4-0!斯诺克大冷门:张家玮连胜世界冠军,进16强创纪录,庞俊旭告急!

4-0!斯诺克大冷门:张家玮连胜世界冠军,进16强创纪录,庞俊旭告急!

刘姚尧的文字城堡
2026-10-21 18:46:08
大白马股,罕见连续大跌!

大白马股,罕见连续大跌!

数据宝
2026-10-21 11:05:40
男子家中漏水花6800元找人上门补漏,维修人员灌了100多斤胶水,结果房顶被钻穿,下雨后漏水问题加重;包工头承认错误:退4000余元

男子家中漏水花6800元找人上门补漏,维修人员灌了100多斤胶水,结果房顶被钻穿,下雨后漏水问题加重;包工头承认错误:退4000余元

北青网-北京青年报
2026-10-20 14:37:08
扬州市委书记王进健跨省履新云南省委常委

扬州市委书记王进健跨省履新云南省委常委

吉刻新闻
2026-10-21 13:27:05
老人想买特斯拉被字体劝退!马斯克秒回:加 马上加

老人想买特斯拉被字体劝退!马斯克秒回:加 马上加

快科技
2026-10-19 11:28:11
腾讯跌回8年前了

腾讯跌回8年前了

25号观察
2026-10-21 15:49:29
重磅:乌克兰摧毁卢甘斯克电信数据大楼!传出数十起爆炸

重磅:乌克兰摧毁卢甘斯克电信数据大楼!传出数十起爆炸

项鹏飞
2026-10-21 16:58:16
2026-10-21 20:39:00
商业透镜
商业透镜
聚焦市场,深度解读。走进这里,走近财经。
3502文章数 904关注度
往期回顾 全部

科技要闻

SpaceX收入暴涨!马斯克:这事"不再不可能"

头条要闻

康奈尔校报做了件石破天惊的事:公布轮奸女生的7人姓名

头条要闻

康奈尔校报做了件石破天惊的事:公布轮奸女生的7人姓名

体育要闻

“我,对得起天津足球!”

娱乐要闻

张柏芝自曝五点陪伴儿子 谢霆锋尴尬了

财经要闻

昔日彩电一哥缘何在今天被挤下牌桌?

汽车要闻

智驾摩尔定律一年十倍跃升 2028迎来L4拐点

态度原创

时尚
旅游
艺术
手机
军事航空

卡其裙、小棕裤,今年最好看的单品都在这了,穿出秋天的氛围与时髦

旅游要闻

鎏金白蜡映红楼!五四大街秋景上线

艺术要闻

走“性感”线路!O27摩天楼效果图公布,2028年建成!

手机要闻

8000元入手回收仅3500元!iPhone Air被吐槽不保值

军事要闻

美原油储备降至44年来最低 美以伊战事或重燃

无障碍浏览 进入关怀版