网易首页 > 网易号 > 正文 申请入驻

阿里Wan Streamer v0.3上线,AI 不但能和你实时视频聊天,还能自由行动

0
分享至

阿里正在内测的 Wan Streamer 产品,又有了更新,现在来到了 v0.3 版本。


Wan Streamer,是阿里万象团队研发的一个实时交互的音视频模型。AI Agent 端能够边听,边看,边思考,边说话,并实时生成视频回应你。

第一次看到时Wan Streamer 时,我惊呆了。

(左为真人,右为AI数字人)

这是直接可以和AI 数字人打视频实时聊天了。

的确是这样,Wan Streamer 的模型侧响应延迟约为0.2 秒,0.35秒的双向网络延迟后,总延迟0.6 秒以内。

可支持亚秒级全双工音视频通信。

实时输出音频+视频,比市面上多数单纯输入语音的模型延时都低,低很多。


不仅如此,Wan Steamer 的AI 数字人还支持边听、边看、边思考、边说话,实时生成视频回应你。

视线、点头、微表情与口型同步。如同真人一样。

对面的 AI,已感觉不出是 AI 了,是真的有人味了。

现在, Wan Streamer来到了v0.3 版本,我们一起回顾下这三个版本。

2026 年 6 月 24 日,发布0.1版本:面向实时交互的端到端基础模型。

(大图为 AI 数字人,小图为真人。下同)

全面介绍了该模型,这是一个实时交互端到端多模态模型,单一Transformer统一处理文本、音频、视频流,实现全双工实时音视频互动。

2026 年 7 月 5 日,发布0.2版本:分辨率更高,延迟不变。让实时画面更清晰。

2026 年7 月 16 日,发布 0.3 版本:保持速度与分辨率的同时,让模型更通用、角色行为更丰富。

这个v0.3 版本里,大模型把AI数字人实时视频,理解为「世界设定 + 事件流」。

啥意思呢?

世界设定:指视频里长期保持一致的场景、角色、画面与声音。也就是不变化的或者变化小的部分。

事件流:指视频里随时间发生的说话、动作、镜头移动、环境变化。随时变化的部分。

也就是,AI 数字人实时视频生成, 会拆解为固定的或变化不大的部分,和随时变化的部分。

世界设定只需载入一次,此后用户输入、智能体说话与行为、音频和视频沿同一时间线持续推进。

这样,v0.3 将 Wan Streamer 从对话模型拓展为更通用的视频学习模型。

这是一种新的理解视频的模式。

视频 = 世界设定 + 事件流。

Wan Streamer要做的,是让合适音视频聊天的AI Agent,像真人一样。

不但能实时音视频聊天,极低延迟。

AI Agent 还能有自己的行为和动作。

比如,对 AI Agent 一边和你聊天,一边演示自己做饭的步骤。

Wan Streamer v0.3 已让这个成为现实。

Wan Streamer从 v0.1 到 v0.3,差不多一周一个版本,迭代非常快。

预计到1.0版本后,会进行公测或对外开放接入。

这对于AI Agent 音视频实时交互,或是一个重大节点。

标志着, AI音视频生成,进入实时交互、 类真人阶段。

这个产品上线后,这对阿里,或许也是个王炸产品。

来源 | 产品笔记(ID:cpbiji)

作者 | 三哥 ; 编辑 | 呼呼大睡

内容仅代表作者独立观点,不代表早读课立场


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
懂球!特朗普:东契奇交易是史上最垃圾的,能不能反悔啊

懂球!特朗普:东契奇交易是史上最垃圾的,能不能反悔啊

懂球帝
2026-09-10 11:29:04
西藏网警:捏造泥石流系人为造成、歪曲救援工作,多人造谣被处罚

西藏网警:捏造泥石流系人为造成、歪曲救援工作,多人造谣被处罚

界面新闻
2026-09-10 21:22:12
大换血!安切洛蒂公布巴西国家队名单:16处调整 内马尔阿利松彻底告别

大换血!安切洛蒂公布巴西国家队名单:16处调整 内马尔阿利松彻底告别

爱奇艺体育
2026-09-10 12:01:39
央视直播澳门冠军赛9月11日赛程,陈熠对伊丽莎白,周启豪战贾哈

央视直播澳门冠军赛9月11日赛程,陈熠对伊丽莎白,周启豪战贾哈

乒乓球球
2026-09-10 22:07:47
全球震惊,英国居然做了一件好事,千年历史头一回!

全球震惊,英国居然做了一件好事,千年历史头一回!

一个坏土豆
2026-09-10 20:59:41
也门胡塞武装攻占红海港口城市穆哈

也门胡塞武装攻占红海港口城市穆哈

新华社
2026-09-10 19:08:09
金银铜价大幅下跌,黄金重挫逼近4300美元关口

金银铜价大幅下跌,黄金重挫逼近4300美元关口

每日经济新闻
2026-09-11 08:00:51
拼了!国安8外援全部就位:加上塞鸟和茹子楠,首发或仅1名本土

拼了!国安8外援全部就位:加上塞鸟和茹子楠,首发或仅1名本土

邱泽云
2026-09-10 14:52:16
网传付磊将房产和现金都给了妻女!两个女儿举报付磊是三败俱伤

网传付磊将房产和现金都给了妻女!两个女儿举报付磊是三败俱伤

细品名人
2026-09-11 07:32:35
印度总理莫迪惊人言论:如果我们都不制造垃圾,还需要清洁运动吗?

印度总理莫迪惊人言论:如果我们都不制造垃圾,还需要清洁运动吗?

小徐讲八卦
2026-09-10 09:17:53
新小区5年变贫民窟:楼道变厕所杂草比人高,已被外卖员集体拉黑

新小区5年变贫民窟:楼道变厕所杂草比人高,已被外卖员集体拉黑

六子吃凉粉
2026-09-09 17:07:55
“波斯湾爆发最大海战!”央视新闻报道称,当地时间2026年9月9日清晨,伊朗革命卫队发表声明称,重创2艘美国军舰以及8艘

“波斯湾爆发最大海战!”央视新闻报道称,当地时间2026年9月9日清晨,伊朗革命卫队发表声明称,重创2艘美国军舰以及8艘

扶苏聊历史
2026-09-10 15:36:23
大卫:中国年轻人不比西班牙等强国差,但欧洲有科学训练和高质量比赛

大卫:中国年轻人不比西班牙等强国差,但欧洲有科学训练和高质量比赛

懂球帝
2026-09-10 23:40:07
百万穿搭博主“最潮爷爷” 在睡梦中去世,曾火爆全网,无数网友被治愈:不被年龄限制!

百万穿搭博主“最潮爷爷” 在睡梦中去世,曾火爆全网,无数网友被治愈:不被年龄限制!

大风新闻
2026-09-10 10:07:09
真狠!上市5年就横盘5年,市值仅40亿,却有7家外资集体重仓前十

真狠!上市5年就横盘5年,市值仅40亿,却有7家外资集体重仓前十

长风价值掘金
2026-09-10 20:53:44
iPhone Duo怎么读:苹果折叠屏命名让中文用户集体犯难了

iPhone Duo怎么读:苹果折叠屏命名让中文用户集体犯难了

快科技
2026-09-09 19:11:14
二手房价连续两周回升!深圳“金九”迎开门红,涨价业主增多

二手房价连续两周回升!深圳“金九”迎开门红,涨价业主增多

南方都市报
2026-09-10 17:48:07
9月1日起,建筑集团公司全面停工停产!

9月1日起,建筑集团公司全面停工停产!

新浪财经
2026-09-09 21:55:32
“生物爹”怒了:四川大叔带着叛逆女儿跑货车,一路见遍人间苦,却意外刷爆全网!

“生物爹”怒了:四川大叔带着叛逆女儿跑货车,一路见遍人间苦,却意外刷爆全网!

阅读第一
2026-09-09 08:35:40
生育大局已定?不出意外的话,明年中国新生人口将迎来3大变化

生育大局已定?不出意外的话,明年中国新生人口将迎来3大变化

你在偷看谁
2026-09-10 21:09:48
2026-09-11 08:32:49
互联网早读课 incentive-icons
互联网早读课
专注互联网产品、运营、交互
9868文章数 55228关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

涉伊朗核问题 中国和俄罗斯投下反对票

头条要闻

涉伊朗核问题 中国和俄罗斯投下反对票

体育要闻

16岁的国产小库里,还有多少功课要做

娱乐要闻

参加晚宴,刘亦菲因合照深陷争议

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

标配全线控底盘 全新一代智己LS6预售20.99万起

态度原创

教育
艺术
本地
家居
公开课

教育要闻

2026年内蒙古自治区“最美教师”发布,他们分别是苏永红、冉巍、员利光、于伟平、刘巧秀、戴秀萍、雷彪、李红、傅锁根、常泽辉

艺术要闻

他偷走70箱清宫文物:却在逃亡路上将国宝赠人、丢弃...

本地新闻

拼假 13 天国内长线路线合集

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版