网易首页 > 网易号 > 正文 申请入驻

能聊天能办事 千问发布Qwen-Audio-3.0-Realtime

0
分享至

今天,千问正式发布实时语音交互对话模型Qwen-Audio-3.0-Realtime——一个既要毫秒级响应、又不牺牲推理深度的实时语音模型。它在智商、Agent工具调用、共情对话、双工交互流畅度四条主线上同步升级,力求"又快又聪明"。模型提供推理更强的Plus版本与速度更快的Flash版本,适用于智能客服、教育培训、娱乐互动与情感陪伴等场景。

欢迎体验

阿里云百炼:

Qwen-Audio-3.0-Realtime-Plus:

https://bailian.console.aliyun.com/cn-beijing/?spm=a2c4g.11186623.0.0.4ab7695bvInrXr#/model-market/detail/qwen-audio-3.0-realtime-plus?serviceSite=asia-pacific-china

Qwen-Audio-3.0-Realtime-Flash:

https://bailian.console.aliyun.com/cn-beijing/?spm=a2c4g.11186623.0.0.4ab7695bvInrXr&tab=model#/model-market/detail/qwen-audio-3.0-realtime-flash?serviceSite=asia-pacific-china

又快又聪明:压时延不掉智商

实时语音模型往往为压低时延牺牲推理深度,智商衰减,但Qwen-Audio-3.0-Realtime针对日常对话、简单问答等对时延敏感的场景,能够直接生成回复,毫秒级响应。

在考验“AI会不会答”的语音问答基准VoiceBench 上,以书面化的标准prompt和口语化的prompt提问,Plus版本得分分别为92.5和90.5,仅下降2.0,这意味着模型能扛住真人说话的随意性。在更难的多轮音频对话挑战AudioMultiChallenge基准测试中,Flash版本标准和口语化prompt得分分别为43.6和38.1,仅下降5.5。

今年5月,Preview版本Fun-Realtime-Audiochat在"语音推理能力"指标上曾以97.6% 登顶Artificial Analysis。


能聊天更能办事:

无需明确指令,自行调用工具

文本大模型的Agent能力已相当成熟,但语音模型往往"能聊天不能办事":需要用户明显说出"帮我打开 XX"才能触发工具,并且切回闲聊后容易出现上下文断裂。Qwen-Audio-3.0-Realtime无需明确指令即可自行调用外部工具——调用结果还会自动融入对话记忆,一次调用的结果会被记住,后面几轮追问都能接着用。

例如用户先问"附近有什么川菜馆",再追问"评分4.5以上的哪家最近",模型会自动衔接地图工具上一次的返回结果继续检索。

模型基于FunctionCall标准协议,可以完成MCP、API、知识库的引入。

摆脱机械感:

随语境调整语气、节奏与情感

共情对话是本版本最能改变用户主观体验的部分。Qwen-Audio-3.0-Realtime摆脱了传统语音助手的机械感,可根据对话语境动态调整语气、节奏、音调与情感。在辩论场景中,模型能准确抓取对方论点并快速组织反驳,同时保持恰当的语气强度;在情感陪伴中,则通过语调、节奏与笑声、叹息、犹豫等副语言信号进行共情回应。

在专门考"AI说得像不像人"的S2S语音指令遵循公开基准VStyle上,模型取得SOTA成绩。


像真人一样对话:

边说边听,随时打断插话

双工交互流畅度,意味着模型能边说边听,像真人一样随时打断、插话,而非一问一答的对讲机模式。Qwen-Audio-3.0-Realtime内置"多模态感知的双工控制"子模型,通过分析音频信号、语义内容与说话人声纹特征,来判断如何交谈。

在餐厅、开放工区等嘈杂环境中,它不会被背景噪声误打断;在多人讨论中能锁定主对话对象、忽略旁听者交谈;在多说话人切换时,则能根据语义线索自然过渡。今年5月,Preview版本在对话流畅度指标上曾以97.8%登顶Artificial Analysis。此外,模型的API还预留了audio_prompt字段,用户可上传提前录制的音频样本,锁定声纹,聚焦特定的说话人。


On-Policy Distillation与多教师蒸馏

上述能力的提升,源于模型采用的On-Policy Distillation(在线策略蒸馏)框架——研究团队将文本大模型的完整推理能力蒸馏至语音模型:语音模型一边自己生成回答,一边由文本大模型实时纠正。

同时引入多教师蒸馏策略,确保模型在四条主线上均不偏科:口语多轮偏好教师保障口语化表达与指令遵循,通用教师负责基础问答与推理,Agentic教师锁定工具调用与复杂任务,音频理解教师处理副语言与音频语义信息。

从毫秒级响应到自行调用工具,从共情语气到边说边听,Qwen-Audio-3.0-Realtime想做的,是一个"又快又聪明"、聊起来更像真人的实时语音模型。我们期待看到大家基于它构建的下一代语音交互应用。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
明日揭幕!角逐总决赛席位 武网为何是球星们“必争之地”?

明日揭幕!角逐总决赛席位 武网为何是球星们“必争之地”?

新英体育
2026-10-09 14:36:40
克什米尔地方官员曾称:若必须选,我们既不想加入印度,也不想加入巴基斯坦,克什米尔民众更倾向于加入中国,其背后是70年难以破解的僵局

克什米尔地方官员曾称:若必须选,我们既不想加入印度,也不想加入巴基斯坦,克什米尔民众更倾向于加入中国,其背后是70年难以破解的僵局

z千年历史老号
2026-10-08 18:31:38
以为会低调收手!蔡康永海外发声亮明态度,早已不打算回头

以为会低调收手!蔡康永海外发声亮明态度,早已不打算回头

全球风情大揭秘
2026-10-08 18:29:44
俄外交官向中方解释清楚,俄罗斯没想和中国争,只是出于本国利益

俄外交官向中方解释清楚,俄罗斯没想和中国争,只是出于本国利益

别让往昔的悲伤和对未来的恐惧
2026-10-09 03:51:59
一味中药,清肝明目,润肺止咳,止盗汗

一味中药,清肝明目,润肺止咳,止盗汗

环京快爆
2026-10-09 08:52:09
确认报案!“逼空姐下跪”的大老板,开始慌了!

确认报案!“逼空姐下跪”的大老板,开始慌了!

财经要参
2026-10-08 20:30:05
中国计划提名宋莉竞选下一任世卫组织总干事,中方:相信如果宋莉博士当选,将有助于这一组织在提升全人类健康福祉方面发挥更为积极的作用

中国计划提名宋莉竞选下一任世卫组织总干事,中方:相信如果宋莉博士当选,将有助于这一组织在提升全人类健康福祉方面发挥更为积极的作用

政知新媒体
2026-10-08 15:39:26
“乡下父母全是这样被骗的”,中职女孩穿廉价警服,过来人说实话

“乡下父母全是这样被骗的”,中职女孩穿廉价警服,过来人说实话

番外行
2026-10-09 09:40:45
刘亦菲现身上海机场!穿瑜伽裤显腿粗屁股塌,三角区挤肉好尴尬

刘亦菲现身上海机场!穿瑜伽裤显腿粗屁股塌,三角区挤肉好尴尬

白面书誏
2026-10-09 17:22:21
尊界刹车踏板断裂,华为推荐官三问懂车帝,她曾一年帮卖近10亿

尊界刹车踏板断裂,华为推荐官三问懂车帝,她曾一年帮卖近10亿

映射生活的身影
2026-10-08 16:09:00
提气!一场2-0,郑钦文夯爆了:掀翻6号种子,对手曾6次阴阳中国

提气!一场2-0,郑钦文夯爆了:掀翻6号种子,对手曾6次阴阳中国

大秦壁虎白话体育
2026-10-09 17:39:02
重磅!罕见跨阵营致敬!葡媒盛赞梅西:五百年传奇,无人能超越

重磅!罕见跨阵营致敬!葡媒盛赞梅西:五百年传奇,无人能超越

生活新鲜市
2026-10-09 07:59:12
网友称大英博物馆一青花瓷碗在展柜内摔碎,在场留学生讲述:当日展厅非常拥挤

网友称大英博物馆一青花瓷碗在展柜内摔碎,在场留学生讲述:当日展厅非常拥挤

潇湘晨报
2026-10-08 18:54:10
马斯克和黄仁勋同台,获特朗普亲发的奖章,俩科技大佬的母亲也到场了

马斯克和黄仁勋同台,获特朗普亲发的奖章,俩科技大佬的母亲也到场了

译言
2026-10-09 10:50:48
年轻人的无效节俭能有多费钱?网友:有时候远离爹妈可以多活10年

年轻人的无效节俭能有多费钱?网友:有时候远离爹妈可以多活10年

带你感受人间冷暖
2026-10-08 00:05:18
快讯!蔡康永竟然跑到日本去了!

快讯!蔡康永竟然跑到日本去了!

故事终将光明磊落
2026-10-09 14:44:39
骑士113-124输凯尔特人!这一战看到4个事实:3年9700万留下哈登是对的

骑士113-124输凯尔特人!这一战看到4个事实:3年9700万留下哈登是对的

篮球大视野
2026-10-09 09:57:00
超越英伟达!芯片巨头单季利润800亿美元,全球第一!

超越英伟达!芯片巨头单季利润800亿美元,全球第一!

EETOP半导体社区
2026-10-09 09:55:35
高市早苗公开反对特朗普,称不会将AI改名为SI,此前特朗普称任何继续使用“AI”一词而非“SI”的都是敌人

高市早苗公开反对特朗普,称不会将AI改名为SI,此前特朗普称任何继续使用“AI”一词而非“SI”的都是敌人

极目新闻
2026-10-09 13:50:37
郑钦文太强了,三次破发压制乌克兰老将,斯维托丽娜被嘘

郑钦文太强了,三次破发压制乌克兰老将,斯维托丽娜被嘘

南海浪花
2026-10-09 16:14:57
2026-10-09 18:23:00
阿里研究院 incentive-icons
阿里研究院
推动商业互联网化
1971文章数 2182关注度
往期回顾 全部

科技要闻

字节"干扰模型训练"实习生融资近2亿元

头条要闻

最淡泊的福建首富静静地走了 其家族现坐拥105亿财富

头条要闻

最淡泊的福建首富静静地走了 其家族现坐拥105亿财富

体育要闻

30天30队·鹈鹕:胖虎又一年“如果”

娱乐要闻

吴奇隆宣布重要决定,走上谢霆锋老路

财经要闻

央行为何发布关于人民币汇率的政策立场

汽车要闻

比亚迪第三代唐内饰发布 两种风格/巨幕屏最抢眼

态度原创

时尚
亲子
家居
房产
公开课

从夜幕金辉到另类宇宙,巴黎更美了吗?

亲子要闻

【科普】你能分清「生育率」和「出生率」吗?

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

中旅投资:以首发经济作答,定义人工冲浪产业的中国方案

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版