网易首页 > 网易号 > 正文 申请入驻

能聊天能办事 千问发布Qwen-Audio-3.0-Realtime

0
分享至

今天,千问正式发布实时语音交互对话模型Qwen-Audio-3.0-Realtime——一个既要毫秒级响应、又不牺牲推理深度的实时语音模型。它在智商、Agent工具调用、共情对话、双工交互流畅度四条主线上同步升级,力求"又快又聪明"。模型提供推理更强的Plus版本与速度更快的Flash版本,适用于智能客服、教育培训、娱乐互动与情感陪伴等场景。

欢迎体验

阿里云百炼:

Qwen-Audio-3.0-Realtime-Plus:

https://bailian.console.aliyun.com/cn-beijing/?spm=a2c4g.11186623.0.0.4ab7695bvInrXr#/model-market/detail/qwen-audio-3.0-realtime-plus?serviceSite=asia-pacific-china

Qwen-Audio-3.0-Realtime-Flash:

https://bailian.console.aliyun.com/cn-beijing/?spm=a2c4g.11186623.0.0.4ab7695bvInrXr&tab=model#/model-market/detail/qwen-audio-3.0-realtime-flash?serviceSite=asia-pacific-china

又快又聪明:压时延不掉智商

实时语音模型往往为压低时延牺牲推理深度,智商衰减,但Qwen-Audio-3.0-Realtime针对日常对话、简单问答等对时延敏感的场景,能够直接生成回复,毫秒级响应。

在考验“AI会不会答”的语音问答基准VoiceBench 上,以书面化的标准prompt和口语化的prompt提问,Plus版本得分分别为92.5和90.5,仅下降2.0,这意味着模型能扛住真人说话的随意性。在更难的多轮音频对话挑战AudioMultiChallenge基准测试中,Flash版本标准和口语化prompt得分分别为43.6和38.1,仅下降5.5。

今年5月,Preview版本Fun-Realtime-Audiochat在"语音推理能力"指标上曾以97.6% 登顶Artificial Analysis。


能聊天更能办事:

无需明确指令,自行调用工具

文本大模型的Agent能力已相当成熟,但语音模型往往"能聊天不能办事":需要用户明显说出"帮我打开 XX"才能触发工具,并且切回闲聊后容易出现上下文断裂。Qwen-Audio-3.0-Realtime无需明确指令即可自行调用外部工具——调用结果还会自动融入对话记忆,一次调用的结果会被记住,后面几轮追问都能接着用。

例如用户先问"附近有什么川菜馆",再追问"评分4.5以上的哪家最近",模型会自动衔接地图工具上一次的返回结果继续检索。

模型基于FunctionCall标准协议,可以完成MCP、API、知识库的引入。

摆脱机械感:

随语境调整语气、节奏与情感

共情对话是本版本最能改变用户主观体验的部分。Qwen-Audio-3.0-Realtime摆脱了传统语音助手的机械感,可根据对话语境动态调整语气、节奏、音调与情感。在辩论场景中,模型能准确抓取对方论点并快速组织反驳,同时保持恰当的语气强度;在情感陪伴中,则通过语调、节奏与笑声、叹息、犹豫等副语言信号进行共情回应。

在专门考"AI说得像不像人"的S2S语音指令遵循公开基准VStyle上,模型取得SOTA成绩。


像真人一样对话:

边说边听,随时打断插话

双工交互流畅度,意味着模型能边说边听,像真人一样随时打断、插话,而非一问一答的对讲机模式。Qwen-Audio-3.0-Realtime内置"多模态感知的双工控制"子模型,通过分析音频信号、语义内容与说话人声纹特征,来判断如何交谈。

在餐厅、开放工区等嘈杂环境中,它不会被背景噪声误打断;在多人讨论中能锁定主对话对象、忽略旁听者交谈;在多说话人切换时,则能根据语义线索自然过渡。今年5月,Preview版本在对话流畅度指标上曾以97.8%登顶Artificial Analysis。此外,模型的API还预留了audio_prompt字段,用户可上传提前录制的音频样本,锁定声纹,聚焦特定的说话人。


On-Policy Distillation与多教师蒸馏

上述能力的提升,源于模型采用的On-Policy Distillation(在线策略蒸馏)框架——研究团队将文本大模型的完整推理能力蒸馏至语音模型:语音模型一边自己生成回答,一边由文本大模型实时纠正。

同时引入多教师蒸馏策略,确保模型在四条主线上均不偏科:口语多轮偏好教师保障口语化表达与指令遵循,通用教师负责基础问答与推理,Agentic教师锁定工具调用与复杂任务,音频理解教师处理副语言与音频语义信息。

从毫秒级响应到自行调用工具,从共情语气到边说边听,Qwen-Audio-3.0-Realtime想做的,是一个"又快又聪明"、聊起来更像真人的实时语音模型。我们期待看到大家基于它构建的下一代语音交互应用。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
同学聚会我没人理,当县长的好友进来直接走向我:这个位置得给你

同学聚会我没人理,当县长的好友进来直接走向我:这个位置得给你

白云故事
2025-07-12 17:10:03
49岁赵长鹏晒“薄肌”,否认有千亿美元财富

49岁赵长鹏晒“薄肌”,否认有千亿美元财富

钛媒体APP
2026-10-09 11:22:10
击中两辆公交车,俄军又杀死至少33人!基辅紧急限电,冬天已提前到来

击中两辆公交车,俄军又杀死至少33人!基辅紧急限电,冬天已提前到来

鹰眼Defence
2026-10-09 16:43:44
净利预增超19000%!300821,“20CM”涨停

净利预增超19000%!300821,“20CM”涨停

大众证券报
2026-10-09 12:36:56
饶毅急了:日本30多个诺奖,中国学术不端!

饶毅急了:日本30多个诺奖,中国学术不端!

红色少女主播
2026-10-09 00:26:23
美国军方做出大胆预测:解放军武力收台时间曝光,突然大幅度提前

美国军方做出大胆预测:解放军武力收台时间曝光,突然大幅度提前

时光流转追梦人
2026-10-09 03:03:33
大S 50岁!坟墓现场华丽庆生,具俊晔搂小S引发热议

大S 50岁!坟墓现场华丽庆生,具俊晔搂小S引发热议

娱乐小丸子
2026-10-06 19:50:35
“狡猾”的直肠癌!研究发现:身体若频繁出现4表现,或已是晚期

“狡猾”的直肠癌!研究发现:身体若频繁出现4表现,或已是晚期

芹姐说生活
2026-10-08 22:16:23
蒋万安摊牌后,唐湘龙向郑丽文喊话,国民党各大佬被锐评

蒋万安摊牌后,唐湘龙向郑丽文喊话,国民党各大佬被锐评

DS北风
2026-10-09 15:42:02
人伦大乱,正在毁掉中国家庭,四种乱象就在家里,别装看不见

人伦大乱,正在毁掉中国家庭,四种乱象就在家里,别装看不见

涵豆说娱
2026-10-08 01:31:06
高芙:我被中国球迷网暴,我不是小偷!谁料美国网友抨击更猛烈

高芙:我被中国球迷网暴,我不是小偷!谁料美国网友抨击更猛烈

军情观察家
2026-10-08 16:22:34
今晚开播!又一24集黑马大剧来袭,演员阵容不错,值得期待!

今晚开播!又一24集黑马大剧来袭,演员阵容不错,值得期待!

蓝莓影视推荐
2026-10-09 13:16:52
万万没想到!航班冲突全网沸腾,网友人肉搜身份,无辜者被迫发声

万万没想到!航班冲突全网沸腾,网友人肉搜身份,无辜者被迫发声

再战五百回合
2026-10-08 15:57:37
贵州女子在恒信奔驰4S店花37.2万元买GLC300L,交付当天迟迟不见车,多方追问才知被撞了;车主要退换车,4S店提出补偿5000元+1年延保遭拒

贵州女子在恒信奔驰4S店花37.2万元买GLC300L,交付当天迟迟不见车,多方追问才知被撞了;车主要退换车,4S店提出补偿5000元+1年延保遭拒

扬子晚报
2026-10-08 18:34:03
中国驻欧盟使团发言人就欧洲议会发布欧中政治关系报告答记者问

中国驻欧盟使团发言人就欧洲议会发布欧中政治关系报告答记者问

环球网资讯
2026-10-09 06:04:04
日本全面叫停种植牙?种牙潜藏的风险与后遗症,一次为你讲明白

日本全面叫停种植牙?种牙潜藏的风险与后遗症,一次为你讲明白

健康科普365
2026-08-13 14:30:15
俄科学家死于鼠疫其母发声:并非实验室试管破裂泄漏,我知道真相

俄科学家死于鼠疫其母发声:并非实验室试管破裂泄漏,我知道真相

小丸说故事
2026-10-09 08:04:00
单局4次DUECE!郑钦文兑现第5个破发点,首盘5-2领先斯维托丽娜,冲开门红!

单局4次DUECE!郑钦文兑现第5个破发点,首盘5-2领先斯维托丽娜,冲开门红!

刘姚尧的文字城堡
2026-10-09 15:45:37
钱再多有什么用?63岁何赛飞多年病情曝光,终究走上了刘欢的老路

钱再多有什么用?63岁何赛飞多年病情曝光,终究走上了刘欢的老路

素玉姑娘
2026-10-08 07:19:05
A股:人民日报权威刊文,我国市场具有稀缺性!明日将迎来新变化

A股:人民日报权威刊文,我国市场具有稀缺性!明日将迎来新变化

虎哥闲聊
2026-10-09 00:00:04
2026-10-09 17:35:01
阿里研究院 incentive-icons
阿里研究院
推动商业互联网化
1971文章数 2182关注度
往期回顾 全部

科技要闻

字节"干扰模型训练"实习生融资近2亿元

头条要闻

男子与堂嫂系情人关系分手后欲纵火同归于尽 法院判了

头条要闻

男子与堂嫂系情人关系分手后欲纵火同归于尽 法院判了

体育要闻

30天30队·鹈鹕:胖虎又一年“如果”

娱乐要闻

吴奇隆宣布重要决定,走上谢霆锋老路

财经要闻

央行为何发布关于人民币汇率的政策立场

汽车要闻

比亚迪第三代唐内饰发布 两种风格/巨幕屏最抢眼

态度原创

手机
教育
家居
游戏
军事航空

手机要闻

iPhone 18 Pro系列被曝削减零部件产量 供应链人士回应:订单总量未发生实质性变化

教育要闻

解方程,逻辑清晰就简单

家居要闻

2026建博会(广州) 公装联探展交流活动

《高达:异轨征途》TGS游民采访:本作可玩性很高

军事要闻

直击南部战区海军某部重装空投训练

无障碍浏览 进入关怀版