网易首页 > 网易号 > 正文 申请入驻

网易有道重磅发布“子曰4”,全量开源多模态与TTS双引擎

0
分享至

近日,网易有道宣布“子曰”大模型迎来 4.0 版本的全方位升级。“子曰4" 正式迈入全模态时代,不仅全面支持文本、图片、音频的融合交互,有道更宣布将核心的“多模态模型”与“语音合成(TTS)模型”正式开源。与此同时,翻译模型也迎来了深度的技术重构,翻译质量与效率实现双重提升。

多模态模型视觉与数理斩获SOTA,纯文本数理难题性能行业领先

据介绍,开源的“子曰4”多模态模型在 27B 参数规模上,面向教育场景,将支持视觉输入的数理能力拉到了行业顶尖水平(SOTA)。在同等参数规模的模型中,“子曰4”在处理带图表的数学题、物理题等高难度视觉数理问题上表现惊艳。中文纯文本数理难题的性能也获得显著提升,模型准确率达81.4%,达到行业领先水平。


子曰4在多个视觉数理基准上达到同规模模型中最佳水平

图片来源: https://huggingface.co/netease-youdao/Confucius4

更为关键的突破在于实际落地的“性价比”。相关负责人介绍,新模型采用了精细化思维链重构方案,通过汇聚大规模优质精简的推理样本进行深度优化,成功将推理思维链输出长度压缩了43.2%。

这意味着它可以用更少的 Token、更短的推理路径更快地给出答案,为企业和开发者大幅降低了实际业务场景中的推理成本。


子曰4在多个视觉数理基准上大幅降低了输出token的数量

图片来源: https://huggingface.co/netease-youdao/Confucius4

此外,子曰研发团队针对国内学生真实的作业、考试和提问场景进行了深度优化,让它能够真正解决中国学生在实际学习中遇到的真实问题,成为更有温度的数字化助手。

开源TTS:支持14 种语言,3秒克隆原声,跨语种不再有口音

此次与多模态模型一同开源的还有语音合成(TTS)引擎 ,该引擎基于前沿的“语音编码器 + LLM”架构打造,面向开发者及内容创作者提供零样本、低门槛的语音克隆与情感合成能力。

目前,它已全面支持中文、英语、日语、韩语、德语、法语、西班牙语、印尼语、意大利语、泰语、葡萄牙语、俄语、马来语及越南语共 14 种语言。系统可支持不同语言间同一说话者音色的自然迁移,无需额外训练即可保持音色一致性,且合成结果具备母语级别的自然度与流畅度,跨语种克隆也没有口音泄露问题。

在声音克隆方面,子曰4实现了“上传即可克隆”的全量支持能力,用户仅需提供任意音频素材,系统即可在三秒内完成原声复制。据介绍,该引擎在克隆任务中的准确度超过 97%,克隆音色与原声的相似度达 85% 以上。在保留说话人独特音色的同时,还可精准还原其情感色彩,综合能力达到该领域第一梯队。

此外,该开源模型在真实多语言场景中展现出较好的稳健性,可应对日常对话、新闻播报、企业宣传等不同语境及复杂情感表达等多种合成需求。

翻译模型质量全面升级,推理速度提升80%

作为有道最为深厚的技术资产,翻译模型在本次升级中也迎来了重要的技术升级,使其在翻译任务中表现进一步提升。

在数据层面,子曰团队收集并清洗了上亿级别的多语言数据,并聘请具有专八认证的专业人员进行多维度人工评估,从源头保证语料的高品质。

在算法层面,模型采用了创新的“多专家 OPD ”模式,用一种更聪明的“软方式”博采众长,同时通过强化学习引入格式奖励和语言检测机制,有效解决了机翻常见的脱靶和语种混出问题。

为了应对高频、高并发的产业级应用,升级后的翻译模型配备了高效的加速机制,使得整体推理速度直接飙升80%。配合大模型自动评测与人工随机抽检相结合的定制化方案,新一代翻译模型在文本、图片和文档翻译等多场景下,都展现出了兼具速度与质量的极高水准。

回望有道在AI领域的探索历程,从最初子曰以首个教育垂直大模型姿态亮相、推出颠覆传统口语练习模式的“虚拟人口语教练Hi Echo”,到“子曰”2.0、3.0版本在软硬件生态中的全面扎根,有道始终走在 AI 赋能场景的最前沿。2026年,有道更是按下了应用落地的加速键,陆续发布了LobsterAI、有道宝库、有道同传Agent、Thinkflow等一系列AI Agent产品,实现了全场景 AI Agent 矩阵的前瞻性布局。

“子曰4” 的升级与核心模型全量开源,不仅大幅降低了开发者在多模态与语音合成领域的应用门槛,也向行业展示了以底层核心技术滋养上层 Agent 矩阵的生态闭环。有道希望,随着全球开发者与开源社区的共同注入,这一套全模态大模型生态将在更广泛的产业中激发出真正的生产力变革。

附开源地址:

  • “子曰4”多模态模型:https://huggingface.co/netease-youdao/Confucius4
  • “子曰4“TTS模型:https://github.com/netease-youdao/Confucius4-TTS

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
12分钟、18楼、2岁男童坠亡:遛狗为什么不带着孩子?

12分钟、18楼、2岁男童坠亡:遛狗为什么不带着孩子?

新民周刊
2026-10-22 16:21:28
谈判结束,乌克兰作出重大让步,普京感谢特朗普,英法德意选边站

谈判结束,乌克兰作出重大让步,普京感谢特朗普,英法德意选边站

阿腩讲娱乐
2026-10-22 07:41:13
俄乌冲突,事情正在起变化 | 京酿馆

俄乌冲突,事情正在起变化 | 京酿馆

新京报
2026-10-22 13:35:23
江青机要秘书杨银禄晚年坦言:不管外界怎么说,有件事我一直感谢江青,做人讲求实在

江青机要秘书杨银禄晚年坦言:不管外界怎么说,有件事我一直感谢江青,做人讲求实在

磊子讲史
2026-10-22 16:54:01
四川发展(控股)有限责任公司派驻出资企业专职董事朱全芳接受审查调查

四川发展(控股)有限责任公司派驻出资企业专职董事朱全芳接受审查调查

界面新闻
2026-10-22 16:38:11
“盒马的熟食铲怎么像猫砂铲?” 洛阳一消费者发帖后,盒马更换了厨具

“盒马的熟食铲怎么像猫砂铲?” 洛阳一消费者发帖后,盒马更换了厨具

信网
2026-10-21 17:43:06
旭日旗进境外课堂,陈宇昕家境曝光,南京方面如何回应?

旭日旗进境外课堂,陈宇昕家境曝光,南京方面如何回应?

平老师666
2026-10-21 21:14:14
持续布局!事关中央重大战略部署,重要推进会先后在北京、上海、广州、成都、武汉召开

持续布局!事关中央重大战略部署,重要推进会先后在北京、上海、广州、成都、武汉召开

政知新媒体
2026-10-22 20:40:57
1、日本发动机,寿命约55万公里;2、德国发动机,寿命约35万公里;

1、日本发动机,寿命约55万公里;2、德国发动机,寿命约35万公里;

回京历史梦
2026-10-21 09:44:43
严查!中央开始对机关事业单位大整顿!这几类人要倒霉了

严查!中央开始对机关事业单位大整顿!这几类人要倒霉了

细说职场
2026-10-22 10:04:29
乒乓球亚锦赛国乒男团逆转晋级决赛,林诗栋独砍2分;日本男团不敌韩国队,张本智和单局0比11惨败,松岛辉空遭零封

乒乓球亚锦赛国乒男团逆转晋级决赛,林诗栋独砍2分;日本男团不敌韩国队,张本智和单局0比11惨败,松岛辉空遭零封

极目新闻
2026-10-22 16:16:13
快讯!泽连斯基同意放弃25%领土和谈,默茨公开表态:乌克兰无条件投降绝不可行,那将等同于欧洲盟友集体投降

快讯!泽连斯基同意放弃25%领土和谈,默茨公开表态:乌克兰无条件投降绝不可行,那将等同于欧洲盟友集体投降

林杰论事
2026-10-22 13:27:43
班凯罗你太狠了,首秀就创造80年NBA独一无二纪录,2.3亿真不贵

班凯罗你太狠了,首秀就创造80年NBA独一无二纪录,2.3亿真不贵

大西体育
2026-10-22 11:38:05
A股三大指数收跌,沪指失守3700点,医疗美容行业上涨1.71%!

A股三大指数收跌,沪指失守3700点,医疗美容行业上涨1.71%!

终南听雨
2026-10-22 21:15:46
宁德时代暴跌10000亿,股民天要塌了

宁德时代暴跌10000亿,股民天要塌了

新行情
2026-10-22 14:19:20
一个利空,引发全球“黑色星期四”

一个利空,引发全球“黑色星期四”

中国基金报
2026-10-22 16:04:54
一女孩在F4演唱会因外形酷似大S引热议,本人回应:“长相是自然的,没有去do脸,也没有化仿妆”

一女孩在F4演唱会因外形酷似大S引热议,本人回应:“长相是自然的,没有去do脸,也没有化仿妆”

韩小娱
2026-10-22 07:02:07
难怪都想当公务员,大V:山东三线城市公务员一辈子能拿到1000万收入

难怪都想当公务员,大V:山东三线城市公务员一辈子能拿到1000万收入

老郭在学习
2026-10-22 13:33:24
父亲去世留下18万存款取不出,浙江男子办手续时多出一个查无此人的“姐姐”;调查发现养女竟是亲生,母亲道出实情

父亲去世留下18万存款取不出,浙江男子办手续时多出一个查无此人的“姐姐”;调查发现养女竟是亲生,母亲道出实情

极目新闻
2026-10-22 15:07:25
女子在社交平台上收到陌生私信,对方称“有急事”,加完微信后只回复了一个字,账号就因遭大量恶意举报被封,对方扬言:打钱就放过你

女子在社交平台上收到陌生私信,对方称“有急事”,加完微信后只回复了一个字,账号就因遭大量恶意举报被封,对方扬言:打钱就放过你

扬子晚报
2026-10-22 12:50:48
2026-10-22 23:03:00
CSDN incentive-icons
CSDN
成就一亿技术人
27071文章数 242344关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

孙颖莎王曼昱缺阵 国乒女团2-3不敌日本无缘女团金牌

头条要闻

孙颖莎王曼昱缺阵 国乒女团2-3不敌日本无缘女团金牌

体育要闻

卢卡:伦德伯格,欢迎来到NBA

娱乐要闻

芭莎盛典,张小斐因救场实现口碑暴涨

财经要闻

宁德,跌成了一只红利股?

汽车要闻

搭城市NOA/续航555KM 捷达M6上市售7.98万起

态度原创

数码
艺术
本地
公开课
军事航空

数码要闻

AMD为下一代Medusa APU提前铺路,HIP-RT 3.2.0新增三款GPU目标

艺术要闻

赵无极 80岁画的《紫气东来》,1667.5万!

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

泽连斯基"愿以领土换和平协议" 普京表态

无障碍浏览 进入关怀版