网易首页 > 网易号 > 正文 申请入驻

双榜第一!网易两款模型力压 OpenAI、谷歌,登顶Hugging Face

0
分享至

网易在全球 AI 开源社区交出重磅成果。近日,网易有道开源的子曰 Live 系列两款模型 —— 真流式语音识别模型 Confucius4‑R2T2、流式翻译模型Confucius4‑T3PO,先后登顶全球 AI 开源社区 Hugging Face 语音识别(ASR)、机器翻译两大细分 Trending 热榜,实现国产实时 AI 模型 “双登顶”。

在两个榜单中,OpenAI Whisper、Google、Meta等全球科技公司的相关模型也同时在列。网易此次连续拿下两个细分榜第一,也让中国团队在实时语音AI方向受到全球开发者集中关注。



图注:语音识别Trending榜,R2T2登顶(左);翻译Trending榜,T3PO登顶(右)

双榜登顶:全球开发者深度参与模型适配

登顶之后,网易两款开源模型很快获得开发者社区进一步响应。截至9月30日,Hugging Face页面显示,R2T2主模型近30天下载量超过1万次,T3PO主模型超过1300次;据相关数据统计,R2T2、T3PO及其官方GGUF版本近30天累计下载量已超过3万次。

开源之后,全球开发者不再只是简单下载模型权重,而是投入力量开展工程化适配。R2T2发布后,Hugging Face 官方主动搭建ZeroGPU在线Demo,提供免费算力降低测试门槛。海外开发者在纯C++音频推理框架audio.cpp 完成原生适配,不仅重新实现了Longest Stable Prefix流式状态机和稳定文本提交机制,还加入GGUF、本地实时麦克风识别和Streaming API等能力。



图注:Hugging Face上的ZeroGPU在线Demo

T3PO同样完成多档位GGUF量化适配,让140亿参数级实时翻译模型具备端侧部署条件。从在线体验、模型量化到原生Runtime适配,两款模型正在从Hugging Face上的开源模型,进一步进入开发者的实际开发工具链。

直击 Voice Agent 痛点:一套链路实现 “边说边听边译”

两款模型能够快速出圈,核心解决了实时语音交互领域两大技术难题。

R2T2 瞄准传统流式识别 “输出文字反复改写” 的行业顽疾。多数伪流式识别会随着后续音频修改已输出内容,普通字幕仅会出现文字闪烁,但对于需要执行指令的语音智能体,识别结果来回变动会造成大模型意图判断、工具调用出错。

依托最长稳定前缀机制,R2T2做到输出文本只增不改、落子无悔:模型判断音频信息足够可靠才提交结果,支持 80毫秒‑2 秒灵活流式输入。官方测试显示,R2T2 在保持接近离线 ASR 准确率的同时,平均识别延迟(平均说完每个字到识别出这个字的时间)约为 200 至 600 毫秒。

进一步的公开评测显示,在多个中英文测试集上,R2T2 相较 WhisperRT、Nemotron、Voxtral 等同类方案,在低延迟条件下保持了更优或具有竞争力的识别表现。这意味着,模型并非单纯追求 “更快出字”,而是在响应速度、识别准确率和输出稳定性之间取得平衡,也让下游大模型能够在用户尚未说完话时,提前获得稳定文本并开展后续处理。



图注:英文测试集质量和延迟结果对比 来源:github



图注:中文测试集质量和延迟结果对比 来源:github

T3PO则进一步解决实时翻译中“速度与质量”的平衡问题。模型将实时翻译建模为持续的READ/WRITE决策:当上下文信息不足时继续等待,当信息已经足够时立即输出译文,并通过Pareto-aware Policy Optimization(帕累托策略优化)同时优化翻译质量与等待延迟,在低延迟下接近离线翻译的效果,译文同样不回溯改写。

当R2T2与T3PO串联后,一条完整的实时翻译链路由此形成:语音持续进入R2T2,生成稳定增量文本;T3PO再基于这些文本持续判断并输出译文。AI语音交互也由传统的“说完—识别—翻译”,进一步向“边说—边听—边理解—边翻译”演进。

补齐实时 AI 技术底座,国产方案走向全球开源生态

此次双登顶,是网易有道 “子曰” 大模型矩阵持续迭代的重要里程碑。从2023年国内首个教育大模型发布开始,有道已经搭建起包含多模态推理、语音生成、实时识别、流式翻译的完整能力矩阵,打通 “说、听、理解、翻译” 全链条。

此次R2T2与T3PO分别补充实时语音识别和流式翻译能力,并通过开源进一步进入全球开发者生态。相关能力可应用于实时字幕、会议同传、直播翻译、AI客服和Voice Agent等场景。

行业普遍认为,AI正在从对话问答走向可感知、可执行任务的Voice Agent,稳定低时延的流式语音,正是智能体对接现实世界的关键底座。此次网易两款模型登顶Hugging Face,并获得全球开发者持续下载和工程适配,意味着网易实时AI技术正进一步进入全球开发者工具链和实际应用场景,也让中国团队更深地参与全球AI开源生态建设。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
哈工大翻墙举报事件,恶的不是那个举报的女生

哈工大翻墙举报事件,恶的不是那个举报的女生

吴女士
2026-10-01 12:51:07
最新反转!让空姐跪下道歉的男子彻底“社死”,东航的态度很明确

最新反转!让空姐跪下道歉的男子彻底“社死”,东航的态度很明确

易昂杨
2026-10-01 10:51:07
反转?亚运冠军成绩遭取消!疑日本选手举报,中国对喜提递补拿金

反转?亚运冠军成绩遭取消!疑日本选手举报,中国对喜提递补拿金

离离言几许
2026-10-01 21:31:22
中国柔道名将亚运会被罚下判负!咬对手手臂20秒不松口 牙印曝光

中国柔道名将亚运会被罚下判负!咬对手手臂20秒不松口 牙印曝光

念洲
2026-10-01 20:55:42
突发!原来他俩已离婚,如今一个终生未再娶,一个嫁同行不再丁克生儿子!

突发!原来他俩已离婚,如今一个终生未再娶,一个嫁同行不再丁克生儿子!

财经要参
2026-10-01 16:00:10
国家队生涯结束?41岁C罗宣布离开葡萄牙队集训营:会适时公布真相

国家队生涯结束?41岁C罗宣布离开葡萄牙队集训营:会适时公布真相

我爱英超
2026-10-01 06:43:10
演员闫妮坦言自己一直单身:不介意相亲,“有人给我介绍50多岁男子,我说太老了吧,忘了自己也50多”,透露与前夫仍是朋友,还一起打掼蛋

演员闫妮坦言自己一直单身:不介意相亲,“有人给我介绍50多岁男子,我说太老了吧,忘了自己也50多”,透露与前夫仍是朋友,还一起打掼蛋

极目新闻
2026-10-01 08:54:25
亚运10月1号赛况:韩国揽6金日本获5金,中国队拿到2金,金牌榜闹乌龙

亚运10月1号赛况:韩国揽6金日本获5金,中国队拿到2金,金牌榜闹乌龙

我是盲流
2026-10-01 19:43:14
昨晚上我确实憋不住,趁着孩子睡熟了,把老婆拉到阳台关上推拉门。我压低声音说,你弟这都住20天了,车钥匙是不是该要回来了

昨晚上我确实憋不住,趁着孩子睡熟了,把老婆拉到阳台关上推拉门。我压低声音说,你弟这都住20天了,车钥匙是不是该要回来了

百晓史
2026-09-28 08:13:50
沉默一周后,一架美军运输机突降深圳,来要回F-35战机的零部件?

沉默一周后,一架美军运输机突降深圳,来要回F-35战机的零部件?

影孖看世界
2026-10-01 22:44:24
连磕一年头后,日本僧将开启12年闭关!全程断网断联,出来就2038年了...

连磕一年头后,日本僧将开启12年闭关!全程断网断联,出来就2038年了...

英国那些事儿
2026-10-01 01:38:40
迪拜航空客机上唯一医护乘客披露救治细节:印度籍机长“手部几乎被切断”

迪拜航空客机上唯一医护乘客披露救治细节:印度籍机长“手部几乎被切断”

澎湃新闻
2026-10-01 16:30:27
离职高管向寒武纪索赔278亿元:一纸上市前的约定,如何变成一场豪赌

离职高管向寒武纪索赔278亿元:一纸上市前的约定,如何变成一场豪赌

红星新闻
2026-10-01 18:14:23
啪啪多久女生才能爽到腿软?

啪啪多久女生才能爽到腿软?

来看美剧
2026-10-01 22:04:35
普京:俄罗斯不会像某些国家那样奔走世界各地,伸手卑躬屈膝地乞求施舍!泽连斯基呼吁美欧落实对俄制裁

普京:俄罗斯不会像某些国家那样奔走世界各地,伸手卑躬屈膝地乞求施舍!泽连斯基呼吁美欧落实对俄制裁

每日经济新闻
2026-10-01 10:34:54
深圳网友称高铁候补订单0:38兑现成功,早上睡醒发现车已开走,12306回应:候补时可设置截止兑现时间,系统默认截止兑现时间为开车前6小时

深圳网友称高铁候补订单0:38兑现成功,早上睡醒发现车已开走,12306回应:候补时可设置截止兑现时间,系统默认截止兑现时间为开车前6小时

潇湘晨报
2026-10-01 10:53:13
俄罗斯黑科技降临,基辅紧急停电,泽连斯基前秘书:大逃亡开始了

俄罗斯黑科技降临,基辅紧急停电,泽连斯基前秘书:大逃亡开始了

一口娱乐
2026-10-02 00:45:17
亚运会争议判罚!中国柔道运动员误咬伤日本选手,被裁判直接判负

亚运会争议判罚!中国柔道运动员误咬伤日本选手,被裁判直接判负

全景体育V
2026-10-01 18:42:29
刘国梁,为什么极尽资源培养王楚钦

刘国梁,为什么极尽资源培养王楚钦

中场阴谋家
2026-10-01 22:14:29
用发霉陈馅做月饼,还反咬记者"别有用心",这家老字号玩死了全行业

用发霉陈馅做月饼,还反咬记者"别有用心",这家老字号玩死了全行业

西虹市闲话
2026-10-01 14:11:25
2026-10-02 04:16:49
网易 incentive-icons
网易
网聚人的力量
63文章数 12774关注度
往期回顾 全部

科技要闻

5999元起!华为Mate 90系列发布

头条要闻

桂林市文促会深夜发布致歉信:向阿丘诚恳致歉

头条要闻

桂林市文促会深夜发布致歉信:向阿丘诚恳致歉

体育要闻

“今天的表现,我们可以昂首离开球场”

娱乐要闻

奚梦瑶晒四太豪礼!22只龙凤镯近300万

财经要闻

智谱发上亿Token 能挽回开发者信任吗?

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

时尚
本地
手机
艺术
亲子

在米兰,用时装唤醒内心的自我

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

手机要闻

瑞银:iPhone18Pro系列等待期表现平平予苹果“中性”评级

艺术要闻

他历尽苦难,却画出最令人心碎的女人!艾斯特凡笔下的女性,美到不敢直视!

亲子要闻

重新拥抱亲密:产后妈妈的温柔复兴之路

无障碍浏览 进入关怀版