网易首页 > 网易号 > 正文 申请入驻

苹果新研究:纯中文推理训练,和用英文几乎没有差距

0
分享至


新智元报道


最近,Apple 联合 Hasso Plattner 研究所发表论文,在 9 个基座模型、11 种语言上做了超过 200 组 GRPO 强化学习推理训练实验。


https://arxiv.org/pdf/2608.13698

结果显示,用中文做推理训练,与英语训练的性能差距只有 1.1 个百分点,此前同类研究报告的差距是 10 个百分点以上。

GRPO 训练有一个关键设计选择:奖励模型用英语推理,还是用提问者的母语推理。

选英语,模型收到中文问题也会切到英语思考;选母语,模型全程用中文。

此前研究认为母语推理性能代价太大,非英语团队只能默认走英语推理路线。

这篇论文说,代价远没有那么大——对中文来说只有 1 个百分点。这直接改变了路线判断:中文推理模型有条件从训练阶段就跳过英语,走自己的路。

对中文 AI 从业者来说,这是推理模型能否走独立路线的前置条件。

论文同时发现,跨语言迁移广泛有效,但特定模型-语言组合会触发极端性能塌方。

200 组实验回答一个问题:
推理必须用英语吗

此前多项研究报告,强制模型用非英语语言做推理,准确率会下降 10 个百分点甚至更多,「推理必须用英语」几乎成了多语言 AI 领域的默认共识。

Dobler 等人的新论文用大规模对照实验动摇了这条共识:三个模型家族(Qwen3、Gemma 3、SmolLM3),参数规模 1B 到 8B,11 种训练语言,每种语言分别用英语推理奖励和母语推理奖励两套方案训练 500 步,再交叉评估。

结论的关键数字按语言拆开看更清楚。

中文训练的英语优势只有 1.1 个百分点,法语 1.4、德语 1.7、日语 1.6——高资源语言(指语料丰富的语言)普遍在 2 个百分点以内。

差距拉大的是低资源语言:孟加拉语 5.7、泰卢固语 4.6、斯瓦希里语 4.5 个百分点。


语言本身在预训练阶段积累的资源厚度,直接决定了母语推理训练的性价比。

一种语言训练,多种语言受益

实验中另一个值得拆开看的数据结构,是跨语言迁移矩阵。

论文把 11 种语言分别做单语训练,再在所有 14 种语言上评估,形成一张 11×14 的性能表。

这张表里最直观的信息是:用一种语言训练 GRPO,其他语言几乎都跟着涨。

西班牙语单语训练之后,法语的性能恢复了目标语言直接训练增益的 96%,只差 1 个百分点。中文和日语之间的互相迁移同样明显,中日同属 CJK 语系的预训练共享可能在起作用。

一个反直觉的发现是:英语并不总是最好的迁移源。

在 Qwen3-4B-Base 和 Qwen3-8B 上,孟加拉语训练对中文的迁移效果反而最好。

论文作者推测,低资源语言的训练迫使模型更深层地重组推理能力,这种重组带来的泛化有时比高资源语言训练更强。

多语言混合训练的表现也值得关注。

Qwen3-Base 系列在多语言训练下,与「为每种评估语言分别挑选最优迁移源」的理想方案相比,平均只差 0.3 个百分点,而只需要训练一个模型。

对于资源有限的团队,这提供了一条务实的路径:不必为每种目标语言单独跑训练。

也存在性能崩塌的情况

跨语言迁移的好消息,被一种特定的失败模式冲淡了。

论文发现,某些模型-训练语言的组合会导致其他语言或任务类型上的极端回退,而同一个模型换一种训练语言就完全没有这个问题。

最严重的案例出在 Qwen3 系列非 Base 模型上。

用斯瓦希里语或泰卢固语训练后,这些模型在含英语内容的未见任务上出现了高达 19.2 个百分点的性能崩塌(Qwen3-4B 斯瓦希里语训练),而在训练语言本身上性能正常甚至提升。

换成英语或多语言训练,同一批任务的性能保持稳定。

困难数学任务上的回退更普遍。

Qwen3 非 Base 系列、SmolLM3-3B 在非英语单语训练后,PolyMath 中高难度题目的平均分大面积下滑,部分配置跌幅超过 30 个百分点。


但同模型在其他任务上表现正常,回退高度集中在特定任务族。

推理奖励语言本身也能触发塌方。

gemma-3-1b-it 用斯瓦希里语数据加母语推理奖励训练后,简单数学任务(MGSM 和 PolyMath-low)的性能比原始模型下降 3.1 个百分点;

但同样的数据搭配英语推理奖励,性能反而提升 17.5 个百分点。

差距超过 20 个百分点,且在同模型的孟加拉语训练中不会出现。

回退无法从模型或语言中单独预测,只有在特定组合下才会暴露。

中文之外
所有非英语生态都在问同一个问题

回到中文从业者最关心的判断——中文推理训练到底能不能用。

从这篇论文的数据看,答案接近「能用」。

中文在所有被测语言中属于差距最小的一档(1.1 个百分点),Qwen3-Base 全系列模型的中文推理奖励训练都能有效控制推理语言,跨语言迁移中中文既是好的接收方也是好的发送方。

这组结果在 9 个模型上一致,不是孤例。

但这个结论的适用范围需要明确:论文测的是 8B 以下的开源模型,任务是程序化生成的数学和逻辑题,单种子实验,没有做逐配置的超参调优。真实部署场景中的表现还需要单独验证。

把视野从中文放宽一步,这篇论文给出的信号对整个非英语 AI 生态都有意义。

过去一年,从阿拉伯语到法语到日语,各语言社区都在问同一个问题:推理训练是否必须绕道英语?

如果答案是「必须」,那非英语模型永远在英语模型的下游做适配;

如果答案是「差距可控」,非英语生态就有可能从推理训练阶段就走自己的路线。

这篇论文把「差距可控」从猜测变成了有数据支撑的判断——至少在高资源语言和中小模型上如此。

差距压缩到 1–2 个百分点之后,从 RLVR 训练阶段就用目标语言跑,就变成一个合理的工程选择,性能代价可以接受。

对中文 AI 来说,中文推理模型有可能从训练源头就走独立路线,跳过英语推理模型的翻译适配层。

但论文同时证明了一件事:「可控」和「安全上线」之间差的是评估覆盖度。

只看目标语言的平均分,回退藏在暗处;逐语言、逐任务、逐模型排查,才能把风险暴露在上线之前。

这 200 组实验最大的贡献,恰恰是证明了这种排查不可省略。

参考资料:https://arxiv.org/pdf/2608.13698

编辑:马可

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1.25亿欧买入!23岁维尔茨在英伦丢了魂:场均丢球权18次 评分5.9

1.25亿欧买入!23岁维尔茨在英伦丢了魂:场均丢球权18次 评分5.9

风过乡
2026-09-05 14:13:34
袁腾飞移民美国的几个细节问题

袁腾飞移民美国的几个细节问题

十柱
2026-09-05 10:15:57
63:54!世界杯D组乱套,中国女篮最大对手仅险胜,输球=小组出局

63:54!世界杯D组乱套,中国女篮最大对手仅险胜,输球=小组出局

稗官青史
2026-09-05 06:01:17
江西女孩因去香港看演唱会被取消低保,去之前曾被明确告知仍执意前往,家人哭喊天塌了

江西女孩因去香港看演唱会被取消低保,去之前曾被明确告知仍执意前往,家人哭喊天塌了

Mr王的饭后茶
2026-09-04 15:17:08
女子怀孕5个多月产下巴掌大宝宝,仅330克,肠道细如发丝、免疫系统几乎没建立,经过105天救治平安出院

女子怀孕5个多月产下巴掌大宝宝,仅330克,肠道细如发丝、免疫系统几乎没建立,经过105天救治平安出院

大风新闻
2026-09-05 14:37:19
闹大了!49岁高管在上海长海医院试药后当天昏迷,50天后离世,家属讨说法被骂“滚开”

闹大了!49岁高管在上海长海医院试药后当天昏迷,50天后离世,家属讨说法被骂“滚开”

子非鱼人
2026-09-05 00:14:07
葫芦娃爷爷说30天后要拆掉葫芦:“天太冷了,葫芦娃也怕冷,当作自己的孩子一样 ”,即便网友不来了,他们也会好好生活

葫芦娃爷爷说30天后要拆掉葫芦:“天太冷了,葫芦娃也怕冷,当作自己的孩子一样 ”,即便网友不来了,他们也会好好生活

大风新闻
2026-09-05 14:58:03
我空降到老婆公司当总裁,开会时坐在她旁边,她男助理竟一脚踹开我的椅子:这是我的位置,你滚开,老婆当场傻眼了

我空降到老婆公司当总裁,开会时坐在她旁边,她男助理竟一脚踹开我的椅子:这是我的位置,你滚开,老婆当场傻眼了

晓艾故事汇
2026-09-04 08:32:39
中国还会出现第2个毛主席吗?外国专家曾说:天才出现具有偶然性

中国还会出现第2个毛主席吗?外国专家曾说:天才出现具有偶然性

乌克兰小静
2026-09-05 08:10:07
香港又现大学迎新色情乱象震动全港!大庭广众下赤膊男子公主抱着Bra女玩过火,校方严厉表态“不能容忍”,涉事干事会已经宣布解散!

香港又现大学迎新色情乱象震动全港!大庭广众下赤膊男子公主抱着Bra女玩过火,校方严厉表态“不能容忍”,涉事干事会已经宣布解散!

澳门月刊
2026-09-04 09:04:05
李嘉诚最新预判:未来10年,中国50%家庭或将面临五大挑战,你准备好了吗?

李嘉诚最新预判:未来10年,中国50%家庭或将面临五大挑战,你准备好了吗?

巢客HOME
2026-09-05 05:45:04
超市4块5的椰汁,倒进杯子就卖50!上海和平饭店回应:可乐雪碧也这价,自带酒水每瓶收300

超市4块5的椰汁,倒进杯子就卖50!上海和平饭店回应:可乐雪碧也这价,自带酒水每瓶收300

听心堂
2026-09-05 08:47:35
美媒称张子宇很难适应WNBA强度:她的惨叫声仿佛手臂遭到砍击一般

美媒称张子宇很难适应WNBA强度:她的惨叫声仿佛手臂遭到砍击一般

杨华评论
2026-09-05 01:40:34
斯维托丽娜脸色铁青!俄乌战争后首次在大满贯输俄罗斯人 仍拒握手

斯维托丽娜脸色铁青!俄乌战争后首次在大满贯输俄罗斯人 仍拒握手

风过乡
2026-09-05 13:06:17
65岁刘德华登新闻联播冲上热搜:四十载沉淀,影协副主席职位加身

65岁刘德华登新闻联播冲上热搜:四十载沉淀,影协副主席职位加身

行者聊官
2026-09-04 17:29:47
新京报这则删除的新闻,太魔幻了

新京报这则删除的新闻,太魔幻了

林中木白
2026-09-04 17:54:32
武汉大学杰出教授是怎么堕落的!

武汉大学杰出教授是怎么堕落的!

爆角追踪
2026-09-04 21:00:55
福建福鼎暴雨过后,街道上淤泥和杂物堆积,白茶重镇损失严重满街都是被水泡的茶叶

福建福鼎暴雨过后,街道上淤泥和杂物堆积,白茶重镇损失严重满街都是被水泡的茶叶

Mr王的饭后茶
2026-09-04 18:00:33
韩媒放狠话!汉字并非中国独有,它是亚洲瑰宝,韩国也将实施全民汉字教育

韩媒放狠话!汉字并非中国独有,它是亚洲瑰宝,韩国也将实施全民汉字教育

小徐讲八卦
2026-09-04 13:48:19
河南一男子创业负债105万曾两次想轻生,学习胖东来理念将利润的50%分给员工后还清外债,购入30万新车想回馈胖东来

河南一男子创业负债105万曾两次想轻生,学习胖东来理念将利润的50%分给员工后还清外债,购入30万新车想回馈胖东来

潇湘晨报
2026-09-04 12:59:10
2026-09-05 17:11:00
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
16111文章数 67034关注度
往期回顾 全部

教育要闻

汤家凤呼吁取消英语主科地位,网友吵翻了天,你是否支持呢?

头条要闻

兰州榆中通报"莴笋收购环节染色":立案查处6家企业

头条要闻

兰州榆中通报"莴笋收购环节染色":立案查处6家企业

体育要闻

小卡来去10首轮,快船7年彩礼一场空

娱乐要闻

她曾被名导抛弃,凭《生逢其时》翻红

财经要闻

姚洋:刺激消费要守住两个“大西瓜”

科技要闻

华为何庭波,再次更新韬定律论文

汽车要闻

全新第四代博越Li‑HEV系列 怎么开都省

态度原创

健康
家居
艺术
亲子
手机

脑梗取栓成功≠活下来,还有这三关

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

20幅美女油画,来自9位当代画家!

亲子要闻

鸡娃不如鸡自己!经济学信号和原因 #教育孩子 #科普新锐扶持计划

手机要闻

苹果折叠屏名称悬念揭晓 网传命名iPhone Duo

无障碍浏览 进入关怀版