网易首页 > 网易号 > 正文 申请入驻

苹果新研究:纯中文推理训练,和用英文几乎没有差距

0
分享至


新智元报道


最近,Apple 联合 Hasso Plattner 研究所发表论文,在 9 个基座模型、11 种语言上做了超过 200 组 GRPO 强化学习推理训练实验。


https://arxiv.org/pdf/2608.13698

结果显示,用中文做推理训练,与英语训练的性能差距只有 1.1 个百分点,此前同类研究报告的差距是 10 个百分点以上。

GRPO 训练有一个关键设计选择:奖励模型用英语推理,还是用提问者的母语推理。

选英语,模型收到中文问题也会切到英语思考;选母语,模型全程用中文。

此前研究认为母语推理性能代价太大,非英语团队只能默认走英语推理路线。

这篇论文说,代价远没有那么大——对中文来说只有 1 个百分点。这直接改变了路线判断:中文推理模型有条件从训练阶段就跳过英语,走自己的路。

对中文 AI 从业者来说,这是推理模型能否走独立路线的前置条件。

论文同时发现,跨语言迁移广泛有效,但特定模型-语言组合会触发极端性能塌方。

200 组实验回答一个问题:
推理必须用英语吗

此前多项研究报告,强制模型用非英语语言做推理,准确率会下降 10 个百分点甚至更多,「推理必须用英语」几乎成了多语言 AI 领域的默认共识。

Dobler 等人的新论文用大规模对照实验动摇了这条共识:三个模型家族(Qwen3、Gemma 3、SmolLM3),参数规模 1B 到 8B,11 种训练语言,每种语言分别用英语推理奖励和母语推理奖励两套方案训练 500 步,再交叉评估。

结论的关键数字按语言拆开看更清楚。

中文训练的英语优势只有 1.1 个百分点,法语 1.4、德语 1.7、日语 1.6——高资源语言(指语料丰富的语言)普遍在 2 个百分点以内。

差距拉大的是低资源语言:孟加拉语 5.7、泰卢固语 4.6、斯瓦希里语 4.5 个百分点。


语言本身在预训练阶段积累的资源厚度,直接决定了母语推理训练的性价比。

一种语言训练,多种语言受益

实验中另一个值得拆开看的数据结构,是跨语言迁移矩阵。

论文把 11 种语言分别做单语训练,再在所有 14 种语言上评估,形成一张 11×14 的性能表。

这张表里最直观的信息是:用一种语言训练 GRPO,其他语言几乎都跟着涨。

西班牙语单语训练之后,法语的性能恢复了目标语言直接训练增益的 96%,只差 1 个百分点。中文和日语之间的互相迁移同样明显,中日同属 CJK 语系的预训练共享可能在起作用。

一个反直觉的发现是:英语并不总是最好的迁移源。

在 Qwen3-4B-Base 和 Qwen3-8B 上,孟加拉语训练对中文的迁移效果反而最好。

论文作者推测,低资源语言的训练迫使模型更深层地重组推理能力,这种重组带来的泛化有时比高资源语言训练更强。

多语言混合训练的表现也值得关注。

Qwen3-Base 系列在多语言训练下,与「为每种评估语言分别挑选最优迁移源」的理想方案相比,平均只差 0.3 个百分点,而只需要训练一个模型。

对于资源有限的团队,这提供了一条务实的路径:不必为每种目标语言单独跑训练。

也存在性能崩塌的情况

跨语言迁移的好消息,被一种特定的失败模式冲淡了。

论文发现,某些模型-训练语言的组合会导致其他语言或任务类型上的极端回退,而同一个模型换一种训练语言就完全没有这个问题。

最严重的案例出在 Qwen3 系列非 Base 模型上。

用斯瓦希里语或泰卢固语训练后,这些模型在含英语内容的未见任务上出现了高达 19.2 个百分点的性能崩塌(Qwen3-4B 斯瓦希里语训练),而在训练语言本身上性能正常甚至提升。

换成英语或多语言训练,同一批任务的性能保持稳定。

困难数学任务上的回退更普遍。

Qwen3 非 Base 系列、SmolLM3-3B 在非英语单语训练后,PolyMath 中高难度题目的平均分大面积下滑,部分配置跌幅超过 30 个百分点。


但同模型在其他任务上表现正常,回退高度集中在特定任务族。

推理奖励语言本身也能触发塌方。

gemma-3-1b-it 用斯瓦希里语数据加母语推理奖励训练后,简单数学任务(MGSM 和 PolyMath-low)的性能比原始模型下降 3.1 个百分点;

但同样的数据搭配英语推理奖励,性能反而提升 17.5 个百分点。

差距超过 20 个百分点,且在同模型的孟加拉语训练中不会出现。

回退无法从模型或语言中单独预测,只有在特定组合下才会暴露。

中文之外
所有非英语生态都在问同一个问题

回到中文从业者最关心的判断——中文推理训练到底能不能用。

从这篇论文的数据看,答案接近「能用」。

中文在所有被测语言中属于差距最小的一档(1.1 个百分点),Qwen3-Base 全系列模型的中文推理奖励训练都能有效控制推理语言,跨语言迁移中中文既是好的接收方也是好的发送方。

这组结果在 9 个模型上一致,不是孤例。

但这个结论的适用范围需要明确:论文测的是 8B 以下的开源模型,任务是程序化生成的数学和逻辑题,单种子实验,没有做逐配置的超参调优。真实部署场景中的表现还需要单独验证。

把视野从中文放宽一步,这篇论文给出的信号对整个非英语 AI 生态都有意义。

过去一年,从阿拉伯语到法语到日语,各语言社区都在问同一个问题:推理训练是否必须绕道英语?

如果答案是「必须」,那非英语模型永远在英语模型的下游做适配;

如果答案是「差距可控」,非英语生态就有可能从推理训练阶段就走自己的路线。

这篇论文把「差距可控」从猜测变成了有数据支撑的判断——至少在高资源语言和中小模型上如此。

差距压缩到 1–2 个百分点之后,从 RLVR 训练阶段就用目标语言跑,就变成一个合理的工程选择,性能代价可以接受。

对中文 AI 来说,中文推理模型有可能从训练源头就走独立路线,跳过英语推理模型的翻译适配层。

但论文同时证明了一件事:「可控」和「安全上线」之间差的是评估覆盖度。

只看目标语言的平均分,回退藏在暗处;逐语言、逐任务、逐模型排查,才能把风险暴露在上线之前。

这 200 组实验最大的贡献,恰恰是证明了这种排查不可省略。

参考资料:https://arxiv.org/pdf/2608.13698

编辑:马可

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
打服外教!广东队迎来“新建队基石”,力保宏远未来10年无忧!

打服外教!广东队迎来“新建队基石”,力保宏远未来10年无忧!

绯雨儿
2026-09-05 14:36:19
俄外长话里有话,劝中方放下恩怨,再不争取印度,就要便宜西方了

俄外长话里有话,劝中方放下恩怨,再不争取印度,就要便宜西方了

共工之锚
2026-09-05 00:35:18
重大伤亡!9月4日,据最新消息披露,伊朗在这一轮与美军的对战中伤亡惨重,同时按伊朗披露的信息,打击美军基地的时候美军同样伤亡惨重

重大伤亡!9月4日,据最新消息披露,伊朗在这一轮与美军的对战中伤亡惨重,同时按伊朗披露的信息,打击美军基地的时候美军同样伤亡惨重

扶苏聊历史
2026-09-05 17:38:16
AC米兰vs尤文图斯时,阿莫林希望防守3人组在对阵尤文图斯时,保持坚不可摧

AC米兰vs尤文图斯时,阿莫林希望防守3人组在对阵尤文图斯时,保持坚不可摧

福酱的小时光
2026-09-05 20:16:24
2家A股公司,宣布终止并购!

2家A股公司,宣布终止并购!

数据宝
2026-09-05 18:20:47
美国“生锈航母”抵达泰国芭提雅,40辆大巴24小时,将5000多美国大兵送往酒店和景点

美国“生锈航母”抵达泰国芭提雅,40辆大巴24小时,将5000多美国大兵送往酒店和景点

蓝星杂谈
2026-09-02 19:30:58
上汽新车官宣:9月10日 ,正式预售

上汽新车官宣:9月10日 ,正式预售

科技堡垒
2026-09-05 10:32:59
从头巾禁令到宪法立法,奥地利正在重新定义移民的规则

从头巾禁令到宪法立法,奥地利正在重新定义移民的规则

南文视界
2026-09-05 07:30:34
凯迪拉克新车官宣:9月7日,正式上市!

凯迪拉克新车官宣:9月7日,正式上市!

科技堡垒
2026-09-04 10:43:30
赶在发布会前!运营商晒iPhone 18 Pro/Ultra售价:苹果这涨幅并不激进

赶在发布会前!运营商晒iPhone 18 Pro/Ultra售价:苹果这涨幅并不激进

快科技
2026-09-05 12:44:35
太夸张!刘传兴32+13大爆发,内线锤爆北京队,可惜无力回天

太夸张!刘传兴32+13大爆发,内线锤爆北京队,可惜无力回天

老嗮说体育
2026-09-05 20:13:55
别再逼娃9点10点睡觉!2026科学结论:宝宝真正黄金入睡点是这个

别再逼娃9点10点睡觉!2026科学结论:宝宝真正黄金入睡点是这个

另子维爱读史
2026-09-03 20:32:19
央视直播美网第三轮时间表:9月5日,CCTV5+直播郑钦文冲击16强

央视直播美网第三轮时间表:9月5日,CCTV5+直播郑钦文冲击16强

薇说体育
2026-09-05 11:26:47
福建土楼景区宣布闭园,“云水谣”600年古榕树被洪水冲倒,土楼管委会:已派工作人员去现场处理,后续将妥善安排

福建土楼景区宣布闭园,“云水谣”600年古榕树被洪水冲倒,土楼管委会:已派工作人员去现场处理,后续将妥善安排

三湘都市报
2026-09-04 00:26:52
罗马诺:切尔西最终决定卖恩佐是因为球员已不想参加队内训练

罗马诺:切尔西最终决定卖恩佐是因为球员已不想参加队内训练

懂球帝
2026-09-05 10:47:33
两届金球奖得主首秀,伦敦城市狮鹫2-1击败曼联

两届金球奖得主首秀,伦敦城市狮鹫2-1击败曼联

薛定谔的BUG
2026-09-05 20:49:07
历史总是惊人地相似!解放台湾,康熙340年前的经验值得镜鉴

历史总是惊人地相似!解放台湾,康熙340年前的经验值得镜鉴

纪史行者
2026-09-04 01:15:03
卷不动了?中国并非消费降级,是14亿人的好日子把市场“喂饱”了

卷不动了?中国并非消费降级,是14亿人的好日子把市场“喂饱”了

笑熬浆糊111
2026-09-05 08:17:24
刚刚, 华男入境澳洲就被抓, 面临终身监禁!

刚刚, 华男入境澳洲就被抓, 面临终身监禁!

澳微Daily
2026-09-05 16:08:08
近乎腰斩!2026秋季,小学入学人数明显下滑

近乎腰斩!2026秋季,小学入学人数明显下滑

史海流年号
2026-09-03 11:49:10
2026-09-05 21:35:00
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
16113文章数 67037关注度
往期回顾 全部

教育要闻

醒醒吧!历史不计分,还能指望老师好好教、学生好好学?

头条要闻

菲副总统莎拉最新发声:我会被杀 我不信任法院、警察

头条要闻

菲副总统莎拉最新发声:我会被杀 我不信任法院、警察

体育要闻

科比和勒布朗:冠军年份的背身

娱乐要闻

她曾被名导抛弃,凭《生逢其时》翻红

财经要闻

被曝试药后死亡,药企董事竟怒怼记者

科技要闻

华为何庭波,再次更新韬定律论文

汽车要闻

全新第四代博越Li‑HEV系列 怎么开都省

态度原创

本地
教育
手机
健康
军事航空

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

教育要闻

代际传递创伤:孩子叛逆是因为妈妈从来没被尊重过

手机要闻

华为Mate XT 2首发硬件级防窥屏:独立RGB像素驱动 不影响显示素质

脑梗取栓成功≠活下来,还有这三关

军事要闻

俄罗斯建"粉碎大日本帝国"纪念碑 日本急了

无障碍浏览 进入关怀版