网易首页 > 网易号 > 正文 申请入驻

美团LongCat-2.5发布:全国产训练、原生多模态、1.6万亿参数

0
分享至

美团 LongCat 发布了新模型 LongCat-2.5,一个面向长程智能体任务的原生多模态模型,3D 质感不错,后面我放了例子

模型总参数 1.6 万亿,激活 480 亿;上下文窗口 1M token,单次最多输出 128K,每百万 token 输入2元(命中缓存 0.04 元)、输出8元

老规矩:本周,你可以在 AGI Bar 免费使用这个 LongCat-2.5 这个模型

从 Benchmark 上看,LongCat-2.5 比以往有着明显提升


和上一代 LongCat-2.0 比,长任务的分数涨得最多(从搭建到调通、独立做完一整个项目这类活)。Terminal Bench v4.0 上,上一代只拿了3.0分,这一代是38.5

LongCat-2.0 LongCat-2.5 Claude Opus 5 Terminal Bench v4.0 在终端里完成整套任务 3.0 Program Bench 从零写出能跑的程序 2.5 AutomationBench 跨软件的办公自动化 15.8 轻触播放 同一套题,LongCat-2.5 的分数是上一代的 3 到 13 倍

LongCat-2.5 具有原生视觉能力,在训练的时候就把图片和文字放在一起训的(图片切成离散 token,和文字 token 排进同一个序列)

对于长任务的强化学习,则是在真实代码环境里,通过真实仓库的 PR 和 issue 来进行训练,也来自 Agent 干活时的失败记录

LongCat-2.5 的训练和推理全程跑在国产 AI 加速卡上,训练单卡吞吐比 DDP 基线高了 86%,推理用 W4A4,吞吐比 W8A8 高了四成多

使用的话,打开 longcat.ai 就能直接对话,本文里的各种小彩蛋均由 longcat 绘制,可以点击猫猫头试试 ⬇️


看图写代码

由于具有视觉能力,写完代码后,LongCat-2.5 会再看一眼效果对不对,以下是一些演示

3D 类的也可以处理,比如这是一棵能转着看的青铜神树,和一个城市沙盘

办公类的任务也没啥大问题,比如丢给它几张经营数据表,它会自己分析完,做成一份带图表的经营分析报告

emmmm...我在每个小标题旁边放了一只猫一定记得戳


效果实测

首先我得说,这个模型对于 3D 渲染的美感效果还是相当不错的。这里我跑了几个 case,给大家看一下:

城市夜景:“做一个夜晚的 3D 城市,上千个外卖订单同时发生,骑手从店铺出发、拖着光轨送到住户楼,时间从傍晚走到深夜”

黑洞与银河:“渲染一个旋转的黑洞:发光的吸积盘、引力透镜扭曲背后的星空;手指快速一划,甩出一串恒星被黑洞吸进去”

可玩的 3D 魔方:“做一个可玩的三阶魔方:拖动旋转、划动转层,一键打乱、一键还原”

粒子钢琴:“做一架粒子钢琴:每按一个键,夜空里炸开一朵粒子烟花,还能自动弹《小星星》”

孔明灯:“中秋夜的河边古镇,点一下屏幕,就从河边放起一盏孔明灯,灯上写着福、安、顺”


图文混合训练

从训练一开始,LongCat-2.5 就把图片和文字放进同一套框架:图片切成离散 token,和文字 token 排在同一个序列里,模型用读文字的同一套方式读图

图片 文字 画 一 座 山 排成同一串 同一个模型 12 305 4087 12 318 2210 7 96 1533 40 771 3092 40 760 3165 21 404 0918 画 一 座 山 轻触播放 每一小块画面都换成一串编号,和文字排在一起,模型用同一套方式读

每一小块画面会换成好几层编号,粗的一层记大轮廓,细的几层补细节,这样换成编号后丢的信息更少。图片按原始分辨率切块


这样做还有一个工程上的好处:图片变成编号这一步可以提前离线算好、存起来。训练时模型直接读现成的编号,计算图里去掉了视觉编码器


真实任务,做强化学习

对于强化学习部分,LongCat 团队把模型放进真实的代码环境,反复练 Agent 各种长任务:读代码、改代码、跑测试、看报错、修改...周而复始

这里的练习题取自 GitHub 公开仓库和美团内部的真实代码任务:挑出 PR 和对应的 issue,让 Agent 自动打标、合成环境,配上 F2P 和 P2P 测试

这里还大量地加入了各种失败记录,通过一套叫 Trajectory2Task 的流程:

  • 先从失败记录里找出错在哪一步

  • 再把当时的运行环境恢复出来

  • 最后倒推出一道能复现、能判分的题

哪里翻车,就点哪里,so easy

Agent 干活翻车 做成能复现的题 反复练到测试通过 练完再去干活 修好前 · 测试失败 修好后 · 测试通过 轻触播放 真实任务里的失败,被改写成带测试的题,模型练到能过为止


这里补充一个小知识,模型很喜欢钻空子,搞些考试小妙招,比如联网搜现成答案,或者翻 git 历史,直接找到当年的修复代码(都是从人类那儿学来的恶习)

所以练习环境会断网,清掉 git 历史和文件缓存,另外用 LLM judge 盯着整条轨迹

练习环境 模型调用的工具 联网搜答案 翻 git 历史找原修复 其他投机取巧 断网 历史清空 裁判模型判作弊 搜索 utils.py 搜索 utils.py 搜索 utils.py 重复调用 · 扣分 轻触播放 断网、清掉历史记录、另派一个模型盯着,分数只能靠真本事拿

为了考虑通用性,模型练习的时候并不绑定固定 harness,为了更好地适配各种环境比如 Claude Code、Codex 等等


国产卡发力

上一代 LongCat-2.0 已经在国产卡上跑通了训练全流程

这一代则在训练和推理两头都提升了效率:

  • 训练按超节点设计并行,单卡吞吐比 DDP 基线高了 86%

  • 推理用 W4A4,吞吐比 W8A8 高了四成多

训练一个 1.6 万亿参数的模型,显存最先告急。LongCat-2.5 用的国产 AI 加速卡,同时还要支撑最长达 1M 的超长上下文训练,美团和芯片厂商为此配合得更深

并行方案以超节点为单位:FSDP、EP、CP 的切分都落在同一个超节点里,大部分通信走超节点内的高速互联

再加上一系列省显存、省拷贝的改动,在所测长上下文监督微调任务中,单卡吞吐比 DDP 基线高了86%


推理这一方面,W4A4 把专家权重与激活都压到 4 bit,能够跑在卡上原生的 INT4 矩阵单元上

8 位整数 W8A8 一次装 4 个数 4 位整数 W4A4 一次装 8 个数 每秒处理的 token 读入提示 8 位 逐字生成 8 位 轻触播放 专家权重与激活都压成 4 位整数,同样的卡每秒多处理约四成 token

作为结果:prefill 吞吐提升43.3%,decode 吞吐提升42.77%;TTFT 降低 15.91%,TPOT 降低 19.72%


跑分

最后放一下跑分,对比一下其他模型,包括 GPT-5.5、GPT-5.6-Sol、Claude Opus 4.8、Claude Opus 5,以及 GLM-5.3、Kimi K3 和 DeepSeek V4.1 Flash


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一线高校教师非升即走,完不成任务就降职级,不合格率超22%!行政领导的考核却几乎为零,全员合格!

一线高校教师非升即走,完不成任务就降职级,不合格率超22%!行政领导的考核却几乎为零,全员合格!

学术眺望
2026-11-07 19:20:03
杨幂立冬晒吃银杏叶饺子,“惠英红想吃杨幂的饺子”登上热搜

杨幂立冬晒吃银杏叶饺子,“惠英红想吃杨幂的饺子”登上热搜

韩小娱
2026-11-07 16:28:04
聚众淫乱合法,美国更是有钱人的“天堂”了

聚众淫乱合法,美国更是有钱人的“天堂”了

侠客栈
2026-11-06 12:21:27
突然大跳水!暴跌87%,江阴人可以捡漏了

突然大跳水!暴跌87%,江阴人可以捡漏了

最江阴
2026-11-07 10:47:11
0-4林昀儒止步八强!温瑞博出局国乒男队全军覆没 梯队建设成老大难

0-4林昀儒止步八强!温瑞博出局国乒男队全军覆没 梯队建设成老大难

颜小白的篮球梦
2026-11-07 22:04:14
美媒表示:中国东风61正式服役,中国导弹越来越多,外舰根本无法靠近,西方没想到速度这么快

美媒表示:中国东风61正式服役,中国导弹越来越多,外舰根本无法靠近,西方没想到速度这么快

绝对军评
2026-11-07 12:58:01
油价调整:车主注意!11月7日柴油汽油价格表,国内油价大跌要来了

油价调整:车主注意!11月7日柴油汽油价格表,国内油价大跌要来了

有料财经
2026-11-07 11:18:58
高盛重磅报告:中国住房供应下降90%,第7轮房价上涨即将开始

高盛重磅报告:中国住房供应下降90%,第7轮房价上涨即将开始

风雨与阳光
2026-11-06 02:04:55
张不开嘴就别演正剧!《伟大的长征》里李乃文用四菜一汤把张国焘演出了欠抽的气质

张不开嘴就别演正剧!《伟大的长征》里李乃文用四菜一汤把张国焘演出了欠抽的气质

娱乐故事
2026-11-01 22:16:03
实话说:俄罗斯对中国最大的贡献,就是让整个西方彻底误判了中国

实话说:俄罗斯对中国最大的贡献,就是让整个西方彻底误判了中国

经纬戎韬
2026-11-07 04:14:36
大暴雪、大暴雨来袭!两部门重要部署

大暴雪、大暴雨来袭!两部门重要部署

环球网资讯
2026-11-07 17:15:59
普京再签署总统令,俄罗斯接管日本烟草其他多项资产;此前日本决定对俄罗斯实施追加制裁,俄方对等反制

普京再签署总统令,俄罗斯接管日本烟草其他多项资产;此前日本决定对俄罗斯实施追加制裁,俄方对等反制

扬子晚报
2026-11-07 14:44:10
财政钱都是劳动者交税!绝不应该用来供养特殊特权

财政钱都是劳动者交税!绝不应该用来供养特殊特权

小鹿姐姐情感说
2026-11-06 05:19:20
波尔津吉斯发长文向勇士道歉:我耽误了库里夺冠,选择退役来弥补

波尔津吉斯发长文向勇士道歉:我耽误了库里夺冠,选择退役来弥补

篮球小方
2026-11-07 11:24:26
横店迎来三十年最为惨烈的一次断臂求生!130多座摄影棚,合计50万平方米,全部免租金向剧组开放

横店迎来三十年最为惨烈的一次断臂求生!130多座摄影棚,合计50万平方米,全部免租金向剧组开放

扶苏聊历史
2026-10-28 15:47:11
马斯克:中国太棒了,我爱中国

马斯克:中国太棒了,我爱中国

观察者网
2026-11-07 15:46:51
白俄总统卢卡申科再一次语出惊人:提议由特朗普担任联合国秘书长

白俄总统卢卡申科再一次语出惊人:提议由特朗普担任联合国秘书长

青烟小先生
2026-11-07 10:11:14
成都一中学体测现场男生做引体向上犯难,女老师上场示范连拉4个,现场“哇”声一片

成都一中学体测现场男生做引体向上犯难,女老师上场示范连拉4个,现场“哇”声一片

潇湘晨报
2026-11-07 16:57:21
全国人民代表大会常务委员会关于批准《关于成立世界人工智能合作组织的协定》的决定

全国人民代表大会常务委员会关于批准《关于成立世界人工智能合作组织的协定》的决定

金台资讯
2026-11-07 07:19:20
C罗退出第2天,葡萄牙28人名单炸了!热苏斯这话太狠了

C罗退出第2天,葡萄牙28人名单炸了!热苏斯这话太狠了

静暖文字
2026-11-07 14:17:05
2026-11-07 22:28:49
赛博禅心
赛博禅心
拜AI古佛,修赛博禅心
623文章数 59关注度
往期回顾 全部

科技要闻

老去的大佬、当红的新贵,握着一张AI考卷

头条要闻

专家:美国民主党若敢触碰北京红线 中方必将坚决反制

头条要闻

专家:美国民主党若敢触碰北京红线 中方必将坚决反制

体育要闻

轰35+5迎生涯之夜 米切尔成雷霆第二巨

娱乐要闻

赵雅芝杭州吃饭落泪,赡养压力引热议

财经要闻

“科技小登”打回原形

汽车要闻

503.17km/h!中国超跑这次真把天花板捅穿了!

态度原创

游戏
家居
手机
本地
公开课

《GTA6》联名PS5手柄“一柄难求” 黑白两款超炫

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

苹果iPhone Duo折叠屏手机首周销量曝光,三天卖出约12.46万台

本地新闻

乌兰察布:以前种土豆,现在种Token

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版