网易首页 > 网易号 > 正文 申请入驻

Claude Haiku 5.5 降本背后:操作能力暴涨,复杂编程为何仍差一截?

0
分享至


模型开始按任务动态分配推理,超 10 万 Token 后,输入输出单价均涨 5 倍。

作者丨郑佳美

编辑丨岑 峰

刚刚,Anthropic 发布了 Claude Haiku 5.5。

这次升级的幅度不小,尤其是在计算机操作方面,OSWorld 2.1 评测成绩从上一代的 15.7% 提升到了 72.4%。知识工作和复杂推理能力也有明显改善,而按照 Anthropic 公布的数据,新模型的平均运行成本还下降了约 75%。

除此之外,Haiku 5.5 还加入了自适应推理机制,并支持 100 万 Token 上下文。过去,Haiku 主要用来处理摘要、分类、信息提取这些高频任务,优势一直是速度快、成本低。


这次更新后,它能处理的工作明显复杂了不少,部分评测成绩甚至已经接近 Sonnet 5.5。不过,换到复杂编程任务,两者的差距依然明显。

再看这次更新的推理机制和价格规则,Haiku 5.5 在不同任务中的表现与实际使用成本,其实还有不少细节需要拆开来看。

01


复杂编程仍有差距

Haiku 5.5 的性能增长主要体现在计算机操作、知识工作和多学科推理几个方向,其中计算机操作的变化尤其明显。

在 OSWorld 2.1 离线子集上,Haiku 5.5 取得 72.4%,上一代只有 15.7%,Sonnet 5.5 则达到 83.9%。OSWorld 测试的是模型通过计算机界面完成长链路任务的能力,涉及界面理解、操作执行以及根据环境反馈继续完成任务。

与普通文本问答相比,计算机操作存在更多状态依赖。模型完成一次点击或者输入后,页面可能发生变化,后续动作需要根据新的界面状态决定。


如果操作失败,模型还要判断当前环境是否仍然符合任务要求。Haiku 5.5 在这一评测中的增长,说明它处理连续操作任务的能力相比上一代有了明显改善。

但 72.4% 对应的是特定测试集中的完成率,不能直接代表所有浏览器或桌面任务的实际成功率。真实业务中的动态页面、权限限制和异常状态,仍然需要在对应环境中单独测试。

知识工作方面,Haiku 5.5 在 GDPval-AA v2.1 上获得 1620 分,Haiku 4.5 为 735 分,Sonnet 5.5 为 1840 分。该评测涵盖 44 类职业的实际工作任务,涉及材料分析、信息整合和工作成果生成。


另一项 AA-Briefcase v1.1 评测中,Haiku 5.5 从上一代的 614 分提高至 1578 分。多学科推理测试 Humanity's Last Exam 的无工具成绩达到 45.9%,接入工具后为 57.4%,也明显高于上一代。

这些评测涉及的任务比普通信息提取更加复杂。模型需要理解多个信息来源之间的关系,处理材料中的限制条件,并根据已有内容形成结果。工具的引入还增加了信息获取和结果整合的环节。

不过,编程评测呈现出不同的情况。在 FrontierCode 1.1 主测试中,Haiku 5.5 得分为 46.4%,与 Sonnet 5.5 的 52.1% 差距较小。但在 Terminal-Bench 4.0 中,Haiku 5.5 得分为 39.2%,Sonnet 5.5 达到 70.6%。


Terminal-Bench 涉及命令行环境下的复杂多步骤任务,模型通常需要读取文件、执行命令、处理错误并根据测试反馈调整操作。它对持续规划和执行状态维护的要求较高。

Anthropic 也在发布材料中明确指出,Sonnet 5.5 和 Opus 5.5 仍然更适合复杂智能体编程任务,Haiku 5.5 则主要面向范围明确的子任务、摘要和上下文压缩等工作。

企业早期测试提供了更多具体数据。Asana 报告,在 AI Teammates 相关测试中,Haiku 5.5 的任务完成延迟相比其现用模型降低超过 30%,单轮推理速度提高至多 2.5 倍。


HubSpot 在模拟 CRM 环境中,测得三次运行平均 92.8% 的成绩,AlphaSense 则在 400 次文档问答测试中,测得 Haiku 5.5 的得分为 0.84,上一代为 0.76。

这些结果来自不同企业的内部测试,各自采用不同的任务与评估标准,适合用于了解特定业务场景中的表现,无法直接作为统一的模型能力排名。


02


自适应推理加入 Haiku

除了性能变化,Haiku 5.5 还成为首个支持可调节推理强度的 Haiku 模型。

此前 Haiku 4.5 使用扩展思考功能时,开发者需要提前设置固定的内部推理预算。无论任务是简单的信息查找,还是涉及多个条件的复杂分析,模型可以使用的推理空间都受到预先设置的数值限制。

Haiku 5.5 改用 Adaptive Thinking。模型能够根据任务内容决定是否使用内部推理以及投入多少计算,开发者则通过 Effort 设置整体推理强度。


例如,提取文档中的日期通常不需要长时间分析,而比较多个合同版本之间的条款差异,需要同时处理更多条件和相互关联的信息。自适应推理允许模型在这两类任务中采用不同的计算投入。

这一机制也涉及推理时计算资源的分配。对于复杂任务,增加内部推理可以让模型处理更多中间步骤,但更长的推理过程也会增加 Token 消耗和响应时间。对于简单任务,减少内部推理能够降低不必要的计算开销。

Anthropic 在发布页面展示了不同推理强度下,Haiku 5.5 在 OSWorld、GDPval-AA 和 Humanity's Last Exam 中的成本与性能关系。不过,不同任务对额外推理计算的反应并不一致,不能把提高推理档位直接等同于固定幅度的性能提升。


API 层面也有几项需要处理的变化。首先,Haiku 5.5 不再沿用上一代手动指定固定思考 Token 数量的方式,旧有的推理配置需要调整。其次,内部推理会占用模型的输出 Token 预算。如果原有程序只根据最终答案长度设置输出上限,升级后可能出现内部推理占用了过多空间,导致正文无法完整生成的情况。

另外,启用自适应推理后,模型响应可能包含独立的思考数据块。应用需要正确区分内部推理内容和最终输出,不能继续假设返回内容的开头一定是答案。

对于持续使用工具的智能体,推理数据与对话历史之间还存在一致性要求。开发者如果在后续请求中修改了已有的历史消息,可能影响原有推理状态的有效性。

Haiku 5.5 对部分采样参数也增加了限制,原先依靠这些参数调整输出行为的应用,需要检查接口兼容性。这些变化主要影响已经使用 Haiku 4.5 扩展思考功能的项目。迁移时除了替换模型版本,还需要重新检查推理预算、响应解析和多轮消息处理方式。

03


百万上下文没有统一低价

Haiku 5.5 支持 100 万 Token 上下文和 12.8 万 Token 输出,能够处理较长的文档、大型代码内容以及持续运行的工具记录。

不过,Anthropic 没有为整个上下文窗口设置统一的低价。对于不超过 10 万 Token 的提示词,每百万输入 Token 收费 0.10 美元,每百万输出 Token 收费 0.50 美元。当提示词超过 10 万 Token 后,输入价格提高至 0.50 美元,输出价格提高至 2.50 美元。


缓存费用也采用分层方式。较短提示词的每百万 Token 缓存读取价格为 0.01 美元,较长提示词为 0.05 美元。相比重复传入完整内容,缓存适合复用系统指令、工具定义和公共资料。

Anthropic 表示,Haiku 4.5 约 90% 的请求长度位于 10 万 Token 以内。这部分请求在新定价下获得了较大的价格降幅,但实际成本还受到 Token 使用量变化的影响。

Haiku 5.5 更新了分词器,相同内容对应的 Token 数量可能与上一代不同。因此,即使输入文本没有变化,升级后的实际计费数量也可能发生变化,需要重新测量。

对于长时间运行的智能体,上下文管理会进一步影响成本。例如,一个编程任务可能连续产生文件检索结果、代码分析记录和测试日志。

如果每次调用都携带完整历史,输入长度会随着任务推进持续增加。Prompt Caching 可以降低重复内容的读取费用,而 Compaction 可以将已经完成的操作整理成更短的任务状态,减少后续调用需要处理的历史信息。


Anthropic 在发布材料中将上下文压缩列为 Haiku 5.5 的主要应用场景之一。具体部署方面,Rogo 报告了使用 Haiku 子智能体从企业 10-K 文件中提取收入数据的案例,由更大的模型负责后续演示文稿制作。

Cognition 则将 Haiku 5.5 用作 Devin Fusion 的辅助模型,在 Opus 5.5 主导的配置下,FrontierCode 得分达到 66.2%,并报告成本与延迟有所下降。

这些案例采用了不同模型处理不同任务的方式,但发布材料没有提供完整的调用次数、Token 分布和成本明细,因此无法据此计算一般业务采用相同架构后的节省幅度。


此次 Anthropic 还将 Sonnet 5.5 的缓存读取价格降低 50%,从每百万 Token 0.20 美元调整为 0.10 美元。按照 Anthropic 的统计,这使 Sonnet 5.5 在多数智能体任务中的运行成本下降约 20%。

这一调整仅涉及缓存读取费用,输入和输出 Token 的标准价格并未同步按相同比例下降。

04


迁移仍要检查实际任务表现

Claude Haiku 5.5 已经通过 Claude API、AWS、Google Cloud 和 Microsoft Azure 等平台提供,Anthropic 同时开始更新 Python 和 TypeScript SDK,为计算机操作与浏览器操作增加测试版支持。

从目前公布的数据看,Haiku 5.5 在计算机操作、知识工作和多学科推理评测中的成绩明显高于上一代,但复杂终端编程仍与 Sonnet 5.5 存在较大差距。价格方面,较短提示词能够获得更明显的成本优势,超过 10 万 Token 后则适用另一档收费标准。

对于已有的 Haiku 4.5 应用,迁移涉及推理配置、Token 计算和响应解析等具体修改。如果原来使用 Sonnet 处理部分高频任务,也可以依据相同测试集比较 Haiku 5.5 的完成率、响应时间和调用费用。

Anthropic 已经给出了模型能力、接口变化和定价信息,但实际业务中的成本改善仍需要通过对应工作负载验证。尤其在多轮工具调用场景中,模型单次请求的价格、任务失败后的重试次数以及上下文增长情况,需要放在同一次完整任务中核算。

上车,带你看遍全球 AI 顶会精华

可独家畅览:

专家演讲PPT

大会报告全文

热门论文解读

学术新星访谈

未经「AI科技评论」授权,严禁以任何方式在网页、论坛、社区进行转载!

公众号转载请先在「AI科技评论」后台留言取得授权,转载时需标注来源并插入本公众号名片。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
江苏扬州市江都区发生3.9级地震

江苏扬州市江都区发生3.9级地震

中国地震台网速报
2026-11-11 06:37:04
黄仁勋出轨对象更多照片曝光,并非20岁小女生,或给黄仁勋不一样的体验

黄仁勋出轨对象更多照片曝光,并非20岁小女生,或给黄仁勋不一样的体验

蜜桔娱乐
2026-11-10 10:19:57
轰动NBA!曝勇士或交易格林!这可是四届总冠军功臣

轰动NBA!曝勇士或交易格林!这可是四届总冠军功臣

篮球实战宝典
2026-11-10 17:35:58
国家发展改革委:当前幼儿园、小学、初中学龄人口已达峰

国家发展改革委:当前幼儿园、小学、初中学龄人口已达峰

大象新闻
2026-11-10 11:16:02
钱最多有什么用?黄仁勋承认出轨后妻子现状,给所有夫妻提了个醒

钱最多有什么用?黄仁勋承认出轨后妻子现状,给所有夫妻提了个醒

叨唠
2026-11-10 06:05:16
央媒亲宣!56岁陈建斌正式上任,职务不一般,早已和吴越拉开距离

央媒亲宣!56岁陈建斌正式上任,职务不一般,早已和吴越拉开距离

削桐作琴
2026-11-09 15:29:05
我和李姐搭伙过日子,抱也行亲别处也行,唯独嘴碰不得…

我和李姐搭伙过日子,抱也行亲别处也行,唯独嘴碰不得…

林林总总Z
2026-11-10 03:30:54
4时24分准时起飞,长征十二号成功发射,首位外籍航天员将进天宫

4时24分准时起飞,长征十二号成功发射,首位外籍航天员将进天宫

金戈远望
2026-11-10 18:36:07
鲁山县人大常委会原主任姚莲叶接受纪律审查和监察调查

鲁山县人大常委会原主任姚莲叶接受纪律审查和监察调查

大象新闻
2026-11-10 16:20:02
我有一种预感,69岁的赵本山之所以这个年龄还拍这样题材,不是为了自己,也不是为了赚钱,而是为了儿子!

我有一种预感,69岁的赵本山之所以这个年龄还拍这样题材,不是为了自己,也不是为了赚钱,而是为了儿子!

背包旅行
2026-11-08 17:02:31
来深圳开APEC之前,日方直接提出礼遇要求,中方回应很干脆

来深圳开APEC之前,日方直接提出礼遇要求,中方回应很干脆

史智文道
2026-11-10 14:31:17
儿子高二拿下生物奥赛金牌保送北大 父亲心态很“佛系”:本来觉得上个普通大学就很好

儿子高二拿下生物奥赛金牌保送北大 父亲心态很“佛系”:本来觉得上个普通大学就很好

闪电新闻
2026-11-10 18:23:53
15场0球1助攻,50次射门颗粒无收!安东尼又现原形,曼联卖他真没错

15场0球1助攻,50次射门颗粒无收!安东尼又现原形,曼联卖他真没错

大卫的篮球故事
2026-11-10 11:18:37
山东泰山拿下三项荣誉!唐瑞中甲金童,克雷桑落选最佳阵容,张海涛惜败成耀东,斯托伊科维奇进入选帅视野

山东泰山拿下三项荣誉!唐瑞中甲金童,克雷桑落选最佳阵容,张海涛惜败成耀东,斯托伊科维奇进入选帅视野

老周观体育
2026-11-10 23:17:06
G20再生变数?德国总理:如果普京出席G20峰会,已准备好与他交谈

G20再生变数?德国总理:如果普京出席G20峰会,已准备好与他交谈

云上乌托邦
2026-11-10 17:21:44
美前国务卿约翰·克里:中国在摆脱化石燃料方面正处于世界领先地位,美国必须跟上

美前国务卿约翰·克里:中国在摆脱化石燃料方面正处于世界领先地位,美国必须跟上

环球网资讯
2026-11-10 22:53:11
哈登米切尔撂挑子,阿特金森好像害怕了!骑士离最终答案越来越近

哈登米切尔撂挑子,阿特金森好像害怕了!骑士离最终答案越来越近

老梁体育漫谈
2026-11-10 12:57:19
苹果又一款iPhone 新机来了,这设计有点懵!

苹果又一款iPhone 新机来了,这设计有点懵!

科技堡垒
2026-11-09 08:00:47
周恩来病危手术前嘶声呐喊,坚决宣告:“我不是投降派!”

周恩来病危手术前嘶声呐喊,坚决宣告:“我不是投降派!”

扶苏聊历史
2026-11-10 14:54:01
外媒称60万枚英伟达先进芯片滞留香港待运内地 外交部:输华芯片立场一贯

外媒称60万枚英伟达先进芯片滞留香港待运内地 外交部:输华芯片立场一贯

青科新闻
2026-11-10 09:58:27
2026-11-11 07:51:00
AI科技评论 incentive-icons
AI科技评论
点评学术,服务AI
7793文章数 20796关注度
往期回顾 全部

科技要闻

黄仁勋承认出轨:伤害了妻儿,毫无借口

头条要闻

牛弹琴:果然是一场闹剧 这个世界就没有特朗普做不到

头条要闻

牛弹琴:果然是一场闹剧 这个世界就没有特朗普做不到

体育要闻

大连足球这些年的起落,都从他身边经过

娱乐要闻

黄仁勋与黄乐合照曝光,吃饭氛围暧昧

财经要闻

72岁王健林重回“一号位”

汽车要闻

限时权益价8.88万 吉利星愿STAR限定系列发布

态度原创

艺术
游戏
手机
数码
家居

艺术要闻

17位 国外画家笔下的女子

《GTA6》实体版内部曝光:双封面自由更换

手机要闻

全系都有背屏!荣耀700系列续航不打折扣:7.96mm厚度同档最大电池

数码要闻

STEPX Neo体验:当手机开始理解意图,AI交互有了新玩法

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版