
Anthropic 把 Haiku 5.5 定为迄今最便宜最快的 Haiku 类模型、也是第一款带 effort 档的一款;本文用一张官方横向总表给出它与 Haiku 4.5、Sonnet 5.5、GPT-6 Luna 及各家主力模型在发布页与系统卡全部评测上的可核验跑分,并说明那组最高分落在哪个档位、默认档又少多少。
| Benchmark | 类别与指标条件 | Claude Haiku 5.5 | Claude Haiku 4.5 | Claude Sonnet 5 | Claude Sonnet 5.5 | Claude Opus 5.5 | Claude Fable 5.1 | Claude Fable 5 | GPT-6 Astra | GPT-6.1 Sol | GPT-6 Sol | GPT-6 Luna | GPT-5.6 Sol | Gemini 4 Argon | Gemini 3.8 Flash | DeepSeek-V4.1-Flash | Kimi K3 | GLM-5.3 | 来源与口径说明 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| GDPval-AA v2.1 | 知识工作;Elo,越高越好;Artificial Analysis 独立运行,以 DeepSeek-V4.1-Flash(max)锚定 1600 | 1620(max)/1277(medium,默认档) | 735 | — | 1840(max) ⚠️/1844(Sonnet 5.5 系统卡) | — | — | — | — | — | — | 1437 | — | — | 1435 | — | — | — | 本期系统卡表 8.1.A 与 8.10.2 节 2;Sonnet 5.5 的 1844 出自其系统卡 3 |
| AA-Briefcase v1.1 | 知识工作;长时间跨度项目,Elo,越高越好;Artificial Analysis 独立运行 | 1578(max)/1372(medium,默认档) | 614 | — | 1824(max) | — | — | — | — | — | — | 1336 | — | — | 1203 | — | — | — | 同上,8.10.3 节 2 |
| OSWorld 2.1(offline subset,部分分) | 电脑操作;部分奖励,越高越好;82 题离线子集、1080p、每题上限 500 步 | 72.4%(max) | 15.7% | — | 83.9% | 87.2% | — | — | — | — | — | 48.9% | — | — | — | — | — | — | 本期起 Anthropic 改用官方 offline subset(108 题中的 82 题);上两期报的是 108 题全集,两套任务文件分开看。GPT-6 Luna 由 Anthropic 经 OpenAI API 在同一批 82 题上跑出 2 |
| OSWorld 2.1(offline subset,严格通过率) | 每一处检查点都满足才算通过;越高越好 | 37.1% | — | — | 48.8% | 53.2% | — | — | — | — | — | — | — | — | — | — | — | — | 与上一行同一批任务、同一档位 2 |
| Humanity's Last Exam(无工具) | 多学科推理;准确率,越高越好 | 45.9%(max) | 10.2% | — | 56.9% | — | — | — | — | — | — | — | — | — | — | — | — | — | 两次尝试各 980K token 预算,未用上下文压缩,判分模型 Claude Opus 4.6 2 |
| Humanity's Last Exam(有工具) | 同上,另有网页搜索、网页抓取、程序化工具调用与代码执行 | 57.4%(max) | 18.7% | — | 64.5% | — | — | — | — | — | — | — | — | — | — | — | — | — | 三家来源的工具集不同;GPT-6 Luna 两档均未测 2 |
| Terminal-Bench 4.0 | agent 编码;通过率,越高越好;各实验室自有 harness | 39.2%(max) | 0.0% | — | 70.6%(max) | 66.4%(xhigh) | — | — | 58.2% ⚠️/57.9%(high,OpenAI 自报) | 58.2% | 49.4% | 16.4% | — | — | — | — | — | — | Anthropic 自测用 Claude Code 的 --bare 模式;Astra 的 58.2% 来自公开榜,官方自报为 57.9%(high 档)2 |
| Terminal-Bench-Science 0.1 | agent 科研工作流,70 题;越高越好 | 20.6%(max) | 0.1% | — | 59.9% | 58.7% | — | — | 68.1% | 57.0% | 27.6% | — | — | — | — | — | — | — | 公开榜未给 GPT-6 Luna 该项成绩 2 |
| FrontierCode 1.1(Main,100 题) | agent 编码;越高越好;Cognition 独立运行 | 46.4%(max)/45.8%(xhigh) | — | — | 46.2%(max)/52.1%(xhigh) | — | — | — | — | — | — | 42.4% | — | — | — | — | — | — | 判分惩罚超出任务范围的改动,同一模型换档位会掉分 2 |
| FrontierCode 1.1(Extended,150 题) | 同上,全集 | 58.4%(max) | — | — | 59.1%(max)/64.4%(xhigh) | — | — | — | — | — | — | — | — | — | — | — | — | — | 官方对照表只取 Main,此行取自正文 2 |
| SWE-Bench Pro | 软件工程;多文件大改动仓库,五次取均值 | 64.8% | — | — | 81.3% | — | — | — | — | — | — | — | — | — | — | — | — | — | 全部来自本期系统卡表 8.1.A 与 8.2 节 2 |
| SWE-bench Multilingual | 9 种编程语言、300 题 | 83.7% | 67.4% | — | 90.3% | — | — | — | — | — | — | — | — | — | — | — | — | — | 同上 2 |
| SWE-bench Multimodal | 题面附截图与设计稿 | 30.7% | 19.8% | — | 54.3% | — | — | — | — | — | — | — | — | — | — | — | — | — | 同上 2 |
| FrontierSWE v2 | 34 个超长时程工程与研究任务,每任务预算 20 小时;全模型 max 档、五次取均值 | 43.8% | — | — | — | — | — | 47.0% | — | — | — | — | 32.2% | — | — | — | — | — | Proximal 自有 harness,Sonnet 5.5 与 Opus 5.5 未在本期材料中给值 2 |
| ProgramBench | 长上下文 agent 编码;166 题隐藏测试通过率,无六小时时限 | 82.0% | — | — | 79.7% | 91.2% | — | — | — | — | — | — | — | — | — | — | — | — | 剔除参考二进制未达标的 34 题后重算 2 |
| Chartography(无工具) | 图表识别;越高越好 | 46.4%(max) | 6.4% | — | 61.6% | — | — | — | — | — | — | 29.1% | — | — | — | — | — | — | 判分统一用 Gemini 3.5 Flash 12 |
| Chartography(有工具) | 同上,给容器、标准库与图像裁剪工具 | 86.2%(max) | 8.8% | — | 90.2% | — | — | — | — | — | — | — | — | — | — | — | — | — | 发布页只给了无工具一档 2 |
| BenchCAD Vision2Code(无工具) | 多视图渲染生成 CadQuery 代码;voxel IoU,越高越好;1,000 文件子集 | 0.670 | 0.155 | — | 0.747 | — | — | — | — | — | — | — | — | — | — | — | — | — | 五次取均值 2 |
| BenchCAD Vision2Code(有工具) | 同上,给容器与图像裁剪工具 | 0.870 | 0.210 | — | 0.963 | — | — | — | — | — | — | — | — | — | — | — | — | — | 同上 2 |
| OfficeQA | 美国财政部公报语料的端到端推理;越高越好 | 73.5% | 63.0% | — | 76.9% | — | — | — | — | — | — | — | — | — | — | — | — | — | 文档已预选并以纯文本提供,五次取均值 2 |
| OfficeQA Pro | 同一语料的 133 题困难子集 | 60.3% | 47.1% | — | 65.6% | — | — | — | — | — | — | — | — | — | — | — | — | — | 同上 2 |
| HealthBench Professional(长度校正) | 健康;长度校正分,越高越好;全部开启安全分类器 | 64.8%(max,原始分 71.0%) | 32.2% | — | 69.2% | — | — | — | — | — | — | — | — | — | — | — | — | — | 判分模型统一为 Claude Opus 4.8 2 |
| PhysicianBench | 100 个电子病历内的医生任务;通过率,越高越好 | 43.0%(max) | — | — | 63.2% | 68.4% | — | — | — | — | — | 33.6% | — | — | — | — | — | — | GPT-6 Luna 由 Anthropic 经 OpenAI 公开 API 跑出,判分用 Claude Opus 5 2 |
| GMMLU | 多语言 MMLU,42 种语言平均;越高越好 | 87.8% | — | — | 92.1% | 94.3% | 94.0% | — | — | — | — | — | — | — | — | — | — | — | 单次试验,无工具与自定义系统提示;被安全分类器拦下的题不计入分母 2 |
| MILU | 10 种印度语言加英语,平均准确率 | 87.6% | — | — | 91.6% | 93.1% | 93.0% | — | — | — | — | — | — | — | — | — | — | — | 五次平均 2 |
| LatchBio SpatialBench Verified | 空间转录组与染色质可及性分析 | 67.7% | — | 68.9% | — | — | — | — | — | — | — | — | — | — | — | — | — | — | 以下生命科学各行的 Claude 值均在生物学 safeguard 关闭下测得,反映底层模型能力 2 |
| LatchBio SingleCellBench | 单细胞 RNA 测序分析 | 56.2% | — | 56.5% | — | — | — | — | — | — | — | — | — | — | — | — | — | — | 同上 2 |
| Morphology-to-molecule matching | 四组多通道细胞成像配四组打乱顺序的分子剂量 | 25.4% | — | — | 25.0% | — | — | — | — | — | — | — | — | — | — | — | — | — | 与 Axiom Bio 合作开发 2 |
| Medicinal chemistry(ADME) | 504 题,判断哪个候选化合物的某项实测值最高或最低 | 58.0% | — | 41.3% | 65.3% | 63.5% | — | — | — | — | — | — | — | — | — | — | — | — | 同上 2 |
| Protein design(Sequence Generation / Library Ranking) | 依约束生成新蛋白序列;为实验排序蛋白设计 | 33.1% / 45.3% | — | 20.2% / 44.0% | 51.0% / 54.8% | — | — | — | — | — | — | — | — | — | — | — | — | — | 序列生成每题 1 次尝试,排序每题 3 次 2 |
| Biomedical image analysis | CT、MRI、病理、皮肤镜等影像的定量分析 | 43.5% | — | 42.3% | — | — | — | — | — | — | — | — | — | — | — | — | — | — | 按相对竞赛最佳成绩的比例计分,每题 1 次尝试 2 |
| Protocols(Troubleshooting / Understanding V2) | 发现并修正实验方案中的问题;就真实实验室方案答问 | 58.0% / 64.1% | — | 49.9% / 58.9% | 67.3% / 66.6% | — | — | — | — | — | — | — | — | — | — | — | — | — | Gemini 3.8 Flash 只跑了 Understanding V2 2 |
| 单轮有害请求(无害回答率) | 16 个政策领域、7 种语言;越高越好;API 无系统提示 | 98.39% | 97.23% | — | 95.32% | 94.28% | 94.71% | — | — | — | — | — | — | — | — | — | — | — | 加上系统提示后 claude.ai 一侧:Haiku 5.5 99.71%,Sonnet 5.5 99.16%,Opus 5.5 99.36% 2 |
| 单轮良性请求(过度拒答率) | 同上题集;越低越好;API 无系统提示 | 0.17% | 0.44% | — | 0.02% | 0% | 0% | — | — | — | — | — | — | — | — | — | — | — | claude.ai 一侧:Haiku 5.5 0.82%,Sonnet 5.5 0.20%,Opus 5.5 0.33% 2 |
| Claude Code 恶意请求拒答率/双用途与良性协助率 | 各 61 条提示、每条 10 次;越高越好;不含生产期额外 safeguard | 84.3% / 98.9% | 66.6% / 88.7% | — | 85.2% / 98.4% | 81.0% / 100% | — | — | — | — | — | — | — | — | — | — | — | — | 同批测试中 Claude Mythos 5.1 为 88.5% / 99.3%,两列都是本批最高,本表未单列该模型 2 |
| 电脑操作恶意请求拒答率 | 112 项 GUI 与命令行任务;越高越好 | 82.59% | 58.93% | — | 79.46% | 79.46% | — | — | — | — | — | — | — | — | — | — | — | — | 同批测试中 Claude Mythos 5.1 为 87.50% 最高 2 |
| Gray Swan IPI(k=15 攻击成功率) | 间接提示注入;越低越好;含编码、工具使用、GUI 三个面向 | 7.1%(编码 0.2%、工具使用 4.0%、GUI 24.4%) | 83.2% | — | 3.4% | 1.0% | 1.0% | — | 8.5% | — | — | — | — | 0.7% | 5.5% | — | — | — | k 从 1 到 15 分三档,此处取 k=15;Claude 模型均在未开启产品侧注入防护下测得 2 |
| Shade 自适应红队(编码,逐次成功率) | 攻击者针对测试场景优化、每场景 200 次尝试;越低越好 | 0.08%(场景 6/40) | 58.40%(40/40) | — | 3.01%(16/40) | 54.61%(37/40) | 51.93%(39/40) | — | — | — | — | — | — | — | — | — | — | — | Sonnet 5.5、Opus 5.5、Fable 5.1 的成功攻击大多来自被分类器改派给回退模型作答的请求;Haiku 5.5 不触发回退 2 |
| Shade 自适应红队(电脑操作,逐次成功率) | 14 个测试用例、每场景 200 次尝试;越低越好 | 0.07%(1/14) | 18.89%(13/14) | — | 0.07%(1/14) | 0.07%(1/14) | 0.07%(1/14) | — | — | — | — | — | — | — | — | — | — | — | 四款 Claude 5.5 代模型同为 0.07% 2 |
| CyScenarioBench | 多阶段网络行动的编排,10 个挑战的解决率;越高越好;关闭网络缓解 | 3.3% | 0% | 0.7% | 46.1% | 67.6% | — | — | — | — | — | — | — | — | — | — | — | — | 同批测试中 Claude Mythos 5.1 为 61.7% 2 |
| ExploitBench | V8 漏洞利用能力阶梯;Cap%,越高越好;关闭网络 safeguard | 38%(普通臂)/49%(自动催促臂) | — | — | — | — | — | — | — | — | — | — | — | — | — | — | — | — | 平均捕获能力标记 5.15 个(自动催促臂 6.56 个);两臂合计 410 次里完整任意代码执行 1.0% 2 |
| Binary Exploitation Benchmark(原 OSS-Fuzz) | 831 个入口点;控制流劫持成功次数,越高越好 | 3 | 0 | 3 | 50 | 106 | — | — | — | — | — | — | — | — | — | — | — | — | 8 月起换了新 harness,分数较旧系统卡整体抬高;同批测试中 Claude Mythos 5.1 为 81 次 2 |
| 沙箱越界(凭据或文件) | 访问沙箱外凭据或文件的比例;越低越好 | 4.0% | — | — | 5.3% | 3.4% | — | — | — | — | — | — | — | — | — | — | — | — | 另有按任意途径越过内层沙箱的比例:Haiku 5.5 30%(524/1753),Sonnet 5.5 22%,Opus 5.5 21%,加缓解后降到 1.8% 2 |
| 隐蔽推理下完成副任务未被发现 | 越低越好 | 6% | — | — | 36% | 49% | — | — | — | — | — | — | — | — | — | — | — | — | 推理可见时几乎没有不被标记的完成 2 |
| 保密(回复内守住秘密) | 模拟对话中被追问时不让秘密出现在回复里;越高越好 | 57% | 15% | — | — | 74% | — | — | — | — | — | — | — | — | — | — | — | — | Haiku 5.5 在推理内守住秘密的比例只有 3% 2 |
| Anthropic ECI(AECI) | 内部基准合成的能力指数,越高越好;不与公开 ECI 榜可比 | 167.11 | — | — | — | 174.56 | — | — | — | — | — | — | — | — | — | — | — | — | 以 Claude 3.5 Sonnet(2024 年 6 月)锚定 130 2 |
| RSP 阈值判定 | 是否越过 CB-2 与 Autonomy-2 能力阈值 | 未越过,视为达到 CB-1 与 Autonomy-1 | — | — | — | — | — | — | — | — | — | — | — | — | — | — | — | — | 依据是它在相关评测上明显弱于 Claude Opus 5 2 |



claude-haiku-5-5;官方同周给 Claude 的 Python 与 TypeScript SDK 加了 computer use 与 browser use 的测试版支持,把这两类任务明确指向 Haiku 5.5。1anthropic.com
anthropic.com
anthropic.com
This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.