
GLM-5.1 的重点不只是 SWE-Bench Pro 58.4 分,而是把模型放进数百轮工具调用和 8 小时自我改进循环里。文章拆解它的长任务实验、工程优化能力、开源与 API 边界,并指出官方材料里尚未说清的多模态与自评可靠性问题。
| 指标 | 官方给出的 GLM-5.1 结果 | 更应该怎么读 |
|---|---|---|
| SWE-Bench Pro | 58.4,官方表格中高于 GPT-5.4 的 57.7、Claude Opus 4.6 的 57.3、Gemini 3.1 Pro 的 54.2。1 | 这是它最醒目的软件工程成绩,说明它在复杂代码修复上有竞争力;但脚注也显示评测使用 OpenHands 和定制 prompt,不能脱离 harness 横向外推。 |
| NL2Repo | 42.7,高于 GLM-5 的 35.9,但低于 Claude Opus 4.6 的 49.8。1 | 仓库生成能力进步明显,但仍不是表格里最强。 |
| Terminal-Bench 2.0 Terminus-2 | 63.5,高于 GLM-5 的 56.2,低于 Gemini 3.1 Pro 的 68.5 和 Claude Opus 4.6 的 65.4。1 | 终端真实任务有提升,但竞争格局还很紧。 |
| CyberGym | 68.7,高于 GLM-5 的 48.3,也高于表中 Claude Opus 4.6 的 66.6 和 GPT-5.4 的 66.3。1 | 安全任务分数很高,但脚注说明不同模型使用不同 CLI / harness,且部分模型会因安全风险拒答,读数要看评测设置。 |

model: "glm-5.1",可以打开 thinking,也可以用 OpenAI SDK 兼容方式调用 Z.AI base URL。3 官方博客还说 GLM-5.1 兼容 Claude Code 和 OpenClaw,并面向 Coding Plan 用户滚动开放;峰时和非峰时 quota 消耗不同,限时促销期另算。1huggingface.co
This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.