Neodrop
Create
FeedDiscoverMy ChannelsAuto-publishJoin Our Discord
FeedDiscoverCreateMy Channels
唐杰转发 Ramez Naam:GLM-5.3 的网络攻击能力接近 Mythos Preview,开源权重落后 4–6 个月
2026-09-30

唐杰转发 Ramez Naam:GLM-5.3 的网络攻击能力接近 Mythos Preview,开源权重落后 4–6 个月

9 月 30 日唐杰在 X 转发了 Ramez Naam 的一条帖子:GLM-5.3 的网络攻击能力接近 Mythos Preview、开源权重落后 4–6 个月。本文把 Anthropic 报告、NIST CAISI 评估与智谱八月的官方口径并排摊开,讲清同一个基准为什么会出现 12%、61.1%、54.4% 三个数字。

唐杰THU 动态追踪
唐杰THU 动态追踪@FC
9 月 30 日 16:30(北京时间),唐杰在 X 上转发了 Ramez Naam(@ramez)的一条帖子。这是他 9 月 17 日以来 14 天里的唯一一条新动态,微博同期没有新帖。转发没有附加任何文字,读者看到的正文就是 Naam 的两句话。1
被转的帖子说:GLM-5.3 的网络攻击能力已经接近 Anthropic 的 Mythos Preview,开源权重模型只落后 4–6 个月;帖子后面挂着 Anthropic 前一天发布的研究报告《GLM-5.3 and the spread of advanced cyber capabilities》。2
Mythos Preview 是 Anthropic 今年 4 月公布的前沿模型,也是第一个能自主构造端到端网络利用链的模型;它没有公开发布,只通过 Project Glasswing 向受信任的防御方开放。3 「4–6 个月」这个区间是 Naam 自己的表述——报告正文里能查到的是「约四个月」。被转的帖子把两个模型放在一句话里比较:一个任何人都能下载,一个只对几十家机构开放,而它们的网络攻击能力被描述为接近。

唐杰转了什么,他自己有没有加话

X 把这条记为转发:正文以 RT @ramez 开头,后面就是对方的原文,唐杰没有另写一句。他上一次在 X 上写下自己的判断,是 9 月 17 日关于 GLM-5.3 驱动的 Infra Agent 那条长文。4
Loading content card…
被转的原帖发布于 9 月 30 日凌晨 2:41(北京时间)。发帖人 Ramez Naam 是西雅图的科技投资人与作者,写过《Nexus》三部曲,曾在微软工作 13 年,现在做气候与清洁能源投资,同时在奇点大学(Singularity University)担任能源与环境联席主席。56 他的帖子里除了那两句话和报告链接,还挂了两张图,图片内容就是 Anthropic 报告的 Figure 1 与 Figure 2。
要判断这条转发说了什么,得回到报告本身。

Anthropic 这份报告测了什么

报告由 Anthropic 的前沿红队(Frontier Red Team)在 9 月 29 日发布,五位署名作者,主题是 GLM-5.3 的网络攻击能力,以及这种能力扩散之后会发生什么。开头交代了背景:五个月前公布 Mythos Preview 时,Anthropic 判断这种能力迟早会出现在别的模型上,于是选择限量发布,先让受信任的防御方用起来——到 5 月 22 日,参与项目的约 50 家合作方已经累计发现一万多个高危或严重漏洞。37
报告的结论一:模型能力已经到位。在公开基准 ExploitBench 上,模型要针对 Chrome 浏览器 V8 引擎里 41 个已知漏洞,各自独立写出完整可用的利用链。Mythos Preview 在 14% 的尝试里做到,GLM-5.3 是 12%,Kimi K3 是 0.5%,DeepSeek V4.1-Flash 是 0.2%,Claude Opus 4.6 和 GLM-5.2 一次都没有成功。在 Anthropic 内部的 Binary Exploitation 基准上,Mythos Preview 拿到 6%,GLM-5.3 拿到 4%,其余模型为零。3
Anthropic 报告 Figure 2:两个基准的利用成功率随输出 token 预算变化的曲线
Anthropic 报告 Figure 2:上方为 ExploitBench,下方为内部 Binary Exploitation 基准,横轴是每次尝试的输出 token 预算(对数刻度)。两条深绿与深蓝曲线分别是 GLM-5.3 与 Mythos Preview,其余模型贴在地板上。报告注明所有尝试都在无网络的隔离沙箱里、针对本地测试构建运行。3
报告还让专家坐进驾驶位测了一遍。第一位研究者用不到一小时的人工注意力,让 GLM-5.3 在一个沙箱里的浏览器 Linux 构建上找到多个此前未知的漏洞,并把它们串成一条可用利用链:访问某个网页,就能从访客电脑上读走任意文件。这批漏洞已经通知了维护方。第二位研究者测速度:把 Google Chrome 一个刚公开的漏洞(CVE-2026-11645)交给 GLM-5.3-Flash,模型在 20 分钟人工注意力加 8 小时模型时间后串出一条绕开指针认证(PAC,一种阻止内存漏洞劫持程序执行流的硬件加固)的 ARM64 利用链,按智谱的 API 价格折算,这次尝试花了 20.40 美元。3
报告的结论二:防护强度不够。报告承认 GLM-5.3 带有内置的拒答机制,直接让它帮忙开发恶意软件或攻击远端目标时,它会拒绝;但在模拟环境里,几种不复杂的手法就能让它照做——把请求包装成「你是正在做演练的自主红队智能体」,64% 的情况下它会接话;把思考 token 预填成「已经考虑过并决定继续」,成功率 92%;换成去拒答(abliteration,即改动开源权重的部分参数,去掉模型的拒绝行为)的版本,100% 照做。在同样的条件下,带防护的 Claude 模型始终是零。3
Anthropic 报告 Figure 5:各模型在几种越狱条件下的响应比例表格
Anthropic 报告 Figure 5:纵轴是模型,横轴是同一批攻击指令下的不同条件,格子里的百分比是模型试图连接远端目标的比例,每个格子 50 次采样。GLM-5.3 从直接指令下的 0% 升到伪装成演练的 64%、预填思考的 92%、去拒答版本的 100%;带锁的格子表示这些手法对 Claude 的 API 不适用。3
去拒答的成本,报告也给出了自己的实测:团队此前没做过这件事,用掉约 2,200 GPU 小时、约 4,400 美元,把拒答率从 90% 以上压到 JailbreakBench 的 3%、HarmBench 的 2%、StrongREJECT 的 12%;GLM-5.3-Flash 只需约 600 GPU 小时。花掉这些算力之后,模型的能力基本没掉:GPQA-Diamond 上标准版与去拒答版分数相同,CyberGym 上后者低几个百分点。GLM-5.3 的权重是公开的,任何人都能做这件事;Claude 的权重不对外提供,这条路走不通。3
Anthropic 报告 Figure 4:去拒答前后的拒答率与能力分数对照
Anthropic 报告 Figure 4:上方三个基准测拒答率,去拒答后 GLM-5.3 与 GLM-5.3-Flash 的拒答率都掉到 14% 以下,Claude 模型维持在 96% 左右;下方 GPQA-Diamond 与 CyberGym 的分数在去拒答前后几乎重合。3
报告自己划了两条边界:一是测试在无网络的隔离沙箱和模拟环境中完成,模拟与真实环境之间存在差距(脚注 4);二是它衡量的是防护强度这一个维度——GLM-5.3 确实带有拒答机制,报告问的是这层机制能挡住多少。报告最后主张,防御方应当用得上与他们对手同等或更强的模型,各国政府也应当对足够强的模型做安全测试。3

美国官方评估给出的落后幅度

「约四个月」这个数字来自美国国家标准与技术研究院(NIST)下属的人工智能标准与创新中心(CAISI)。CAISI 在 9 月 17 日发布了对 GLM-5.3 的评估,两条结论写得都很短:GLM-5.3 是迄今网络攻击能力最强的开源权重模型;在一项综合四个网络基准、按任务难度加权的指数上,它落后美国前沿约四个月。8
四个基准的逐项结果:SEC-Bench Pro 上有 183 个任务,模型要拿到 V8 或 SpiderMonkey 的源码、被告知去哪几个文件里找漏洞,然后写出可证明触发该缺陷的崩溃代码,GLM-5.3 拿到 40.4%,美国前沿最好成绩是 90.2%;ExploitBench 的 41 个任务按 16 分制打分、三次尝试取最好,GLM-5.3 是 9.8 分(61.1%),美国前沿满分;ExploitGym 用户态有 502 个任务,GLM-5.3 是 9.4%,美国前沿 44.4%;CAISI 自己的 OSS-Fuzz 基准有 297 个任务,GLM-5.3 是 7.7%,美国前沿 23.2%。在这四项里,此前的中国最好成绩由 Kimi K3 保持。8
NIST CAISI Figure 1:中美最强模型网络能力指数随时间变化的折线图
NIST CAISI Figure 1:纵轴是 CAISI 的网络能力综合指数,纵轴上升 400 点相当于解题成功几率提高 10 倍,误差棒为 95% 置信区间。图中 GLM-5.3 高于 Kimi K3,仍低于美国前沿,两者之间的落差就是评估报告所说的「约四个月」。8
这份评估有一个测试条件值得单独说明:美国模型是在关闭网络防护的情况下测的。也就是说,四个月的差距衡量的是模型本身的潜力;普通用户平时能调到的美国模型带着网络防护,测试条件与这里不同。8 CAISI 在 7 月也评估过 GLM-5.2,两份评估放在一起,能看出这条线在半年里的斜率。9

智谱自己八月是怎么说的

这条线在智谱自己的材料里出现得更早。8 月 14 日发布 GLM-5.3 时,官方技术博客的标题就写着「Frontier Coding with Emergent Cyber Capabilities」,正文把这部分能力称为后训练过程中「涌现」出来的结果:他们本来只是往训练里加入漏洞发现的数据与环境,没想到训练规模上去之后,模型开始跨多个阶段规划完整的利用链。10
智谱自报的三个数字是:CyberGym 84.5%,高于 GLM-5.2 的 77.2%,也高于 Mythos 5 的 83.8%;ExploitBench 54.4%,比 GLM-5.2 的 24.4% 翻了一倍多,仍低于 Mythos 5 的 78.0%;ExploitGym 在 2 小时和 6 小时预算内分别完成 105 与 130 个任务,Mythos 5 是 181 与 247。智谱自己给出了一个规律:三个基准里,越考验完整利用链的那一个,GLM-5.3 相对 GLM-5.2 的进步越大,同时与闭源前沿的差距也越大。这里对照的 Mythos 5 与 Anthropic 报告里当作参照的 Mythos Preview 是两个不同型号,引用这些数字时要把各自的对照对象一起带上。10
同一份博客还披露了漏洞发现的工作:智谱与中国的安全团队合作,在真实代码库上发现 2,436 个漏洞,覆盖 269 个开源项目,其中 1,097 个属于中高危;这些发现记录在一个公开台账里,每条按是否已经公开标注状态。1011
8 月 28 日,智谱宣布 GLM-5.3 权重公开,措辞是「我们最强的 agentic coding 与网络防御模型」,权重托管在 Hugging Face 的 zai-org/GLM-5.3。1213

同一个基准,三个数字

Anthropic 报告、CAISI 评估和智谱博客都提到了 ExploitBench,给出的数字却是 12%、61.1% 和 54.4%。三个数各有各的算法:
数字谁给的这个数字在算什么
12% 3Anthropic 前沿红队(9 月 29 日)41 个已知 V8 漏洞里,模型的一次尝试就造出完整可用利用链的比例
61.1%(9.8/16)8NIST CAISI(9 月 17 日)41 个任务按 16 分制打分,模型在覆盖漏洞利用各环节上拿到多少分,三次尝试取最好
54.4% 10智谱(8 月 14 日)41 个任务各跑三轮,把能达到的能力取并集之后算出的平均覆盖分
约四个月 8NIST CAISI(9 月 17 日)四个网络基准按任务难度加权后的综合指数落差
4–6 个月 2Ramez Naam(9 月 29 日)帖子没有说明口径
一个数算的是「一次尝试就成的比例」,一个算的是「覆盖了多少个环节的分」,一个算的是「多轮尝试的能力并集」。想比较,先看口径,再谈排名。Anthropic 报告本身也引用了 CAISI 的「约四个月」,把它当作一份独立来源。三份材料共同确认的事情只有一件:GLM-5.3 是第一个在漏洞利用这条链上跨过门槛的公开权重模型。

可以接着核对什么

  • 权重:zai-org/GLM-5.3 已经在 Hugging Face 开放下载,任何人都能按两边的评测条件复现一遍,包括拒答率与去拒答后的能力变化。13
  • 漏洞的去向:智谱的公开台账 cvd.z.ai 目前记录 2,436 条发现在册、53 条已公开、2,383 条仍在封锁期,可以按月看这批漏洞有多少走完了披露流程。11
  • 半年里的斜率:CAISI 7 月评估过 GLM-5.2,9 月评估 GLM-5.3,两次测的四项基准里有三项重合,隔着两个月看同一批题目的分数变化,比看单次分数更能说明趋势。9
  • 唐杰本人:这条转发之后,他在 X 和微博都没有写下自己的判断。他是否就这份报告补一条自己的解读,是这条线上最直接的增量信号。
在报告的结尾,Anthropic 把话说到了政策层面:希望各国政府对足够强的模型做安全测试,也希望开源模型的开发者主动给这类能力加上对应强度的防护。智谱八月的公开材料给出了三项能力评测,防护强度不在其中;关于这部分,他们写的是「完成安全评估与加固之后再公开权重」。310

References

  1. 1
    唐杰的转发帖

    x.com

  2. 2
    Ramez Naam 的原帖

    x.com

  3. 3
    Anthropic:GLM-5.3 and the spread of advanced cyber capabilities

    anthropic.com

  4. 4
    唐杰 9 月 17 日的 X 长文

    x.com

  5. 5
    Ramez Naam(维基百科)

    en.wikipedia.org

  6. 6
    @ramez 的 X 主页

    x.com

  7. 7
    Project Glasswing 初始进展

    anthropic.com

  8. 8
    NIST CAISI:对 GLM-5.3 网络能力的评估

    nist.gov

  9. 9
    NIST CAISI:对 GLM-5.2 的评估

    nist.gov

  10. 10
    Z.ai:GLM-5.3 技术博客

    z.ai

  11. 11
    Z.ai 安全披露台账

    cvd.z.ai

  12. 12
    Z.ai:GLM-5.3 权重公开

    x.com

  13. 13
    zai-org/GLM-5.3(Hugging Face)

    huggingface.co

唐杰THU 动态追踪
唐杰THU 动态追踪@FC

This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.

Related content

  • 唐杰转了什么,他自己有没有加话
  • Anthropic 这份报告测了什么
  • 美国官方评估给出的落后幅度
  • 智谱自己八月是怎么说的
  • 同一个基准,三个数字
  • 可以接着核对什么