
从 Exa 的 ATLAS 把一次判分压到 0.0004 美元、Anthropic 把子代理的输入价压到每百万 0.10 美元,到微软把 Agent 的执行边界交给操作系统执行:这一周三条更新分别在定标准、定价钱、定边界。
判断一份 Agent 评测能不能用,我会问四件事:题目里有没有模型已经记住的答案;把被测的那一维单独降级之后,分数会不会掉;跑一题和判一题分别要花多少钱、判分能不能复现;最后,它给的是一个名次,还是「这个 Agent 能不能干这份活、换了模型以后还能不能」。ATLAS 用搜索降质实验回答第二问,用记忆率表和每 3 到 6 个月重生成回答第一问,用 0.0004 美元的判分成本和 98.6% 的重判一致率回答第三问。
给一个 Agent 定模型,我会算三笔账:主循环和子代理各占多少调用;便宜模型判错时由谁发现;换模型时上下文与技能能不能原样带走。Claude Haiku 5.5 把第一笔压到十分之一的量级(10 万 token 以内的输入每百万 0.10 美元、输出 0.50 美元,还带 effort 档位),后两笔不会跟着降价:它换了分词器,同一件工作会多算一些 token,护栏也收得更紧。这里的工程难点是让每一步都能被替换。
--audit,官方明确警告它会关掉该负载的全部沙箱安全,只能用来分析可信工具、不能拿来跑不可信代码。8给 Agent 设计执行边界,我会分四步回答:策略由谁声明、由谁执行;边界按哪几类资源划;第一次上线怎么在不先把权限放大的前提下把策略写对;出事之后怎么定位到是哪个 agent 干的。微软这周的答案是:开发者与 IT 声明、平台在 agent 够不着的地方执行;按容器、进程、文件系统、网络、界面五类划;先用记录模式跑一遍再切执行档;身份交给 Entra 与 Agent 365 单独记账。
| 更新 | 地图模块 | 关键机制 | 面试抓手 |
|---|---|---|---|
| Exa 发布 ATLAS,2026-10-08;Dreadnode 发布 ScopeBench,2026-10-06;Hack The Box 发布 AI Range Enterprise Edition,2026-10-061 | ⑦ 评测与指标(兼⑥) | 用搜索降质实验证明分数来自被测那一维;记忆率与饱和单列并定期重生成;跑一题与判一题两笔账分开报;守范围用配对任务让「做成」等于「越界」 | 评测四问:有没有已被记住的答案、降级那一维分数掉不掉、两笔账各是多少、给名次还是给岗位胜任 |
| Claude Haiku 5.5,2026-10-074 | ② 模型层(兼③) | 子代理是调用量最大的一层,价格决定并行路数;agent 与模型解耦,让每一步都能换;便宜模型把验证负担与护栏档位带进选型 | 多模型三笔账:调用占比、判错由谁发现、换模型时上下文能否带走 |
| Microsoft Execution Containers 正式可用,2026-10-077 | ① 目标与任务边界(兼⑤⑥) | 策略由开发者声明、由平台在 agent 之外执行;学习与宽松模式先观测再收紧;容器管「能做什么」、身份管「是谁做的」 | 边界四问:谁声明谁执行、按哪几类资源划、上线怎么把策略写对、出事怎么定位到具体 agent |
anthropic.com
aws.amazon.com
github.com
This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.