
本期实测覆盖同题网页版 GTA 游戏中单 Agent 与 32 Agent 的耗时与交付手感分水岭、本地双卡下 Qwen3.8 推测解码器在代码与散文中的速度翻转、逆向抓包揭示的小米 MiMo 自动化路由与思考过度代价、科研全链路复现与 100k 上下文吞吐陷阱,以及 SWE-2 在新旧评测集间的 65.5 分断崖。
| 任务类型 | 对比对象与版本 | 核心结果与优势项 | 成本与速度表现 | 关键局限与分歧 |
|---|---|---|---|---|
| 网页 3D 开放世界小游戏 | GPT-6 Astra(单 Agent)vs Claude Fable 5.1(32 Agent 编排)1 | Astra 交付了可直接操作的 3/4 俯视角小游戏,车流与碰撞逻辑完整 | Astra 耗时约 55 分钟(7.23M tokens);Fable 耗时 6 小时 15 分钟(4.58M tokens) | 单次提示词测试(n=1);Astra 短时间算力脉冲极高;社区对其长期可维护性存疑 |
| 本地推测解码 Drafter 选型 | Qwen3.8-27B 在 SGLang 下对比 DFlash2 与 DSpark 2 | 代码任务中 DFlash2 领跑,散文任务中 DSpark 胜出,工作负载决定最优候选器 | 代码:DFlash2 达到 187 tok/s(提升 39%);散文:DSpark 达到 67 tok/s 且零弱批次 | AWQ-INT4 量化噪声干扰扩散选择器;两类生成器对隐藏层特征依赖机制不同 |
| 客户端思考调度与逆向抓包 | 小米 MiMo 桌面端(OpenCode 二次开发)vs GLM-5.3-Flash 3 | MiMo 简单任务仅需 1.3 秒,完成 14 万 token 检索耗时 5.4 秒 | MiMo 响应速度比 GLM 快 5 到 10 倍;本地 157MB ONNX 模型按难度分流 | 客户端完全静默忽略 9 种思考参数;GLM 深度思考在数学题上思考 4 万字符全错 |
| 端侧科研流水线与长上下文 | Qwen3.8-27B vs 3.5/3.6-35B 系列及 Flash-Next 4 | 27B 在 5 项应用科学任务中展现出极高的细节捕捉力,token 消耗降低 22%~33% | 硬件内存占用更低;相比云端 GLM-5.3 API 质量差距极微 | 总物理墙钟时间拉长 3 到 4 倍;Flash-Next 上下文超过 100k 时吞吐跌至 12~18 TPS |
| 框架换壳分差与基准断崖 | Cognition SWE-2 跨版本评测与 DeepSeek V4.1 框架横评 56 | SWE-2 在旧榜获 92.8%,在新榜仅 27.3%;同模型在 mini-SWE 框架下代码得分最高(74.2%) | SWE-2 步数减少 58%,成本降 81%;框架切换带来 8.7 个百分点分差 | 固定题库存在过拟合;不同测试任务对框架复杂度需求相反 |
reasoning_effort、enable_thinking 等 9 种常见的思考控制参数时,服务端统一返回 200 状态码,但在模型实际推理行为上呈现零差异。模型思考过程完全交由服务端自适应判定:简单问题仅思考 1 个字符,复杂问题自动扩展至 2 万个字符 3。mimo-auto 路由在服务端并不存在,而是由客户端内置的一个 157MB ONNX 模型在本地执行前置意图分类。当分类器判定任务简单且置信度大于等于 0.9 时,请求直接流向 Flash 模型,其余请求自动派发至 Pro 模型 3。-ts 26,10),其实测 Prompt 预填充速度保持在 130~200 TPS,而实际文本解码生成速度同样回落至 14~22 TPS 区间。这为本地硬件运行长程任务划定了真实的吞吐底线。xiaohongshu.com
xiaohongshu.com
This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.