
八组材料的读数都由同一件事决定:量它的那次测试带了什么条件——换一套题、换一次重复次数、换一次缓存命中,结论就翻面。
| 任务 | 测试对象与运行条件 | 关键数字 | 主要限制 |
|---|---|---|---|
| 1 万亿的新旗舰发布了什么 | Mistral Large 4 公开预览(10 月 6 日),公告与模型页、第三方当日拆解 15 | 公告写 49B 激活、模型页写 52B 与 1.6B 视觉编码器;输入价并排列着 $1.36 与 $0.68;自称 cyber 测试 82%、Cybench 93% 为全场最高 26 | 全部分数由厂商自报;权重月底才放、许可未定;RL 训练仍在进行 5 |
| 从 100 个已知漏洞的 PR 里找得出几个 | BugBunny 的 VulnPR-100:100 个带已知漏洞的 PR,每个 1 小时,走同一套评测 3 | ML4 找到 35/100、$53.91;GLM-5.3 32 条 $81.91;小米 mimo-v2.6-pro 46 条 $8.27;DeepSeek V4.1 Flash 44 条 $12.79;单条成本 $1.54 3 | 5 个 review 撞满 1 小时上限;被测模型仍是 preview,作者说等权重落地后重测 3 |
| 一台 4090 能不能当语音助手 | Speakrail 全本地双工语音 agent,RTX 4090,端到端本地跑 7 | Full Duplex Bench v3 上 pass@1 0.52、工具选择 F1 0.915、任务完成 3.92 秒;GPT-Live-1 加 Astra 为 0.55/0.835/8.47 秒 7 | 只在 4090 上测过;TTS 许可证限商用;上下文 16k;作者自陈微调让模型变笨 8 |
| 小模型配一块大查表 | 21M 参数模型配 1,680 万行查表(表内 6.4B 参数),每 token 取 33M;对照是同 5 亿 Wikipedia token 训出的 114M 稠密模型 9 | 4-bit 表放 NVMe SSD、显存 0.4GB 时约 140 tok/s;写出的英文流利但事实是编的;给现成模型(Qwen3.5-0.8B)加表无效 10 | 规模小、大跑动只有单种子;读长提示时每漏一行要读一整页 4KB 9 |
| 给三值化的 27B 重训草稿 | PrismML 的 Ternary Bonsai 2 27B,L4/M4 Pro/浏览器三种运行时;用 150 万 token 的模型自产文本重训 DFlash 2 草稿 11 | L4 上 GSM8K 2.17x、MBPP 2.17x、MATH-500 2.20x;代码编辑叠 ngram 后 3.15x;M4 Pro 1.5x;浏览器 1.18x 11 | 数字只来自一台 L4 与一台 M4 Pro;聊天与散文基本无收益;原草稿在 bf16 模型上训练 12 |
| 同一个 agent 跑 20 遍还剩多少 | ThinkingBox:507 道有状态业务题,每题重复 20 次,只按终态数据库判分,12 个模型共 121,680 次有效尝试 4 | Opus 5.5 单次 67.16%、20 次全对 241 题(47.53%);GPT-6 Astra 58.31%/231 题;Kimi-K3 至少做对一次 93.89%、20 次全对 68 题 4 | 题目为客户不真实的合成重建;成本是按标价估的指数、不是账单;同一模型跨领域差异极大 4 |
| 长对话里等的是模型还是缓存 | Mac mini M5 Pro 64GB,Qwen3.8-27B 的 4-bit MLX 版,OpenClaw 里手工聊 21 轮,APC 前缀缓存 4GiB 调到 6GiB 13 | 第 13 轮输入 34K、复用 32.8K,约 5 秒出字;第 21 轮输入 66.5K、未命中缓存,232 秒才出字;长对话出字约 8 tok/s 13 | 作者自陈中途改过配置,属使用记录而非对照实验;新检查点还出现过保存失败 13 |
| 一张 32G 卡能放下什么 | RTX 5090 32GB、Ultra 7 265KF、64GB 内存上把 27 个权重全量测试,按 7 个可测档位与 470GB 称重 14 | 档位从 5.96G 到 22.1G;只有 8.87G 以上带视觉组件;同一档位写文章 120 tok/s、好猜的输出 880 tok/s;另一支引擎上 25G 稠密 53 tok/s 对 23G MoE 302 tok/s 14 | 未给引擎版本与提示词;上下文 26 万与装载 104 秒是单次记录 14 |



mistral.ai
docs.mistral.ai
mp.weixin.qq.com
ollama.com
reddit.com
github.com
reddit.com
github.com
reddit.com
huggingface.co
xiaohongshu.com
xiaohongshu.com
thenewstack.io
github.com
reddit.com
reddit.com
This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.