
严格 24 小时窗口内仅 1 条达标信号:Anthropic 员工解释 Opus 5 在 FrontierCode 上为何可能出现 medium effort 高于 high effort,并把关键原因指向任务范围与评测规则。
「Opus 5 has a better FrontierCode score at medium effort than higher effort - despite increasing performance with effort on other evals. Why?」中文:Opus 5 在 FrontierCode 上的 medium effort 得分高于更高 effort,尽管它在其他评测中的表现会随 effort 提升而上升。为什么?2
「After looking into this with Cognition, we found it’s because some grading criteria penalize out-of-scope edits. In some tasks at high/xhigh effort, Opus 5 does more than the task requires, i.e. refactoring.」中文:与 Cognition 调查后,我们发现原因在于某些评分标准会惩罚超出范围的修改。在一些任务中,Opus 5 使用 high/xhigh effort 时会做超出要求的事情,例如进行重构。4
| 账号 | 窗口内新发言 | 时间与处理 |
|---|---|---|
| @AnthropicAI | 无 | 未发现窗口内新帖 |
| @claudeai | 无 | 未发现窗口内新帖 |
| @DarioAmodei | 无 | 未发现窗口内新帖 |
| @karpathy | 无 | 未发现窗口内新帖 |
| @ch402 | 无 | 未发现窗口内新帖 |
| @AmandaAskell | 无 | 未发现窗口内新帖 |
| @bcherny | 无 | 未发现窗口内新帖 |
| @mikeyk | 无 | 未发现窗口内新帖 |
| @DanielaAmodei | 无 | 未发现窗口内新帖 |
| @jackclarkSF | 有 | 7 月 25 日 11:00:22;原创,家庭生活内容,503 赞、3 次转发、19 条回复;剔除 |
| @nottombrown | 无 | 未发现窗口内新帖 |
| @janleike | 无 | 未发现窗口内新帖 |
| @_catwu | 无 | 未发现窗口内新帖 |
| @trq212 | 有 | 7 月 26 日 00:20:32;转发 @jerhadf 的 Opus 5 / FrontierCode 线程,0 赞、35 次转发、0 条回复;并入主信号,不单独计数 |
| @Mike_A_Merrill | 无 | 未发现窗口内新帖 |
| @EvanHub | 无 | 未发现窗口内新帖 |
| @ErikJones313 | 无 | 未发现窗口内新帖 |
| 账号 | 窗口内新发言 | 时间与处理 |
|---|---|---|
| @noahzweben | 有 | 7 月 25 日 10:23:47;原创,Opus 5 示例讨论,93 赞、5 次转发、2 条回复;低信号观察 |
| @karan_sampath | 无 | 未发现窗口内新帖 |
| @lydiahallie | 有 | 7 月 26 日 03:22:35;原创,询问用户使用 Opus 5,256 赞、9 次转发、139 条回复;低信号观察 |
| @amorriscode | 有 | 7 月 26 日 02:51:02;转发 @alex_erm 的 Opus 5 图像测试摘录,0 赞、118 次转发、0 条回复;原文细节截断,未纳入主榜 |
| @IsabellaKHe | 无 | 未发现窗口内新帖 |
| @OmidMogasemi | 无 | 未发现窗口内新帖 |
| @alicelovescake1 | 无 | 未发现窗口内新帖 |
| @lamismukta | 无 | 未发现窗口内新帖 |
| @yanda_chen_ | 无 | 未发现窗口内新帖 |
platform.claude.com
x.com
x.com
x.com
x.com
x.com
x.com
This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.