
本期从 9 月 4 日三个指定公众号栏目收录 31 篇论文,按直接命中与邻近跟踪分层,比较长程 agent 的环境、记忆、信用分配和工具闭环,以及 TTS/语音评估的生成与验收边界;三个栏目没有播客生成或播客评估直接命中。
held-out 指训练过程没有使用的留出任务;TGC 是 task-goal completion;ESR 是端到端成功率;pass^k 指连续 k 次评估运行都完成;RSI 指同一个模型既构造又学习环境的闭环;OOS refusal 指对超出银行服务范围请求的拒答;KTAU 是 Kendall’s τ 秩相关系数;LLM judge 指用大模型做评分的裁判。下面每行只放一篇论文,数字都标明所属论文和比较对象。| 优先级 | 论文 | 研究线 / 真正改动的位置 | 核心可比结果 | 阅读风险 |
|---|---|---|---|---|
| 1 精读 | SimSkill | 自进化;技能与三类记忆 | DeepSeek V1 34→38/40,Qwen V1 13→23/40;GLM-5.2 无增益 | SUMO 自建集;LLM judge;重复次数未清楚报告 |
| 1 精读 | DRACO | 长视界训练;动态 rubric 与步级信用 | AppWorld_TN TGC 相对基座 +15.9pp;Tau-Bench SR 15.8%→20.4%(+4.6pp) | 单 frozen judge;训练变异性未刻画 |
| 1 精读 | Environment Evolution for Terminal Agents | 环境演化;改变训练环境与轨迹分布 | 相对各自 RL 起点(step-0 RFT)+14.4/+18.0pp;Qwen3.6-27B 峰值 71.5% vs co-evolution 62.9%,Qwen3.6-35B-A3B 为 64.9% vs 55.1% | 200 步 RL 仅一条曲线;同模型构造—学习闭环(RSI)尚未验证 |
| 1 精读 | Where Does Harness-Optimization Value Live? | harness 槽位;reflection/control 的预算归因 | ALFWorld control 槽 leave-one-in +0.119;整体 Δ+0.015、p=.480 | 单一 7B 骨干;WebShop 整体无显著增益 |
| 1 精读 | MemoryLACE | 记忆生命周期;替代、矛盾与出处 | BEAM 总运行时间 −66.6%;9B 在 10 类中 6 类超过最强基线 | GPT-5.5 / GPT-4o mini 单一评测链 |
| 1 精读 | FiMI Banking | 工具 RL;偏好优化与可验证奖励分工 | DPO 后 OOS refusal 52%→80%;RL 后 edge-case 0.509→0.718 | 合成银行场景;质量层 single judge/single run |
| 1 精读 | Spurious Advantage Hidden in GRPO | 奖励机制;消除组内组成造成的虚假优势 | Search Avg-6 37.80;比 StepSearch +1.36、比 Search-R1 +1.80 | 最佳 checkpoint 口径;seed 汇总未报告 |
| 1 精读 | Efficient Test-Time Adaptation through Human-AI Interaction | 测试时适应;context/weight 与 evolving rubric | solo success +4.5%–20.9%;30 名受试中 20 人进入了 context 或 weight adaptation 条件 | 单骨干;rubric 主要由单一 LLM 产生 |
| 1 精读 | Fresh Memory, Stale Plans | 状态一致性;计划 lineage 与 fail-closed | freshness-only 30/30 执行过期动作;PlanFence 30/30 无无效动作 | 受控安全/系统成本结果,不是一般准确率 |
| 1 精读 | VoxReason | 语音生成前规划;source-grounded verifier | 7B locality 0.141→1.000;grounded score 0.964 | 不评波形质量,也无人类听测 |
| 1 精读 | Is Semantics Enough for Speech Mean Opinion Score Prediction? | TTS 评估;语义与声学表征 | BVCC 最优 SRCC 0.882;BC2019 frozen SRCC 0.674 | 代表性数据集之外的泛化未证 |
| 1 精读 | Building and Evaluating Fixed-Voice Thai TTS from Synthetic Speech | TTS 生成;合成数据蒸馏 | Challenge keyword accuracy:学生/教师/Gemini 为 68.2%/72.8%/79.8% | teacher 与 Gemini 闭源;学生下载 URL 未报告 |
| 1 精读 | Alignment-Free Text-Audiobox | 语音生成;免对齐配音与全双工 | reranking 后内部配音 WER 4.05%→2.20%;长句 Human Likeness 3.86 | 内部基准;代码、模型和数据未公开 |
| 2 扫读 | Speculative Macro Commit | 工具运行时;隔离快照上的宏提交 | AppWorld 每任务耗时 −44.93%,TGC 70/168→68/168 | 单一模型对;近似提交有准确率代价 |
| 2 扫读 | DNative-Twin | 决策审查;图、重放与验证证据 | 受控 divergence recall 0→0.667→1.0 | 日志与受控注入;两名 LLM 标注者在 20 个案例上的 κ=0.5175 |
| 2 扫读 | Adapting to Evolving Requirements | workflow 适配;路由与模块级改写 | 三模型端到端成功率(ESR)总体从 72%–76%→79%–83% | 未给逐模型对应值;单一零售伙伴 |
| 2 扫读 | Making Every Tool Call Count | 工具监督;意图—证据—获取路径 | 平均调用 5.36→1.55;Search Avg 59.44 | 教师与 judge 依赖;OOD 工具仅一项 |
| 2 扫读 | Bioinfoysis Technical Report | 科学 agent;持久 artifact 与证据重规划 | BixBench 82.4%;去记忆 79.02%→56.59% | benchmark 修订;不同模型/数据口径不完全匹配 |
| 2 扫读 | Terminal-Universe | 环境数据;轨迹重构可执行 workspace | Terminal-Bench 2.1 +11.9 点;EvoCode MT@4 +13.8 点 | workspace sufficiency 依赖 judge |
| 2 扫读 | RL-ADA | 对抗自进化;world feedback | 12 个 held-out 场景 routing error 清零,PASS rate 翻倍 | 12 场景、两次运行;未验证生产闭环 |
| 2 扫读 | When Users Don't Ask | 对话记忆;检索与回应质量分离 | implicit/composed 最难;mem0 fact-used 0.366 vs AnchorMem 0.598 | 英文单语料;LLM judge |
| 2 扫读 | RuleMem | 记忆结构;规则抽象与 RPC 校验 | LoCoMo 全部问题 accuracy 比 14 个基线均值高 27.47pp | LongMemEval* 口径未核清;代码未报告 |
| 2 扫读 | What Else Needs Fixing? | 测试时计算;修订传播与三样本选择 | 相对单次推理,三样本选择提升 2.2–9.7pp | 需按选择器/产物类型读;数据含合成与单人标注 |
| 2 扫读 | Decoupled Analysis-Judging | 评测协议;先分析证据、后据证据判断 | CGPST 人类—LLM QWK 0.64 | 200 样本;分析阶段有规则记忆 |
| 3 邻近 | GPS-Bench | 评测近邻;证据化政策模拟 | actor impact macro-F1 0.604→0.673 | 政策域、英语和美国材料为主 |
| 3 邻近 | Legibility is Not Interpretability | 过程评测;从文本预测 step advantage | judge 超 prevalence baseline 但远低于 noise ceiling | 数学推理域;不直接测 agent 任务 |
| 3 邻近 | Judging LLM-as-a-Judge | judge 审计;rubric 与反事实 | 候选反转的预期 verdict reversal 仅 37.7% | 只测两个 rubric 域 |
| 3 邻近 | DuplexSpeechBench-IFEval | 语音 agent 评测;IAS/PAS 双轨 | persona-only 下 F-Actor/PersonaPlex IAS −9.7/−4.5pp | 英语、两轮、脚本化 TTS |
| 3 邻近 | StrixAE | 音频增强 agent;工具编排与感知奖励 | URGENT 2025 Track 1:DNSMOS 2.88、PESQ 2.64 | 不是生成评估;代码与数据未公开 |
| 3 邻近 | PACodec | 音频链路;并行 additive VQ | 1.4/4.2 kbps 条件相对基线约省 30% | codec 不是播客生成;代码未提供 |
| 3 邻近 | CRAW | 溯源;codec 鲁棒水印 | 未见攻击检测 F1 0.826–0.995 | 水印不是生成质量;约 150ms 额外延迟 |
DNative-Twin 把决策记录为可重放的状态、路径与授权图;Terminal-Universe 则把轨迹中的文件操作和任务意图重建成训练环境。DRACO 改的是 credit assignment:整条轨迹先有目标,再把分数按 rubric 引用分给步骤。Legibility is Not Interpretability 提醒,文字看起来清楚,不等于文本足以恢复真实步骤重要性。Speculative Macro Commit 改的是运行时,不改模型权重;Environment Evolution 改训练环境与轨迹分布;SimSkill 主要把经验固化为记忆和技能。SimSkill 让 agent 形成 procedural / semantic / episodic memory;HARNESSEVO 是 Where Does Harness-Optimization Value Live? 论文中的方法名,它演化 harness 的不同槽位;Environment Evolution 演化训练环境;TAHI 把跨会话反馈写入 context 或权重;RL-ADA 用 world feedback 让两个对话 agent 对抗协同进化。它们都可以称为闭环,但“是否更新模型参数”“是否改变环境”“是否只是改变 harness”必须逐篇写清楚。DRACO 的单 frozen judge、FiMI 的 single judge/single run、Environment Evolution 尚未报告的训练 seed,都直接决定证据上限。This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.