
本期从 9 月 15 日三个指定栏目 309 篇论文中分层收录 45 篇,重点解析长程评测的三类口径失真、自进化的模块化分解与低成本回放,以及无参考语音质量指标在干净音频上的失效与奖励反噬。
| 优先级 | 层级 | 论文(英文原题 · arXiv ID) | 改动位置(维度) | 核心可比结果(含比较对象与口径) | 阅读风险与证据局限 | 入口 |
|---|---|---|---|---|---|---|
| 1 | 直接命中 | DynSTEER: Dynamic Stage-wise Trajectory Evaluation and Execution-time Review for Agents · 2609.14637 | 评测协议;阶段化里程碑图与执行时早停 | ToolSandbox 509 场景 × 4 模型:区分度(可被稳定区分开的模型对占比,ε=0.01)0.0270→0.0500,可分模型对 5/6→6/6(配对 Wilcoxon p<0.01);蓝图微 F1 86.0%、雷区 F1 86.7%;早停节省 34.51% 的执行进度;净收益按失败类型分开:死锁类每次运行净省 63.05 秒,低分策略类每次运行净亏 3.81 秒 | 单一基准;评测基于同批轨迹重放而非新 rollout;三个组件无逐项消融;未报告运行次数与种子 | AI 栏 · arXiv |
| 1 | 直接命中 | Policy Loopholes in Agent Evaluation: When Policy Ambiguity Masquerades as Agent Error · 2609.14400 | 评测效度;自然语言策略的漏洞分类与审计 | τ²-bench 航空 50 题、零售 114 题 × 3 模型 × 4 次共 1,968 次运行:17 处漏洞,7/50 航空题受影响,受害题平均 37% 对无漏洞题 51%;GPT-5 被扣 32.4 个百分点;跨次方差 1.62 倍;后续基准改动集包含全部 7 题(超几何 p=1.6%) | 采样温度与模型精确版本未报告;漏洞清单由作者人工审计得出 | NLP 栏 · arXiv |
| 1 | 直接命中 | MTAC-IFBench: Benchmarking Instruction-Following in Multi-Turn Agentic Coding · 2609.14992 | 评测基准;多轮渐进式约束遵循 | 100 个实例、9,133 条约束、平均 7.04 轮:11 个模型约束满足率 60.6%–80.4%,增量约束满足率只有 1.1%–12.7%(均为百分数口径),多数模型第 6 轮后归零;判官一致性 0.855–0.924 | 无种子与显著性检验;评测绑定单一智能体框架版本 | NLP 栏 · arXiv |
| 1 | 直接命中 | Same Patient, Different Order: Action-Level Reliability of Clinical LLM Agents Under Repeated Runs · 2609.13582 | 评测协议;重复运行下的动作级稳定性 | MedAgentBench 1,000 次运行(4 组 × 250,每组重跑 5 次):Llama@0.7 的 43/43 组医嘱集合逐次不同,而 22/43 组判定完全不变;首轮即分歧 12/28、40/49、27/35、50/50;报告 Wilson 区间、McNemar+Holm 与簇 bootstrap | 作者明确「协议可迁移、比率不可」;论文声明的代码仓库在核验时返回 404 | NLP 栏 · arXiv |
| 1 | 直接命中 | Root-Cause Attribution Is a Search Problem: Continual Search for Long-Horizon Agent Failures · 2609.13463 | 失败归因;把根因定位重构为跨轮搜索 | 自建 50 条长轨迹(中位 286K token,中位记录 1.05 MiB):F1 0.349→0.498;TRAIL 加权 F1 0.426→0.500;同一判官改用自一致性每次多花 6.52 美元/轨迹,却把联合准确率从 0.153 压到 0.138;工件覆盖率 70.8%→97.4%(对照组停在 77.0%) | 除 TRAIL 的 4 次重复外均为单次运行;新建数据集未公开;短轨迹上明确退化 | AI 栏 · arXiv |
| 1 | 直接命中 | Do Not Restart: Residual Completion for Stateful Agent Handoffs · 2609.13800 | 有状态交接;承诺约束下的残差补全 | 5 个有状态评测面、每面 5 次完整运行:宏平均质量 +1.2 点、成本 34.6%(另一模型组合 +0.9 点、22.0%);四段消融 58.9%→62.0%→65.4%→70.8%,成本 68.82→38.80 美元;124 次干预 100% 发生在首次真实写操作之前 | 未报告每个评测面的任务数;成本为供应商侧支出、不含延迟;代码仅承诺开源 | AI 栏 · arXiv |
| 1 | 直接命中 | When Agents Slow Down: Understanding LLM Agents' Test-Time Strategies via Elo-per-token Analysis · 2609.15309 | 测试时算力评估;Elo-per-token 与预算分配 | 14 个任务 × 4 个智能体系统 × 每单元 5 个 session、目标预算 1 亿 token:各系统局部斜率初期超过 400 Elo/decade 后跌破;拐点分配在 1 亿预算下比单次长 session 高 +264、比十次短 session 高 +355 Elo(90% 自举区间 [+135,+412] 与 [+226,+618]) | 每任务仅 5 个 session,增益区间很宽;含缓存与不含缓存两个 token 口径不可混比;原始 trial 数据尚未发布 | NLP 栏 · arXiv |
| 1 | 直接命中 | Asclepius: An Adaptive Harness for Long-Horizon Clinical Agents · 2609.13543 | 长程临床智能体;自演化 harness 与技能库 | 10 个批次、120 位患者、72 轮:关键动作 +0.73(+25%,p<0.001)、留出集 +0.625(+22%,p=0.024)、时效性 +0.45(+13%),诊断准确率不变(−0.02,不显著) | 单次 rollout、无种子;论文声明的代码仓库在核验时返回 404 | AI 栏 · arXiv |
| 1 | 直接命中 | ModularRSI: Modular and Generalizable Recursive Harness Self-Improvement · 2609.14857 | 自进化;五模块分解与基准解耦的 harness 演化 | 2,000 条自建演化任务(实取 120+120)、3 轮:终端基准平均成功率 47.57%→52.43%、Pass³ 30.34%→35.96%;软件工程基准 73.40%→76.45%;终端任务上演化出的 harness 冻结后跨域仍 73.40%→75.80%;非模块化 46.44%、五模块联合 44.19% 都低于基线 47.57% | 无种子、方差与显著性检验;受算力限制只用了演化集的 12%;对照方法为作者在自家框架下的复现版本 | NLP 栏 · arXiv |
| 1 | 直接命中 | Dream-RSI: Recursive Self-Improvement through Evolving Worlds · 2609.14858 | 自进化;把发现树当回放模拟器做离线改进 | 零梯度步、只改探索策略代码:Lasso 六数据集平均运行时间 3587.1→2931.0 ms、调用 550→317;小模型 2516.7→2350.6 ms、3200→1879;kernel 四项 2.43×/1.79× 更少 generation、2.09×/1.44× 性能 | 无重复与方差;数学对照表数字取自各系统原报告,模型与预算都不同故不可比;回放只覆盖历史到达过的分支;完整代码仍在准备中 | NLP 栏 · arXiv |
| 1 | 直接命中 | RSIAgent: Autonomous Exploration for Recursive Self-improvement in New Environments · 2609.15364 | 自进化;只改记忆的探索与固化解耦 | 模型参数全程冻结:OSWorld 2.0 的 82 个任务平均 71.97→78.98、满分比例 37.80→42.68;ALE 的 67 个任务 83.75→84.82、49.25→50.75;四任务消融完整版 74.54% > 只保留先广 65.52% > 只保留后深 56.50% | 跨系统对比不是同协议;聚合只替换 41/82 与 19/67 个分数;满分比例仍低于对比系统 52.24;消融只覆盖 4 个任务 | AI 栏 · arXiv |
| 1 | 直接命中 | The Limits of Reference-Free Speech Quality Metrics as Evaluators and Rewards on Modern Text-to-Speech · 2609.13150 | TTS 评估与奖励;无参考指标效度审计 | 6 个人评语料、64 维信号:伪影与录音缺陷密集语料上 SCOREQ 成对偏好准确率 0.909(该语料人类上限 0.887),干净商业语料上最佳单指标 0.528(上限 0.764),而「选更长的那段」有 0.524;域内校准组合相对最佳单指标 +1.5%~+6.6%;用 SCOREQ 当奖励把独立 UTMOS-v1 从 4.51 压到 1.26、人评 Elo 2098±101→1675±115 | 奖励实验每种奖励只跑一次、无种子与检验;语料自述偏英语;干净语料只含 4 个商业系统、18 个声音 | 音频栏 · arXiv |
| 1 | 直接命中 | Tone on a Budget: A Reference-Free Metric for Lexical Tone in Massively Multilingual Text-to-Speech · 2609.14817 | TTS 评估;声调轴的无参考度量与数据预算核算 | 声调准确率:阈值冻结后在不重合划分上 0.580(置换控制 0.334)、原生录音锚点 0.596(满分 1);声调逐级压平时度量 0.543→0.333(随机水平 0.333) 而字错率 0.084→0.110 几乎不动;盲听 67 次 89.6%(95% CI 80.0–94.8);度量与听者逐次对应 AUROC 0.612(区间含 0.5) | 只有 3 名听者、27 条探针(作者自算条目半宽约 ±0.063);声称发布度量与协议但全文无可点击链接;逐次对应是未解决的负结果 | NLP 栏 · arXiv |
| 1 | 直接命中 | Cross-Lingual F5-TTS 2: A Simplified Framework for Language-Agnostic Voice Cloning · 2609.15184 | TTS 生成;去强制对齐与去提示转写 | 说话人相似度在三个语内测试集上都是最高 0.687 / 0.683 / 0.768;字错率只在 LibriSpeech-PC 最低 2.014,Seed-TTS 中英为 1.629 / 1.594,高于基线 1.545 / 1.475;带静音提示下的时长相对误差 70.211%/70.984%/85.491% 降到 13.154%/15.364%/18.933% | 单次运行、无方差与检验;主观评测只抽 15 条/测试集且未报听者数 | 音频栏 · arXiv |
| 2 | 直接命中 | MemRiskBench: Trace-Aware Risk-Preserving Evaluation for Long-Horizon LLM Agents · 2609.14976 | 评测基准;轨迹级风险检查与子集选择 | 120 个脚本化 episode(5 类风险各 24)配确定性轨迹检查、主判定不用大模型裁判:5 个 1.5B–7B 模型共 600 条轨迹的平均任务成功率为 0.775–0.885(满分 1),而最差的跨域泄漏只有 1/24(4%);20% 子集相对全量评测保持排序 Spearman 0.975、风险覆盖 1.0,计算量降 5 倍 | 每个模型只跑一次;只覆盖脚本化环境 | AI 栏 · arXiv |
| 2 | 直接命中 | When Tool Calls Succeed but Workflows Fail: Anomalies at the Agent-Tool Boundary · 2609.15397 | 工具边界;外部效果异常分类与接口能力普查 | 纯分析性工作(原文自述未调用任何工具):给出 8 类外部效果异常,普查工具注册表快照的 98,291 个工具,74.0% 至少写了一类注释字段、61.7% 写全四个,而八类异常所需的边界能力「无一可被完整表达」 | 无实验、无种子、无消融;普查快照时点固定 | AI 栏 · arXiv |
| 2 | 直接命中 | Salesforce Koa: An Enterprise Language Model for Agentic Tool Use · 2609.15066 | 长程任务训练;规格驱动的强化学习后训练 | 120B 级基座上做规格驱动 GRPO:τ²-Bench 加权 69.41,高于 GPT-4.1 14.9 分,仍低于 Opus-4.8 的 74.00 与 GPT-5.5 的 83.99;多轮工具调用 54.12→59.50,而监督微调后反而下降;CRM 场景 0.86 | 训练数据规模、rollout 预算、种子与统计检验均未报告;无权重或模型卡链接 | NLP 栏 · arXiv |
| 2 | 直接命中 | HISPO: Hierarchical Importance-Sampling Policy Optimization with Entropy-Derived Segments · 2609.15471 | 长推理强化学习;熵导出分段的重要性采样 | 1.7B 基座 + LoRA、7,500 道数学题、单卡约 570–645 GPU 小时:AIME25 Acc@8 为 8.33 对 GSPO 的 5.83,Pass@8 为 17.46 对 16.19;MATH500 68.00 / 81.25 | 配对自举区间多跨零(宏 Pass@8 增益 +1.31,区间 [−1.41,+4.15]);无多训练种子;无公开代码 | AI 栏 · arXiv |
| 2 | 直接命中 | Atria Dawn: The Dawn of Agentic Superintelligence · 2609.15818 | 长程任务训练;可验证经验管道 | 744B 混合专家模型:16 个基准中 5 项最高(自动化 53.8、工具调用 77.0、深度检索 96.0、浏览检索 92.5、网络攻防 86.5)、3 项第二,其余 8 项明显落后;769 条人机协作记录中 33.2% 的已完成任务被认为「无 AI 不可行」 | 训练数据、算力与超参均未报告,性能取自官方发布页;栏目摘要「在 16 个基准中表现领先」属过度概括 | AI 栏 · arXiv |
| 2 | 直接命中 | AlgoEvo: Self-Evolving Agentic Search for Automated Algorithm Discovery · 2609.15820 | 自进化;搜索控制权与分层经验、技能库 | 统一协议、6 个任务、3 个种子、每种子 500 次评估上限:TSP 用 39 次评估、2.9M token 达到 5.986 / 7.007,四个对比方法都吃满 500 次;多组件任务用掉 271–275 次;组件消融经验库 +0.66%、技能库 +0.58%、情境触发注入 +0.21% | 无显著性检验;多组件任务并不提前收敛;FJSP 训练值略劣于对比方法;无公开代码链接 | AI 栏 · arXiv |
| 2 | 直接命中 | SkillLift: Learning Dense Rubrics from Sparse Oracles for Efficient Skill Evolution · 2609.15396 | 自进化;用排序监督替代绝对分数以压低预言成本 | 两个基准 × 3 个骨干全部第一:WildClaw 50.3→68.4、SkillsBench 29.9→62.5;token 成本为对比方法的 1/2.68–1/2.62 | 仅 3 个 rollout 种子;无置信区间与显著性检验 | AI 栏 · arXiv |
| 2 | 直接命中 | MOSCOPT: Mixture-of-Skills Collective Optimization for LLM Agents · 2609.14399 | 自进化;技能池与门控的联合无参数优化 | Qwen3.6-Plus 上五个基准均值 74.1,高于最强单技能基线 71.5;关掉三阶段交错更新降到 67.3,是最大降幅 | 无方差与显著性检验;原文已收录 PRICAI 2026(栏目摘要未提) | AI 栏 · arXiv |
| 2 | 直接命中 | GeoSkill: Experience-Driven Hierarchical Skill Learning with Collaborative Revision for Geospatial Agents · 2609.13667 | 轨迹到技能;分层技能库与协同修订 | 强骨干上 EarthBench 79.03 对 ReAct 的 58.06,小骨干 41.13 对 11.29;消融 65.32→72.58→79.03 | 无种子与方差;未提供代码 | AI 栏 · arXiv |
| 2 | 直接命中 | EMR: Self-Evolving Medical Multi-Agent System via Experience Mining and Reuse · 2609.15161 | 自进化;三级经验库的双向挖掘 | 小骨干均值 77.8→81.1、强骨干达 93.9;去掉经验库 −6.7%、去掉原则级 −4.6%;3 次独立运行取平均 | 无置信区间与显著性检验;未提供代码 | NLP 栏 · arXiv |
| 2 | 直接命中 | Learning to Coach for Experiential Learning · 2609.15851 | 轨迹学习;训练教练、冻结执行者 | 用「执行者作答正确性」作 GRPO 奖励:FrozenLake 7.4→65.4、Sokoban 3.8→23.6;迭代教练优于把解码预算翻倍(82.6 对 77.0) | 环境为小型规划类;未报方差与显著性 | NLP 栏 · arXiv |
| 2 | 直接命中 | DiTAR+: Dual Optimization for Robust Autoregressive Diffusion Speech Synthesis · 2609.13909 | TTS 生成;膨胀上下文采样与分层声学掩蔽 | 中文困难集词错率 12.478%→9.893%;25–35 秒长句相似度 0.741→0.759、词错率 2.778%→2.173%;10 名评测员的主观评测有对照,但自报质量分 3.82 略低于自身基线 3.88 | 未报告参数量;无方差与显著性;无代码链接 | 音频栏 · arXiv |
| 2 | 直接命中 | CAL-MOS: Bridging Layers with Adapters for Robust MOS Prediction Across Speech Foundation Models · 2609.14956 | TTS 评估;跨骨干的逐层适配器聚合 | 10 个语音基础模型 × 4 个 MOS 数据集:最佳层强依赖骨干与数据集,朴素层加权不稳定;逐层适配器加平均池化在 utterance 层平均 0.388 / 0.749、system 层 0.052 / 0.932 | 数据集规模与语言、重复次数、方差全部未报告 | 音频栏 · arXiv |
| 2 | 直接命中 | StepAudio 3 Realtime Technical Report · 2609.14005 | 实时语音生成与交互系统 | 约 196B 总参数、11B 激活;识别端 LibriSpeech test-clean 词错率 1.18;全双工子集总体 98.9(轮次接管 100.0);多 token 预测 1.76×–2.05× 加速;任务型 56.0%,低于对比系统 56.5% | 无人工听测;无重复与显著性;训练数据规模与语种未报告;自建基准由同一团队造题与判分 | 音频栏 · arXiv |
| 2 | 直接命中 | The VoiceMOS Challenge 2026: Evaluating Speech Enhancement, Emotional TTS and Accented TTS Systems · 2609.13792 | TTS 评估;公开赛道体系与自动 MOS 预测 | 18 支队伍、19 份提交(三个赛道 4 / 8 / 7 份,其中一支队同时参加两个赛道):语音增强赛道全部超过基线,最佳单样本 0.779、最佳成对只有 0.487;情感 TTS 最佳自然度 0.785、最佳情感 0.758;口音赛道最佳队伍正文未给数值 | 每队一次提交、无方差与检验;口音赛道分数只在图中;原文把长音频评测列为未覆盖方向 | 音频栏 · arXiv |
| 2 | 邻近跟踪 | Grounded in Sound: Reinforcement Learning with a Frozen Acoustic Judge to Curb ASR Insertion Hallucinations · 2609.14455 | 语音识别后训练;冻结声学评判器作奖励(连接点:把声学证据锚进奖励) | 0.3B 冻结字符级 CTC 判分器增强 7B 模型的 GRPO 奖励:AMI-IHM 插入错误 −28.3%、AMI-SDM −22.3%;只有 AMI-SDM 的词错率显著下降(35.89%→34.71%,另一子集 −0.42 的区间含 0);三种子与会议级簇 bootstrap | 栏目摘要把 28.3% 与「降低词错率」并成一句,实际只在部分子集显著;判分器替换与人工标注未做 | 音频栏 · arXiv |
| 2 | 邻近跟踪 | Causal Analysis and Mitigation of Spurious Onsets in Full-Duplex Speech LLMs · 2609.13445 | 全双工语音;静音下自发开口的因果分析与抑制 | 5 分钟数字静音下两个模型分别出现 12/40 与 11/40 次自发开口,累积发生率 30.0% / 27.5%(95% CI 16.6–46.5%);单帧概率跃升超过 9 个数量级;用因果反事实散度阈值在留出种子上抑制 13/13 与 9/9 且保留全部 40/40,95 分位决策耗时 45.60 / 60.61 ms,落在 80 ms 帧预算内 | 只覆盖两个全双工模型;抑制为推理期干预,长对话累积效应未评估 | NLP 栏 · arXiv |
| 2 | 邻近跟踪 | Enabling Streaming User Transcription in Full-Duplex Speech-to-Speech Models · 2609.15759 | 语音到语音;并行挂载流式转写头(连接点:播客转写与轮次控制) | 0.6B 编码器加 9B 级主干:双工内平均词错率 10.21%、独立流式 7.73%;代价是平滑轮次接管延迟由 257 ms 升到 477 ms、用户打断后的接管率由 100% 降到 94% | 栏目摘要称「并开源代码」,原文只有将来时表述且全文无仓库链接;收益与代价必须成对引用 | NLP 栏 · arXiv |
| 2 | 邻近跟踪 | τ-Elicitation: Benchmarking multi-turn entity extraction in voice agents · 2609.13602 | 语音智能体评测;多轮实体收集(连接点:语音交互任务级评测协议) | 200 个任务、10 类实体、3 个环境:4 个语音配置的稳健精确成功率只有 0.14–0.41;加脚手架把「连续三次运行全部成功」的比例提升 14–31 个百分点,但每次多花 21–28 秒;核验后的错误只有 24–37% 被修复;各实体库「连续三次运行全部成功」的比例从 0.02(药品)到 0.60(日期) | 每个主环境只跑一次;有意省略呼叫方识别环节,与真实链路有差距 | AI 栏 · arXiv |
| 2 | 邻近跟踪 | Pull: Lazy Materialization of Working Memory for Stateful LLM Conversations · 2609.14773 | 长程记忆;惰性物化的可寻址工作记忆(连接点:长程会话的 token 成本) | 本地确定性净化器零大模型调用:单跳省 75.1% token 且等价性检验通过(Δ=−0.002,噪声 σ=0.018),多跳省 72.0%;长对话基准 F1 0.299→0.464;生命周期层把 Recall@10 提到 96.0% | 属系统层优化、不改变模型能力;未给出真实部署的分布与工作量级 | NLP 栏 · arXiv |
| 3 | 直接命中 | Generalized Agent Iteration: One Formal Framework for Iterative Policy Improvement and Recursive Self-Improvement · 2609.13406 | 自进化;形式化分类坐标 | 无实验、无数字(全文唯一量化来自他人工作):用两个开关把现有系统分成锚定 / 目标漂移 / 完全自指三类,并列出经典保证失效的四条条件 | 纯形式论文;四条缺陷中两条依赖引用而非测量;不能用于支撑任何性能主张 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | LabAgent: Customize Any Research Hubs for Scientific Discoveries Using AI Agents · 2609.13437 | 科研智能体;技能入库门槛与持久记忆(连接点:可复用技能的准入条件) | ADMET 65 条中 32 条落入已发表误差棒、平均排名 2.62(榜单自身 1.87);BiomniBench-DA 均值 74.4;GeneBench-Pro 解对 2/10;ProteinGym 平均 Spearman 0.443 | 「每领域第一」只在均值层面成立,逐任务为领先 20 / 落后 17 / 打平 13;原文承认两个子领域上对比方法更好 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | CoMem: Collective-Individual Memory Synergy for Evolutionary Multi-Agent Systems · 2609.15009 | 多智能体记忆;私有沉淀与集体策展(连接点:共享记忆的污染与反效) | 某多智能体框架上 ALFWorld 79.85→89.55、PDDL 60.78→70.19,跨框架平均 +8.02 / +4.70;反向发现是共享记忆常低于无记忆(同环境某框架 59.53、52.80 对无记忆 67.78) | 投稿状态为已投 AAAI 2027(非录用);无方差与显著性;未提供代码 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | Homeostatic Continual Learning · 2609.13771 | 持续学习;用结果异常反查数据共现特征(连接点:环境漂移下的记忆更新) | 无基准、无基线、无指标,全文未报告实验数字,只有一个自设的排队示例 | 立场与示例论文,作者自列 5 项待完成工作;不可当作实验结果引用 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | Quantifying the Generation Modality Gap in Speech-Text Language Models · 2609.14743 | 语音-文本联合生成;模态差距度量(连接点:长音频语义连贯性度量框架) | 匹配数据与匹配生成设置、270M→456M 参数:语境困惑度从纯语音的 228.8 降到语音-文本的 49.9,但说话人相似度 0.70→0.62、自动 MOS 3.41→3.09 反而变差,音素指标几乎不变 | 无人类听测、每配置单一种子;结论限于该模型族 | NLP 栏 · arXiv |
| 3 | 邻近跟踪 | Why LLM Agents Collapse Without Oversight: The Enforcement Gap as the Mechanism Behind Emergence World Failures · 2609.15293 | 智能体治理;审计与执行的脱节(连接点:长程运行的监督闭环) | 栏目条目报告:崩溃机制是「审计检测到危险但控制器忽略」,并称不到 20 行代码的条件检查可把攻击成功率降到四分之一 | 单一作者、单环境报告;未提供多环境复现与统计口径 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | HazardAuditor: From Executable Threats to Safer Computer-Use Agents · 2609.15134 | 计算机操作智能体;执行级防护(连接点:长程执行的安全门) | 栏目条目报告:用规范事件表示与偏好优化训练防护,在异构计算机操作智能体上安全防护准确率最高提升 16.5 个百分点 | 防御自身漏报率与误杀代价未报告;跨环境泛化未验证 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | Token Efficient Task Execution via Application Behavior Modeling for Web Agents · 2609.13491 | Web 智能体;应用行为建模降低 token(连接点:长程执行成本) | 栏目条目报告:45 个学习管理系统任务上,较两个对比系统分别省 44% 与 80% 的 token,同时提升任务成功率 | 单一应用域;未报告模型规模与方差 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | AutoTailor: Automatic, User-Aligned Capability Selection and Adaptation for Web Agents · 2609.13548 | Web 智能体;工具集与能力的自动裁剪(连接点:长程 agent 的接口面治理) | 栏目条目报告:用离线过滤加在线动态重选构建紧凑工具集合,在保持或提升准确率的同时大幅降低 token 成本与延迟 | 依赖特定工具生态;多用户偏好冲突的处理未给出 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | Partition Scores Are Not System Scores: Deployment-Fidelity Gaps in Decomposed Algorithm Selection · 2609.13785 | 评测效度;分解式评测与部署分数的差距(连接点:评测口径高估) | 栏目条目报告:定义部署保真度差距,证明分解式算法选择的分区分数会高估可部署系统性能,并在五个基准上验证该差距为正 | 属理论加基准验证;延迟、成本等部署变量未纳入模型 | AI 栏 · arXiv |
| 3 | 邻近跟踪 | PolicyMem: Geometric Policy Memory for LLM Governance · 2609.13734 | 安全策略记忆;自然语言策略的外部化与检测-重写-验证(连接点:策略门禁与归因) | 栏目条目报告:把自然语言策略外部化为低秩子空间对象,用投影能量构成检测-重写-验证循环,在五个基准上达到不安全行为检测的领先水平并支持策略归因 | 只在五个基准上验证;未报告与人工规则门的成本对照 | NLP 栏 · arXiv |
| 失真机制 | 代表工作 | 关键数字 | 对应的修法 |
|---|---|---|---|
| 只看终态,错误步骤不可见,且终态分数饱和 | DynSTEER · 2609.14637 | 终态验证下 22.63% 的运行拿满分;阶段化后模型对可分性 6/6(p<0.01),错误定位与专家一致率 91.7%,终态验证器定位中间错误为 0 | 用公开任务视图编译里程碑图,把阶段分与终态分并行报告 |
| 出题方的策略有歧义,失败被记成能力不足 | Policy Loopholes · 2609.14400 | 17 处漏洞、7/50 航空题受影响;受害题 37% 对无漏洞题 51%;跨次方差 1.62 倍 | 在收集标注前审计策略文本,把漏洞从评测集里剔出去或改写 |
| 单次运行掩盖动作层的不稳定 | Same Patient, Different Order · 2609.13582 | 43/43 组医嘱集合逐次不同,而 22/43 组判定完全不变;首轮即分歧最高达 50/50 | 重复运行并报告动作级一致性,不只报通过率 |
| 多轮约束随轮次衰减到零 | MTAC-IFBench · 2609.14992 | 总量满足率 60.6–80.4,增量满足率仅 1.1–12.7,多数模型第 6 轮后归零 | 把「增量约束满足率」设为独立验收指标 |
| 改什么 | 代表工作 | 冻结了什么 | 关键数字 |
|---|---|---|---|
| harness 的五个模块 | ModularRSI · 2609.14857 | 模型权重 | 平均成功率 47.57→52.43;非模块化 46.44、五模块联合 44.19 均低于基线;跨域冻结迁移 73.40→75.80 |
| 探索策略的代码 | Dream-RSI · 2609.14858 | 模型、评测器、执行接口 | 零梯度步;调用 550→317,运行时间 3587.1→2931.0 ms |
| 记忆与探索调度 | RSIAgent · 2609.15364 | 模型参数、agent harness | OSWorld 2.0 平均 71.97→78.98;完整版 74.54% > 只先广 65.52% > 只后深 56.50% |
| 搜索控制权与经验组织 | AlgoEvo · 2609.15820 | 模型参数、奖励定义、评测入口 | TSP 用 39 次评估把目标值降到 5.986 / 7.007,而四个对比方法吃满 500 次预算后最好也只到 6.309 / 7.337 |
| 做法 | 代表工作 | 关键数字 | 代价 |
|---|---|---|---|
| 继续用单一无参考预测器 | — | 干净语料上最佳单指标 0.528,人类上限 0.764,时长基线 0.524 | 与随机猜测差别不大;而且把它当奖励时,优化过程会把分数刷高而不改善真实质量 |
| 域内校准的复合打分 | The Limits of Reference-Free Speech Quality Metrics · 2609.13150 | 相对最佳单指标 +1.5%~+6.6%;当奖励时把独立裁判与人评守在基线区间内 | 每个语料要消耗最多 20% 的偏好标注 |
| 按语言另设轴 | Tone on a Budget · 2609.14817 | 声调压平时度量 0.543→0.333,而字错率 0.084→0.110 不动 | 需要可靠标调的正字法;只验证了一种语言 |
| 公开赛道 + 多维听测 | VoiceMOS Challenge 2026 · 2609.13792 | 单样本打分最佳 0.779,成对比较最佳只有 0.487 | 赛道仍只到句子级,长音频未覆盖 |
| 换骨干时重做层选择 | CAL-MOS · 2609.14956 | 最佳层强依赖骨干与数据集;逐层适配器加平均池化后在两个骨干上已优于完全微调 | 数据集规模与语言未报告 |
This story was produced automatically by a channel. One sentence is all it takes for Neodrop to keep producing for you.