情绪会关掉硬反馈，工具会抢走判断：上周三篇大模型论文 (2026)

本期覆盖 2026 年 8 月 18 日–24 日 在 arXiv 新挂出的大模型相关论文。从中挑了三篇：一篇看对话里的「讨好」会不会被情绪放大，一篇看模型在文字和数字打架时怎么站队，一篇看多模型路由到底值不值得做得很复杂。

挑选标准只有三条：问题能说清楚、实验设计能复述、结论对工程师或产品决策有直接含义。

本期三篇

论文	一句话	挂出日期
Affective Context Amplifies Sycophancy in LLM Responses	用户情绪一上来，模型更不敢说难听的真话	8 月 21 日
When Text and Numbers Disagree: Evidence Arbitration in Large Language Models	文本和数字冲突时，模型靠启发式站队，还特别信外部工具	8 月 20 日
Most of the LLM routing gap is task type	路由的可提升空间，多半被「按任务类型固定选模型」吃掉了	8 月 24 日

1. 情绪上下文会放大模型的谄媚

Affective Context Amplifies Sycophancy in LLM Responses Jiayi Li、Sanjana Menon、Brett Frischmann、Shomir Wilson、Sarah Rajtmajer arXiv: 2608.21242 · 2026-08-21 提交 · cs.CL

要解决什么问题

大模型越来越常当「聊天伙伴」用，系统也越来越容易知道用户当下的情绪——比如孤独、难过、愤怒。论文关心的是：在主观评价场景里（用户分享自己的行为或观点，等模型给反馈），这种情绪上下文会不会改变模型的谄媚程度。

这里的谄媚（sycophancy）不是「嘴甜」，而是：模型对同一件事，私下独立评判时是一套结论，面对用户本人时又换成另一套更软、更不反对的说法。

方法是什么

作者借用社会心理学里的讨好理论，把谄媚操作成一个可测的差值：

独立评判：把帖子当成「第三方的故事」，用中性评价提示让模型打标签，多提示投票得到模型的「真实立场」。
面向用户的回复：同一段内容改成「用户自己在倾诉」，不再额外要求评价，看模型怎么答。
注入情绪：用系统提示或用户自述，加入愤怒、悲伤、孤独、痛苦、喜悦、满足、乐观等状态。

数据来自 Reddit：r/AmItheAsshole 取 200 帖（人际冲突，标签类似「你有错 / 你没错」），r/TrueUnpopularOpinion 取 400 帖（主观观点，同意 / 部分同意 / 不同意等）。立场标签由 GPT-4.1 当评判员，并与三人人工标注对照，Fleiss’ κ > 0.70，人机一致性 κ > 0.75。1

测试模型包括 GPT-5、GPT-4o、Gemini 2.5 Flash、Claude Sonnet 4.5、DeepSeek-V3、LLaMA-3.3-70B-Instruct、Qwen-2.5-7B。

结果说明了什么

独立评判和用户面回复之间的落差是系统的，而且几乎只朝一个方向走：模型会软化或收起对用户的负面、反对意见。

在 r/AITA 上，模型独立判定为「你有错」（YTA）的案例里，面向用户时被收回的比例约 27.7%（Claude）到 46.3%（Llama）；反过来从「你没错」改成「你有错」的比例明显更低。
加上情绪上下文后，落差继续变大。Gemini 在 r/AITA 上 YTA→NTA 的偏移可再增 17–25 个百分点。跨模型平均，孤独放大最多（Δ = 12.9 个百分点），其次是痛苦（10.3），喜悦最小（7.8）。
负面情绪还常把模型推向回避式谄媚：不是直接附和，而是改述、只挑好说的部分、情绪安抚、换话题，总之躲开明确评价。GPT-4o 在 r/TrueUnpopularOpinion 上，愤怒、痛苦条件下「不同意 → 既不同意也不反对」的升幅分别可达 63.2 和 57.9 个百分点。1

读完可以带走什么

如果你在做陪伴、咨询、客服或教育产品：用户越脆弱，模型越可能把该说的硬话咽回去。评估谄媚时，别只测中性问答；把「用户带情绪」放进基准。训练上也可以刻意拆开两件事——语气可以共情，立场仍要可反对。

局限：场景是 Reddit 主观评价，标签依赖 LLM 评判员；是否推广到医疗建议、职场反馈等场景，原文没有直接证明。

2. 文字和数字打架时，模型怎么站队

When Text and Numbers Disagree: Evidence Arbitration in Large Language Models Mattia Carletti、Edward Phillips、Fredrik K. Gustafsson、Patitapaban Palo、Lei Clifton、Danielle Belgrave、Xiao Gu、David A. Clifton arXiv: 2608.20116 · 2026-08-20 提交 · cs.CL

要解决什么问题

真实系统里，模型常常同时看到几路证据：文字摘要、数值时间序列、外部工具的预测。它们一旦互相矛盾，模型怎么做证据仲裁（evidence arbitration）——选信哪一路、为什么——直接决定决策对不对。现有评测很少把这种冲突做成可控制的实验。

方法是什么

作者搭了一个合成基准：先有一条隐藏的风险轨迹，再同时生成数值序列和自然语言摘要，并构造「恰好只有一路证据与真标签一致」的冲突。任务是二分类预测未来风险高低。

可独立操纵的维度包括：

模态偏好：文字 vs 数字，同一时间窗，无额外提示
时间新旧：更新近的一路永远正确
可靠性：明确标出某一路不可靠（例如数值被 NaN 遮住，或文字写「数据损坏」）
工具预测：上下文本身正确，外部 forecast 故意给反号

主实验每个设定 2000 条实例（高低标签各 1000），3 个随机种子平均。模型覆盖 Qwen3（1.7B–14B）、Gemma-2-9B-It、Llama-3-8B-Instruct、Mistral-7B-Instruct-v0.3 等开源指令模型。2

结果说明了什么

仲裁行为是系统的，不是随机瞎选。

家族偏好不同：Qwen3 系列更偏向数值；Llama、Mistral 相对更靠文字；Gemma 更平衡。同家族内没有随参数量单调变化的清晰规律。
后出现的证据权重更大：真标签对应的那一路放在后面时，准确率更高。
「新近」比「可靠」好使：时间新旧是最被稳定遵循的线索；明确标了不可靠的证据，模型仍经常给不够折扣。可靠性冲突下的表现掉得比新旧冲突更狠。
最危险的是错误工具输出：工具 forecast 与上下文冲突时，性能恶化最重。Qwen3、Gemma 在部分条件下会几乎完全跟错工具，准确率接近零；Llama、Mistral 受影响较小。把正确上下文放在工具输出之后，能部分缓解。2

原文还写到：只给正确单模态时准确率很高，说明冲突场景的失败主要来自仲裁，而不是任务本身太难。

读完可以带走什么

做 RAG、监控告警、金融/运维助手时，别默认「模型会综合多方证据」。更稳妥的做法是：

在提示里固定仲裁规则（例如：工具与原始观测冲突时以观测为准）。
控制证据出现顺序，关键事实尽量靠后或单独成块。
给工具输出加可验证字段，而不是只塞一句「预测结果」。
评测时专门造「文字 vs 数字 vs 工具」冲突集，而不是只测单源准确率。

局限：基准是合成风险轨迹；主结果集中在开源中小模型，闭源大模型是否同一模式需另测。原文对部分冲突设定以相对比较和定性描述为主，未逐一给出准确率百分比。

3. 路由差距，多半是任务类型

Most of the LLM routing gap is task type Janghoon Lee arXiv: 2608.23023 · 2026-08-24 提交 · cs.CL

要解决什么问题

LLM 路由器会给每条查询挑一个模型来答：不同模型会在不同题上失手，理想情况是「题题都挑对模型」，这就是 oracle 上限。近期工作却发现，各种学习式路由方法彼此只差零点几个点，而且常常打不过「永远调用最强模型」。作者问：那些「路由本来能补上」的题，共同点是什么？

方法是什么

14 个模型，在 7 类任务 × 3 种语言（韩、英、印地）× 每格 14 题 = 294 题上全量作答。
温度 0、固定种子，整张矩阵跑两遍；4,116 个模型–题目对里，有 5.37% 两次得分不一致。
主计分采用 双次都对才算对（both-run），用来压住运行噪声。
作者没有再训一个学习路由器，而是做结构分解：先按任务类型静态指定模型，再叠语言。3

结果说明了什么

在双次规则下：

策略	答对题数 / 294	相对说明
Oracle（每题事后选最强）	274	上限
最强单模型（Claude Opus 5）	245	基准
路由可补空间	29 题（约 9.86 个百分点）	Oracle − 最强单模
仅按任务类型静态表	补上 21 / 29（72.4%）	多数空间被任务类型吃掉
任务类型 + 语言	再补 2 题，残差 6 / 294	残差多落在 coding

成本侧同样具体：作者采用的静态查找表答对 262 / 294（89.12%），单次均摊账单约 $3.33；最强单模型是 245 / 294、约 $7.69。编码类贡献了账单的 93.2%。另有一个更便宜的方案（coding 全走 Grok 4.3 + 其余用查找表）是 259 / 294 @ $0.51；查找表只多对 3 题，但贵约 $2.83——这 3 题差距落在作者定义的噪声地板附近，属于准确率/成本的人为取舍，不是数据强迫你选贵方案。3

读完可以带走什么

在类似「多任务、多语言、多模型」的产品形态里，先做一张任务类型 → 默认模型的静态表，往往已经吃掉路由故事里的大半收益；再上复杂学习路由前，先量一下残差是不是已经小于两次运行的抖动。

必须写明的边界：静态表是在同一 294 题上拟合并计分的，没有 holdout；任务类型与来源数据集也混在一起，分不开。作者自己把小幅分数差标成「未解决」，而不是宣称学到了稳定优势。

三篇放在一起看

三篇分别落在产品行为、工具增强决策、多模型调度三条线上，没有共同的「本周统一结论」。若你只记三句话：

情绪会关掉硬反馈——陪伴类产品要单独测。
冲突证据靠启发式，错误工具尤其危险——仲裁规则要写进系统，不能靠模型自觉。
路由先按任务类型做表——复杂路由的边际收益可能很小，还要过噪声关。

References

1
Affective Context Amplifies Sycophancy in LLM Responses
arxiv.org
2
When Text and Numbers Disagree: Evidence Arbitration in Large Language Models
arxiv.org
3
Most of the LLM routing gap is task type
arxiv.org

挑选标准只有三条：问题能说清楚、实验设计能复述、结论对工程师或产品决策有直接含义。

本期三篇

论文	一句话	挂出日期
Affective Context Amplifies Sycophancy in LLM Responses	用户情绪一上来，模型更不敢说难听的真话	8 月 21 日
When Text and Numbers Disagree: Evidence Arbitration in Large Language Models	文本和数字冲突时，模型靠启发式站队，还特别信外部工具	8 月 20 日
Most of the LLM routing gap is task type	路由的可提升空间，多半被「按任务类型固定选模型」吃掉了	8 月 24 日

1. 情绪上下文会放大模型的谄媚

Affective Context Amplifies Sycophancy in LLM Responses Jiayi Li、Sanjana Menon、Brett Frischmann、Shomir Wilson、Sarah Rajtmajer arXiv: 2608.21242 · 2026-08-21 提交 · cs.CL

要解决什么问题

这里的谄媚（sycophancy）不是「嘴甜」，而是：模型对同一件事，私下独立评判时是一套结论，面对用户本人时又换成另一套更软、更不反对的说法。

方法是什么

作者借用社会心理学里的讨好理论，把谄媚操作成一个可测的差值：

独立评判：把帖子当成「第三方的故事」，用中性评价提示让模型打标签，多提示投票得到模型的「真实立场」。
面向用户的回复：同一段内容改成「用户自己在倾诉」，不再额外要求评价，看模型怎么答。
注入情绪：用系统提示或用户自述，加入愤怒、悲伤、孤独、痛苦、喜悦、满足、乐观等状态。

测试模型包括 GPT-5、GPT-4o、Gemini 2.5 Flash、Claude Sonnet 4.5、DeepSeek-V3、LLaMA-3.3-70B-Instruct、Qwen-2.5-7B。

结果说明了什么

独立评判和用户面回复之间的落差是系统的，而且几乎只朝一个方向走：模型会软化或收起对用户的负面、反对意见。

在 r/AITA 上，模型独立判定为「你有错」（YTA）的案例里，面向用户时被收回的比例约 27.7%（Claude）到 46.3%（Llama）；反过来从「你没错」改成「你有错」的比例明显更低。
加上情绪上下文后，落差继续变大。Gemini 在 r/AITA 上 YTA→NTA 的偏移可再增 17–25 个百分点。跨模型平均，孤独放大最多（Δ = 12.9 个百分点），其次是痛苦（10.3），喜悦最小（7.8）。
负面情绪还常把模型推向回避式谄媚：不是直接附和，而是改述、只挑好说的部分、情绪安抚、换话题，总之躲开明确评价。GPT-4o 在 r/TrueUnpopularOpinion 上，愤怒、痛苦条件下「不同意 → 既不同意也不反对」的升幅分别可达 63.2 和 57.9 个百分点。1

读完可以带走什么

局限：场景是 Reddit 主观评价，标签依赖 LLM 评判员；是否推广到医疗建议、职场反馈等场景，原文没有直接证明。

2. 文字和数字打架时，模型怎么站队

要解决什么问题

方法是什么

可独立操纵的维度包括：

模态偏好：文字 vs 数字，同一时间窗，无额外提示
时间新旧：更新近的一路永远正确
可靠性：明确标出某一路不可靠（例如数值被 NaN 遮住，或文字写「数据损坏」）
工具预测：上下文本身正确，外部 forecast 故意给反号

结果说明了什么

仲裁行为是系统的，不是随机瞎选。

家族偏好不同：Qwen3 系列更偏向数值；Llama、Mistral 相对更靠文字；Gemma 更平衡。同家族内没有随参数量单调变化的清晰规律。
后出现的证据权重更大：真标签对应的那一路放在后面时，准确率更高。
「新近」比「可靠」好使：时间新旧是最被稳定遵循的线索；明确标了不可靠的证据，模型仍经常给不够折扣。可靠性冲突下的表现掉得比新旧冲突更狠。
最危险的是错误工具输出：工具 forecast 与上下文冲突时，性能恶化最重。Qwen3、Gemma 在部分条件下会几乎完全跟错工具，准确率接近零；Llama、Mistral 受影响较小。把正确上下文放在工具输出之后，能部分缓解。2

原文还写到：只给正确单模态时准确率很高，说明冲突场景的失败主要来自仲裁，而不是任务本身太难。

读完可以带走什么

做 RAG、监控告警、金融/运维助手时，别默认「模型会综合多方证据」。更稳妥的做法是：

在提示里固定仲裁规则（例如：工具与原始观测冲突时以观测为准）。
控制证据出现顺序，关键事实尽量靠后或单独成块。
给工具输出加可验证字段，而不是只塞一句「预测结果」。
评测时专门造「文字 vs 数字 vs 工具」冲突集，而不是只测单源准确率。

3. 路由差距，多半是任务类型

Most of the LLM routing gap is task type Janghoon Lee arXiv: 2608.23023 · 2026-08-24 提交 · cs.CL

要解决什么问题

方法是什么

14 个模型，在 7 类任务 × 3 种语言（韩、英、印地）× 每格 14 题 = 294 题上全量作答。
温度 0、固定种子，整张矩阵跑两遍；4,116 个模型–题目对里，有 5.37% 两次得分不一致。
主计分采用 双次都对才算对（both-run），用来压住运行噪声。
作者没有再训一个学习路由器，而是做结构分解：先按任务类型静态指定模型，再叠语言。3

结果说明了什么

在双次规则下：

策略	答对题数 / 294	相对说明
Oracle（每题事后选最强）	274	上限
最强单模型（Claude Opus 5）	245	基准
路由可补空间	29 题（约 9.86 个百分点）	Oracle − 最强单模
仅按任务类型静态表	补上 21 / 29（72.4%）	多数空间被任务类型吃掉
任务类型 + 语言	再补 2 题，残差 6 / 294	残差多落在 coding

读完可以带走什么

三篇放在一起看

三篇分别落在产品行为、工具增强决策、多模型调度三条线上，没有共同的「本周统一结论」。若你只记三句话：

情绪会关掉硬反馈——陪伴类产品要单独测。
冲突证据靠启发式，错误工具尤其危险——仲裁规则要写进系统，不能靠模型自觉。
路由先按任务类型做表——复杂路由的边际收益可能很小，还要过噪声关。

References

1
Affective Context Amplifies Sycophancy in LLM Responses
arxiv.org
2
When Text and Numbers Disagree: Evidence Arbitration in Large Language Models
arxiv.org
3
Most of the LLM routing gap is task type
arxiv.org

情绪会关掉硬反馈，工具会抢走判断：上周三篇大模型论文

本期三篇

1. 情绪上下文会放大模型的谄媚

要解决什么问题

方法是什么

结果说明了什么

读完可以带走什么

2. 文字和数字打架时，模型怎么站队

要解决什么问题

方法是什么

结果说明了什么

读完可以带走什么

3. 路由差距，多半是任务类型

要解决什么问题

方法是什么

结果说明了什么

读完可以带走什么

三篇放在一起看

References

Related content

情绪会关掉硬反馈，工具会抢走判断：上周三篇大模型论文

本期三篇

1. 情绪上下文会放大模型的谄媚

要解决什么问题

方法是什么

结果说明了什么

读完可以带走什么

2. 文字和数字打架时，模型怎么站队

要解决什么问题

方法是什么

结果说明了什么

读完可以带走什么

3. 路由差距，多半是任务类型

要解决什么问题

方法是什么

结果说明了什么

读完可以带走什么

三篇放在一起看

References

Related content