因此,评估 AI 助手不能只看答案对不对,还要看它是否在不该回答时升级、拒答或请求更多证据。对人类使用者也一样:系统需要让「我不知道」「需要查证」「请人工复核」成为和「提交答案」同等清楚的动作,而不是藏在免责声明里的退路。
更进一步,产品可以把 AI 建议和用户的独立判断分开记录,单独观察三件事:用户是否改变答案、改变后是否更准确、以及信心是否与正确率同步。后一项尤其关键。一个让人更有把握、却没有让人更接近事实的系统,不能只用满意度来证明自己有效。
这不是说 AI 应该少给答案。更准确的要求是:AI 给出答案时,也要帮助人保留拒绝答案的能力。否则,人机协作会把「判断」悄悄改造成「从几个流畅选项里挑一个」。
速览
OpenAI 把 AI 的价值从 token 价格改写成「成功完成一项工作」
OpenAI CFO Sarah Friar 7 月 17 日发布的「A scorecard for the AI age」,把企业衡量 AI 的问题归纳为四件事:完成了多少有用工作、每个成功任务的完整成本、结果是否可靠,以及规模扩大后每一美元是否带来更多价值。文章特别强调,成功任务的成本还包括重试、等待、人工复核和返工,因此便宜的 token 不等于便宜的结果。2
Google DeepMind 7 月发布的「Conjecture Machines」采访了 10 名研究员和工程师,并把 AI agent 描述为科学中的「猜想机器」:它能快速提出假设、组合文献、写代码和搜索候选方案,但实验室验证、同行评议和自然过程本身仍受时间与设施约束。文章举例说,Co-Scientist 曾在两天内给出 5 个关于抗生素耐药传播的候选解释,其中第一项与研究团队多年验证的假设相同。3
这是一篇来自 Google DeepMind 的机构文章,案例和判断应看作机构自述,不是独立评测。它最有用的提醒是:想法变便宜以后,真正稀缺的可能是知道哪个想法值得投入现实资源,以及如何证明它没有错。
一位 Inria 研究者担心,AI 会把研究从手艺变成流水线
Emmanuel Jeannot 在 arXiv 文章「The Industrialization of Research」中把 AI 驱动的科学描述为从「工艺模型」转向「管线模型」:研究问题、假设、实验、分析和验证被拆开并交给自动化系统,人类则更多承担监督和方向选择。他担心的不是 AI 没有产出,而是年轻研究者的学徒训练、对结果的理解,以及发现异常和改换理论框架的能力可能一起变薄。4