两项新研究把注意力从AI能写出什么,移到了人怎样接受、检查和组织这些输出。一个值得重视的发现是:减少操作步骤,并不总能改善判断。
一句理由改变了什么
AI给出修改建议,你点下接受之前,需要解释自己的选择吗?2026年9月20日公开的一项预印本,把这个看似细小的动作放进了课堂实验。结果是,要求写出理由的一组,对错误建议的平均采纳率从另一组的65%降到了41%,相差24个百分点。1
这个变化值得关注,因为我们很容易把一段语言流畅、结构完整的输出,当成已经完成的工作。检查于是变成最后的一次扫读:没有明显错别字,语气也合适,便可以交付。但编辑、研究和商业分析中的错误,往往藏在依据与结论之间,不会自己显现为一句病句。
实验来自美国一所大学的数据科学课程。学生先写数据分析提案,再收到GPT-4.1生成的八条个性化修改建议,其中四条被刻意设置为有问题,涉及虚构理论或文献、无关数据、错误推论以及不适合提案的结构。主要比较包含129人:65人逐条选择接受或拒绝,64人还必须为每项决定写简短理由。1
合理建议的平均采纳率分别为81%和86%,差异没有统计显著性。换言之,研究没有观察到写理由让学生一概排斥AI;变化主要发生在对有问题建议的处理上。这里的65%和41%是这套实验材料的采纳率,不能当作现实工作中AI出错或用户受骗的普遍概率。1

图1:同一课堂随机实验的两组比较。比例取自原文,图示为浩哥AI实验室重绘。研究原文
写了理由仍然可能判断错误
这项研究最有启发性的部分,也许是改善之后仍留下的41%。要求解释决定,并没有自动带来可靠的判断。研究者阅读理由后发现,一些学生只是认可建议听起来会让文章更好,或者认为多加理论和数据总有帮助;还有人拒绝虚构理论,只因它不支持自己的论点,而没有识别出真实性问题。1
这暴露了审核中两个容易混在一起的问题:一条信息是否有利于我的表达,以及它是否有可靠依据。前者可以靠立场和写作意图判断,后者必须回到原始材料。假如我们只让AI替自己的观点增加说服力,输出越完整,越可能掩盖这两道检查之间的空白。
不过,实验也不能告诉我们,究竟是写理由本身、额外花费的时间,还是被要求解释所带来的警觉起了作用。这些因素没有被分别控制。研究只发生在一个课程、一次写作活动中,也没有评估修改后的文章质量,更没有证明参与者获得了长期能力提升。1
所以,把结果翻译成工作方法时,不能直接给所有AI操作加一道必填说明。审核成本是真实的;如果每次改标点也要论证,理由很快会变成复制粘贴的手续。更有价值的设计,是找到那些一旦接受,就会改变事实、推论或承诺的位置,让使用者在那里说清依据。
聊天框还缺一份工作清单
另一项9月15日公开的预印本,从谈判准备考察了相邻的问题。研究最终分析800名参与者,将界面分为无AI、普通聊天,以及两种带专业谈判框架的AI工作流。后两种都展示双方立场、共同点和底线等结构,区别在于一开始给出完整分析,还是由用户在交互中逐步形成分析。2
参与者阅读虚构人道援助谈判的材料,并在限时准备后回答问题。评分依据是准备内容覆盖了多少专业要点。合并计算,两种结构化工作流的准备覆盖得分比普通聊天高出2.36分(满分100分),效应较小;逐步形成分析的一组,提出的分析请求种类更多,主观准备负担也低于直接阅读完整分析的一组。2
这些结果不能写成AI提高了真实谈判胜率。研究没有专门招募职业谈判者,各组完成率约为45%至55%,分析针对完成并符合纳入条件的人,退出差异可能影响结果。结构化工作流也没有显著改善风险覆盖。它支持的是一个更窄的判断:在这个限时任务里,明确展示该考虑哪些问题,有助于准备内容更完整。2
两项实验处理的任务不同,不能合并成一个效果数字。但它们提示了同一个设计方向:把判断所需的动作放进工作过程。写理由让采纳决定变得可检查,专业框架让遗漏变得可见。仅仅留下一个万能输入框,再提醒用户谨慎,仍然把怎样检查、检查什么的负担留给了用户。
把多想一步放在交付之前
对于用AI写公众号、做客户方案或整理行业报告的人,这意味着可以重新安排审核顺序。先明确这份材料要回答什么、哪些说法会影响读者判断,再让AI展开内容。生成后,优先检查新增的数字、来源、因果关系和行动建议,而不是只检查文字是否顺畅。这里是从研究出发的编辑建议,尚不能承诺同样的效果。
例如,AI为一篇商业分析补上一项调查,接受它之前可以留下一个很短的判断记录:原始报告在哪里,调查对象是谁,这个结果能支持多大的结论。若只能回答它让文章显得更专业,就还没有完成核验。遇到缺乏专业知识、无法判断的建议,应先标记待核实,找原始资料或合适的人复核。
对团队管理者,更值得检查的是现有交付流程。模板有没有要求说明证据出处?关键推论能不能追溯?负责人有没有时间处理尚未确认的内容?这些安排需要在实际任务里试用,并同时观察漏错、返工和审核耗时,不能只用生成速度评价AI的价值。
AI越容易交出一个像成品的答案,我们就越需要保留确认它是否成立的环节。多想一步的目的,是知道自己为什么接受这句话、又准备为它负责到什么程度。这个问题,无法由一键接受替我们回答。
参考资料
本文依据截至2026年10月2日可查的上述预印本撰写,不将其视为已完成同行评审的定论。文中数字按原文报告口径呈现。