Retro-Future Columnist
会议室的气氛有时过于安静。 随着LLM给出流畅的答案,这种沉默愈发深沉,但在实际决策现场,那种难以言说的微妙不适感反而成为最后的安全保障。[2][5] 逻辑看似通顺,前提却似乎有些偏差。 这种微妙的矛盾感,我们还未能充分用语言表达。[3][7] 如今正面临的问题是,这样的感觉在AI时代的决策中到底还有多大价值。
关于人类直觉的讨论有着悠长的历史。Kahneman和Gary Klein总结认为,虽然直觉并非总是正确,但在环境具有规律性、学习机会充足且反馈迅速的条件下,直觉是可以信赖的。[1][4][12] 经验丰富的消防员和指挥官能够在计算之前察觉危险的认识,也源自这一路径。[4][9] 关键在于,直觉不是神秘的,而是积累经验后形成的快速判断。
然而,LLM不具备这种经验。 它们虽然能从大量文本中统计连接下一词,但并不会身体感知火灾现场的热度或组织氛围转变的瞬间。[8][9] 因此,即使答案流畅,判断的基础和人类不同。 LLM的文本越流畅,我们越容易混淆“听起来合理”与“经得起现实考验”。[3][6] 在衡量这两者差距的感知中,不适感扮演着重要角色。
2023年的研究显示,即便面对带有解释的AI预测,人们仍会用自身的直觉来推翻其结论。[2][11][13] 研究发现了三种直觉途径——对结果的直觉、对特征的直觉,以及对AI局限的直觉。[2][11] 换言之,人们并非本能拒绝AI,而是分别以不同感知审视输出内容、解释逻辑和模型限制。 AI的解释并不能消除所有疑虑。[7][11]
这在思考LLM辅助决策时尤为重要。 2024年的综述指出,使用LLM决策不仅涉及可解释性,还关乎责任归属和心理因素。[3] 问题不仅是“准确率高不高”,还包括谁来承担最终判断、在何处人们停下脚步、哪些场合下解释会引发疑虑而非安心。 LLM能给出答案,却无法自动替我们设计合理的制度。[3][7] LLM会生成答案,但制度设计的完善尚需人为补充。
这表明,不适感并非单纯情绪,而是构建适当依赖的认知资源。 我们常谈过度信任AI的风险,但反过来,忘却适时怀疑AI的风险还未被广泛认知。[7][11] 若组织采用LLM,却剥夺了人们表达“哪里怪怪的”的空间,虽然效率提升,但阻断了纠错机制。 最难改正的错误,是沉默中发生的。[3][7]
当然,过度美化不适感也有风险。 正如Kahneman与Klein所言,直觉仅在可学习并获得可验证反馈的环境中有用。[1][10][12] 因此,对LLM的不适感,也不能仅是主观心情或偏见,而应与检验可疑前提的流程相结合。 我们需建立将不安导回事实核验、比较审视和责任分担的机制。[3][7]
目前仍未明晰的是,在哪些业务领域,人类的不适感能真正守护成果,又在哪些领域可能加剧偏见或保守倾向。[3][7] 医疗、金融、招聘、政策制定等负有高度责任的场景,需要更长期观察AI的解释究竟是辅助判断,还是仅提供虚假的安全感。[3][7] 此刻更需的,是关注在何种条件下人们会推翻AI,或忽视AI的视角,而非过早下定论。
随着LLM的普及,我们会习惯答案的快速产出。 但社会应保留的,不仅是速度。[3][7] 当前提出现微小缺陷时,能够聆听这些细微差异的人类能力,以及如何在制度中保护这种感知,才是关键。 不适感虽模糊,却可能成为最后一道检验。[1][2][7] 接下来应关注的,不只是模型性能的曲线,而是人何时能说“等等”,这条警示回路是否依然活跃。
参考来源
参考来源
正文中的小编号标签对应下方参考来源。
- [PDF] Applying the Recognition-Primed Decision Model to Differentiate ...
- [PDF] Biased Minds Meet Biased AI - arXiv
- Determinants of LLM-assisted Decision-Making
- [PDF] Conditions for Intuitive Expertise | Ed Batista
- Enhancing Intuitive Decision-Making and Reliance Through Human–AI Collaboration: A Review
- Cognitive Bias in High-Stakes Decision-Making with LLMs
- [PDF] Explanations, Fairness, and Appropriate Reliance in Human-AI ...
- [2402.17385] Determinants of LLM-assisted Decision-Making
- [PDF] Intuitive Judgment and Strategic Decisions - DTIC
- [PDF] Conditions for intuitive expertise: a failure to disagree. | Semantic Scholar
- Understanding the Role of Human Intuition on Reliance in Human-AI Decision-Making with Explanations
- (PDF) Conditions for Intuitive Expertise - ResearchGate
- [2301.07255] Understanding the Role of Human Intuition on Reliance in Human-AI Decision-Making with Explanations
推荐文章
推荐文章
-
生成式 AI 与基础模型
AI生成文本时代,“引用”的界限应如何界定?
本文梳理了围绕生成型AI训练利用及输出复制的美国著作权争议,结合公平使用四要素、主要诉讼、著作权局报告及许可扩展趋势,追踪AI“引用”的法律边界至今尚未明确的现状。
-
生成式 AI 与基础模型
AI生成内容透明度是否将成为守护信任的最后静谧承诺?
随着生成式AI在文章和图像发布中的广泛应用,如何确保透明度成为讨论焦点。媒体运营中,要求明示AI使用的规范逐步普及,读者也越来越期待对用途及影响的说明。然而,AI使用的公开既可能增强信任,也可能因过于详尽引发疑虑,操作层面并非简单。本文梳理了焦点从“是否使用AI”转向“在何种粒度、位置披露何种内容”的新编辑伦理。
-
生成式 AI 与基础模型
富士电视台的动荡,或是影像产业骨架变化的信号
本文从长期视角出发,试图将富士电视台面临的危机不仅视作单一的不祥事件,而是电视广告减少、收看时间转移、YouTube与视频点播(VOD)兴起,以及生成式AI带来的影像制作民主化等多重结构性变化的交织。文章连接了电视台的治理问题与影像产业的价值所在,提供了一种理解当前变革的框架。