术语表 · 认知风险

    生成式 AI 认知风险术语表

    简要说明

    这份 Revenu IA 术语表定义了 15 个概念,描述生成式 AI 给使用者带来的风险,包括认知负债、自动化偏见、元认知懒惰、workslop(低质量 AI 产出)与影子 AI。每条定义均附有研究或一手资料出处。

    本术语表汇集了 Mustapha Benkalfate 在其关于生成式人工智能影响的会议、培训和文献综述中使用的概念。每个定义都注明了其作者。

    AI literacy (人工智能素养)

    指明智地使用人工智能、理解其能力、局限和风险所需的一整套技能和知识。自2025年2月2日起,《AI法案》第4条要求人工智能系统的提供商和部署者采取措施,确保其员工具备足够的人工智能素养水平。

    来源
    自动化偏见

    指过度信任自动化系统的建议,超出了其可靠性所能保证的程度,以至于不再核实或忽略相反的信息。此概念由 Parasuraman 和 Manzey (2010) 总结。

    来源
    自满

    面对被认为可靠的自动化系统时警惕性下降。这通常发生在自动化偏见之前 (Parasuraman 和 Manzey, 2010)。

    来源
    自动化的悖论

    Lisanne Bainbridge 于1983年描述的悖论:自动化程度越高,留给人类的任务就越困难,而与此同时,人类的技能却因缺乏实践而退化。

    来源
    认知负债

    指将思考工作委托给人工智能时累积的理解和记忆赤字。由麻省理工学院媒体实验室 (MIT Media Lab) 的 Nataliya Kosmyna 团队 (2025) 测量,并由维多利亚大学的 Margaret-Anne Storey 在软件工程领域进行理论化。

    来源
    意图负债

    在 Margaret-Anne Storey 的理论中,指当工作由人工智能生成时,决策的目标和理由的追溯丢失。SONDE© 方法旨在明确阐述意图。

    来源
    认知论负债

    指个人使用人工智能产出的内容与其实际理解之间的差距。这使得人们无法纠正自己不掌握其结构的工作。

    技能退化 (deskilling)

    因将已掌握的技能委托给自动化系统而导致的技能丧失。在内窥镜医师接触人工智能后观察到此现象 (The Lancet Gastroenterology & Hepatology, 2025),并由 Shukla 等人 (CHI 2025) 在辅助设计中进行了分析。

    来源
    认知减负 (cognitive offloading)

    指将部分脑力劳动(如记忆、计算、推理)委托给外部工具。小剂量使用是有益的,但当它取代学习时,就成为一种风险;Chirayath 等人 (Frontiers in Psychology, 2025) 研究了它对人们应对困难能力的影响。

    来源
    元认知懒惰

    指将自我学习的调节(规划、控制、评估)委托给人工智能的倾向。由 Yizhou Fan 及其同事在《英国教育技术杂志》(British Journal of Educational Technology) 中描述。

    来源
    元认知

    思考自身思维的能力:观察自己在工作(包括使用人工智能时)中如何学习和推理。Mustapha Benkalfate 将其视为一种职业技能。

    认知摩擦

    为维持一项技能而在一项任务中刻意保留的努力。Revenu IA 方法旨在保持最小但真实的摩擦。

    Workslop

    由人工智能生成的内容,表面上看起来是完成品,但缺乏实质内容,并将纠正的精力转嫁给了接收者。该术语于2025年由《哈佛商业评论》(Harvard Business Review) 推广。

    来源
    评估过载

    从生产转向评估人工智能生成内容所产生的脑力成本。Simkute、Tankelevitch、Sellen 等人 (Microsoft Research, 2024) 的研究表明,这种成本可能会抵消预期的生产力收益。

    来源
    Shadow AI

    指员工使用未经组织授权的人工智能工具。根据微软和领英 (Microsoft and LinkedIn) 的《2024年工作趋势指数》(Work Trend Index 2024),78% 的在职人工智能用户会自带工具。

    来源

    常见问题

    认知负债和技能退化有什么区别?

    认知负债描述了在委托任务时累积的理解赤字;技能退化描述了先前拥有的技能的丧失。

    参考来源

    1. Margaret-Anne Storey: 生成式和代理式AI如何将关注点从技术负债转向认知负债 (2026)
    2. Shukla 等人 (2025), 技能退化、认知减负和错位的责任, CHI EA

    为您的团队提供人工智能风险培训

    AI Literacy 级别涵盖了人工智能的具体能力、局限性和风险。

    为您的团队提供人工智能风险培训