HCI 研究人员如何研究认知偏误？一项范围审查

研究背景与问题

• 问题与挑战: 论文指出，认知偏差是人们在决策和信息处理时出现的一种系统性偏差，可能导致用户与计算机系统之间的互动问题。例如，偏差可以加强误解、错误判断，也可以使用户更容易受到算法暗示或操纵的影响。 尽管HCI（人机交互）社区已经逐渐展开对认知偏差的研究，但研究仍然分散在不同的学术领域和应用场景中，缺乏综合综述和系统性理解。
• 重要性: 认知偏差不仅影响用户与计算机的交互行为，也可能引发现实中的行为隐患，包括误导信息传播、决策不公正和数据标注质量受影响。与此同时，设计能够缓解或利用认知偏差的系统具有重大价值。例如，这些系统可被用来改进用户决策和行为改变。
• 研究动机: 本文旨在通过对认知偏差在HCI研究中的应用进行全面综述，形成系统的理解。目标包括绘制现有研究的概况，探索其在不同领域的应用，分析研究者在研究偏差时的方法，及发现领域的空白和潜在机会。

解决方案

• 方法和框架: 采用范围综述方法，作者系统分析了2010年1月至2024年5月期间发表的127篇文章，重点探讨HCI研究如何量化、减轻、利用和观察认知偏差的影响。

• 创新与关键点:

  1. 提出五种HCI研究偏差的主要方式：研究效应、减轻偏差、观察偏差、利用偏差，以及量化偏差。
  2. 涉及八大HCI应用领域：信息交互与推荐系统、人机交互（AI）、可视化、可用性、行为改变、计算机协作工作与社会计算、人机交互中的机器人以及游戏。
  3. 提出了一幅框架图（Figure 1），明确了从工具开发、偏差理解，到设计反馈，再到现实用户行为的一整套研究动态。

• 实施步骤:

  1. 数据收集: 从HCI相关顶级会议（如CHI、CSCW）和数据库中检索包含“认知偏差”相关术语的论文。
  2. 筛选与分析: 利用PRISMA方法对检索到的论文进行筛选，剔除不相关或低可靠性的案例文章。
  3. 分类编码: 对包括认知偏差术语定义、研究焦点以及应用背景等核心内容进行提取和开放编码。

研究成果

• 具体成果:

  • 总结了包含92种认知偏差的核心术语和定义，发现“确认偏差”（confirmation bias）最常研究。
  • 界定了认知偏差研究的五种主要模式，并根据八大应用场景讨论了研究的集中与分布情况。
  • 提出认知偏差的双刃剑效应：它既可能被利用来诱导正向行为（如健康选择或批判性思维），也可能被恶意使用操控用户行为（如暗模式设计）。
  • 指出研究中不足的表现，包括术语使用不一致，研究理论框架的欠缺，以及跨多个认知偏差的交互效应研究较少。

• 与现有技术相比的优势: 论文强调其多学科视角，以及对HCI领域全面的覆盖。其方法不仅聚焦于偏差的负面效应，也关注如何通过设计应用塑造正向的偏差利用（如行为变化工具、教学模块）。

• 实验或评估结果:

  • 确定了偏差在信息交互、AI 人机交互等领域的显著影响。
  • 例如：“信息交互与推荐系统”中，30篇文章中大多数讨论用户信息选择中的偏置问题（如确认偏差）。
  • 在偏差缓解策略方面，研究者设计了认知支持工具，通过系统反馈帮助用户反思偏差。

• 局限性与未来方向:

  • 局限性：
    • 学术术语的使用不一致给综述带来了困难，建议设定术语标准。
    • 当前研究更多基于实验室环境，缺乏真实世界场景的实践数据。
    • 对多种偏差共存与相互作用的综合研究较少。
  • 未来方向：
    • 开展更具普适性的偏差量化工具开发。
    • 主动评估和改进基于认知偏差的“推动技术”的有效性和伦理影响。
    • 扩展研究到未被充分探索的应用领域（如游戏和人机协作）。
    • 采用纵向研究和情境交互实验以观察认知偏差的长期及动态效应。

总结而言，这篇论文通过回顾HCI领域对认知偏差的研究，揭示了现状、挑战和机遇，同时呼吁学术标准化与多学科合作，以厘清偏差定义并推进更透明的技术设计。