CommSense：促进对在线评论的偏见感知和反思性导航以实现理性判断

文献标题

CommSense: Facilitating Bias-Aware and Reflective Navigation of Online Comments for Rational Judgment

出版信息

• 主题领域: 人机交互 (HCI) 和在线评论导航中的认知偏差缓解。
• 关键词: 认知偏差、反思性判断、在线评论、界面设计、偏差缓解、用户生成内容、意义构建、决策、可视化、HCI。

背景与问题

• 问题/挑战: 在线评论的呈现方式通常由算法决定，这可能引入认知偏差，如锚定效应和确认偏差，从而扭曲用户的判断。现有研究主要关注缓解个体偏差，但忽视了评论呈现方式如何影响用户推理的演变。
• 重要性: 在线评论导航中的偏差可能导致在旅行、健康和政治等关键领域的决策失误。解决这一问题可以提高用户判断的质量并促进平衡的评估。
• 动机与相关研究: 先前的研究探索了通过内容审核、基于规则的过滤和界面级干预来缓解偏差。然而，这些方法通常忽略了用户特质与评论呈现之间的动态交互，以及支持反思性和基于证据推理工具的需求。

解决方案

• 提出的方法: CommSense，一个轻量级插件，旨在通过提供可视化概览、反思性提示和综合支持来增强用户对在线评论的参与度，从而缓解偏差。
• 创新性:
  1. 确定了一个四阶段决策路径（初始框架、证据搜寻、信念更新、综合与判断）及相关问题（目标偏离、证据-信念循环、综合支持不足）。
  2. 提出了偏差感知界面的设计需求：参与前框架、交互式组织、情境中的反思性提示和动态综合支持。
  3. 实现了CommSense，集成了主题语料概览、评论导航面板和综合板等功能，以支持反思性决策。
• 过程与关键技术:
  1. 进行了研究 I（N=18），追踪用户在不同评论呈现条件（正面优先、负面优先、交错呈现）下的决策路径。
  2. 进行了研究 II（N=18），与参与者共同设计解决识别问题的界面功能。
  3. 基于提炼的设计需求开发了CommSense。
  4. 在研究 III（N=24）中评估了CommSense，与基线界面相比，测量了偏差感知、反思性判断和可用性。

结果

• 具体发现:
  • CommSense 提高了偏差感知和反思性思维，参与者能够生成更全面、基于证据的推理。
  • 显著降低了认知负荷（例如，心理需求：CommSense 平均值 = 3.17，对比基线平均值 = 4.58，p = 0.008）。
  • 功能性评分更高，如概览提供（平均值 = 6.25/7）和证据收集（平均值 = 6.33/7）。
• 相较基线的优势:
  • CommSense 用户表现出更广泛的评论覆盖、更好的情感平衡（正负比率：1.44 对比基线 1.13，p = 0.0133），以及更高质量的最终判断（例如，反思深度：CommSense 平均值 = 6.17，对比基线平均值 = 5.33）。
  • 提升了可用性（系统可用性量表功能性：CommSense 平均值 = 6.17，对比基线平均值 = 4.50，p = 0.0014）。
• 实验/评估:
  • 研究 I：在酒店评价场景中探索了 18 名参与者的决策路径。
  • 研究 II：与相同参与者进行共创设计工作坊，以提取设计需求。
  • 研究 III：进行 24 名参与者的组间评估，比较CommSense与基线界面，使用可用性、认知负荷和判断质量等指标。
• 局限性与未来工作:
  • 参与者主要为研究生，限制了研究的普适性。
  • 控制实验设计可能无法完全反映现实世界的复杂性。
  • 未来工作包括测试更广泛的人群、增强定制化功能，以及将CommSense应用于健康和政治等其他领域。

总结

本文介绍了CommSense，一个旨在缓解认知偏差并支持在线评论导航中反思性判断的插件。通过三项研究，作者识别了一个四阶段决策路径，提炼了设计需求，并实现了CommSense，其集成了可视化概览、反思性提示和综合工具等功能。评估结果表明，与基线界面相比，CommSense 在偏差感知、认知负荷减少和判断质量方面显著改善。未来研究将探索更广泛的应用和用户定制化，以增强该工具在多样化场景中的适应性。