对CHI中电皮层活动实践的批评

文献标题

A Critique of Electrodermal Activity Practices at CHI

文献信息

• 主题领域: 人机交互（Human-Computer Interaction, HCI），以皮肤电活动（Electrodermal Activity, EDA）为切入点的方法学评估。
• 关键词: Electrodermal Activity, Galvanic Skin Response, EDA, GSR, 人机交互, 实验设计, 数据分析, 方法学, 数据透明性, 信号处理。

研究背景与问题

• 问题或挑战:

  1. 皮肤电活动（EDA）作为一种测量心理状态（如唤醒度、注意力和压力）的工具，被广泛用于人机交互 (HCI) 研究中。
  2. 作者发现，HCI 社区在处理 EDA 数据时，存在方法学上的严重问题，包括实验设计、数据采集与分析、以及报告的透明性。
  3. 心理生理学领域已建立成熟的EDA分析标准，但 HCI 领域对这些标准的采纳不够完善。

• 重要性:

  • 如果 EDA 的使用未遵循标准方法，研究结果的有效性可能受到威胁，进而影响基于 EDA 的学术贡献。
  • 提升方法学透明性和一致性感对于确保研究的可复现性和外部有效性至关重要。

• 研究动机与相关工作:

  • 本研究动机来自于 EDA 在 HCI 中的潜力及其方法使用中的局限性。当前社区内对透明数据分析和实验复现性的需求日益增加。
  • 过去的一些心理生理学研究对 EDA 的分析已有详细标准。但 HCI 社区对该方法的应用和报告质量尚未全面评估。

解决方案

• 方法/解决方案:

  • 作者对 1986 到 2020 年间发表在 ACM CHI 论文集上的 41 篇涉及 EDA 数据的论文进行了系统文献回顾。
  • 使用基于心理生理学标准的编码程序评估研究质量，包括设备、预处理与控制、参与者信息、术语使用、数据分析及心理建构等方面。

• 创新之处:

  • 提出了一份基于实际文献的详细问题清单和标准。
  • 结合心理生理学标准，提出改进 HCI 社区中EDA方法学的具体建议。

• 实施步骤:

  1. 从 ACM CHI 数据库中筛选含有 EDA 关键词的论文。
  2. 根据心理生理学推荐的发表标准，对论文进行分类编码，评估其在设备使用、实验设计、数据分析等方面的实践水平。
  3. 总结主流问题，并提出基于社区合作的指导原则。

研究成果

• 具体成果:

  1. 确定了41篇论文中存在的主要问题，包括设备选型的信息缺失、实验控制的不足、对标准术语和分析方法的偏离等。
  2. 提出的40项问题检查清单涵盖设备细节、参与者数据、外部因素控制及信号处理等方面。
  3. 开发了一套社区共同编纂的指导原则（详见 https://edaguidelines.github.io/），以加强实验透明度与方法学标准化。

• 与现有解决方案相比的优势:

  • 将心理生理学领域的成熟标准移植到 HCI 中，弥补了 HCI 对 EDA 使用中的方法学缺口。
  • 提供对比分析，展示符合最佳实践的案例和问题案例。

• 实验或评估结果:

  • 41篇论文中，仅3篇完全符合心理生理学推荐术语标准。
  • 超过一半的研究未详细描述分析所用的设备和信号处理方法。
  • 仅12篇论文满足数据预处理和信号参数化的标准。

• 局限性与未来方向:

  • 局限性:
    1. 样本仅限于 CHI 论文集合，缺乏更广泛的 HCI 领域代表性。
    2. 借鉴心理生理学标准可能过于严格，未完全贴合 HCI 的多样化目标。
  • 未来方向:
    1. 开发适合日常场景的新型EDA可穿戴设备。
    2. 针对现有设备进行验证，改进其准确性。
    3. 创建更友好的实时信号处理工具，以降低学习成本。
    4. 推动 EDA 相关研究的实验复现，验证已有结论的可靠性。

通过该研究，作者呼吁 HCI 社区关注方法学中的薄弱环节，并通过社区协作提升研究质量及其透明性和标准化。