远程评估情感过程中的共情准确性与精神努力

文献标题

Empathic Accuracy and Mental Effort During Remote Assessments of Emotions

文献信息

• 主题领域: 人机交互、远程用户情感评估
• 关键词: 远程用户研究, 情绪, 同理心, 用户界面, 声音, 人机交互, 认知同理心, 情绪分析, 面部表情, 主观感知努力

研究背景与问题

• 发现的问题或挑战：

  1. 随着COVID-19疫情推动远程交互和视频会议的普及，远程用户体验测试的需求显著增加。
  2. 在远程环境中，由于光线、噪声、数据压缩和硬件差异等因素，可能对研究者判断用户情绪的准确性造成偏差。
  3. 当前仍不清楚远程情感评估中哪些信息渠道（如用户视频、声音、用户界面）对准确判定用户情绪最关键。

• 重要性： 情绪是用户体验的重要组成部分，从用户互动中准确识别并解读情绪能够帮助优化交互设计和人机交互质量。

• 研究动机：

  1. 探讨评估用户情绪所需的关键信息渠道（如用户的视频、声音、用户界面可见性）。
  2. 探讨不同信息条件下研究者的认知负担（mental effort）。
  3. 为远程用户研究提供实践指导和理论依据。

解决方案

• 研究方法：

  • 实验设计：在线实验中，参与者观看30段简短的视频记录（4-19秒），研究者操控视频中显示的信息元素，包括用户视频、用户界面视频和声音组合的6种信息条件。
  • 研究假设：
    1. 提供所有信息通道（用户视频+声音+用户界面）可以最大限度地提高同理心准确性（H1）。
    2. 提供用户界面背景信息可以提高情绪判断的准确性（H2）。
    3. 同时处理多个信息通道会增加认知负担（H3）。
  • 依变量：
    • 同理心准确性（成功识别情感的精确度）。
    • 主观心理负担（使用主观心理负担量表-SMEQ衡量）。

• 创新之处：

  1. 在特定远程用户研究情景下首次定量分析上下文信息对情绪识别的影响。
  2. 探讨用户音频信息在情绪解读中的关键作用，这在情绪识别研究中较少被关注。

研究成果

• 具体成果：

  1. H1验证：所有三种信息通道（用户视频、声音、用户界面）合在一起时，参与者的同理心准确性最高，平均达68%。
  2. H2 驳回：用户界面的单独可见性未显著提高情绪识别的准确性。
  3. H3 部分支持：单一条件下的用户视频（无声音或界面）反而增加了参与者的主观心理负担；而声音信息对于情绪识别表现出较高的重要性。

• 与现有工作的比较：

  • 本研究补充了现有情绪识别文献中对情绪上下文和音频的关注，强调声音信息在实际情感推断中的作用，打破了以往更多集中于面部表情的研究偏向。
  • 高质量音像结合的远程测试可作为面对面测试的强有力替代。

• 实验和评估结果：

  1. 信息通道对比显示更多信息能提高情绪识别的准确性，局部验证了“信息越多越好”的假设，但界面信息的具体贡献有限。
  2. 参与者在识别“复杂情绪”（如自豪与快乐区分）时表现较弱，体现了纯观察法的缺陷。

• 局限性与未来方向：

  1. 视频素材采自由YouTube 选取，尽管生态效度高，但某些场景非自然表达。
  2. 没有纳入复杂情绪触发、情感强度等更多变量。
  3. 建议未来研究扩展到更多真实用户研究场景，包含长时间的视频分析和多模态情感验证。
  4. 可以探索如何提升声音通道分析在用户情绪识别中的技术性能。

总结：本研究强调，为获取准确的远程用户情绪理解，研究者应优先确保用户视频、音频和系统界面信息全面传输，特别强调了声音信息的重要性。