敏感图片：博物馆中的情感解读

文献标题

Sensitive Pictures: Emotional Interpretation in the Museum

文献信息

• 主题领域: 人机交互 (HCI)、情感计算、博物馆设计
• 作者: Steve Benford 等
• 发表会议: CHI '22 (ACM Human Factors in Computing Systems)
• 关键词: 情感计算、情感交互、情感、体验设计、博物馆、数据纪念品、视频分析、模糊性

研究背景与问题

• 问题与挑战:
  • 情感及其在人机交互中的影响已成为HCI的重要议题，但情感交互和情感计算这两种方法间的关系尚不明确。
  • 博物馆正在探索如何通过情感驱动的方式来吸引参观者，但如何设计这类体验仍是一个挑战。
• 重要性:
  • 许多博物馆正从传统的提供信息转变为更个性化和情感化的参观体验，情感驱动的展示有助于提高观众的参与度和理解。
  • 情感计算和情感交互的结合可以为HCI领域解决情感评估与反应提供新视角。
• 研究动机:
  • 探索如何设计基于数字技术的情感化博物馆体验以吸引公众并促进对情感和体验设计的理解。
• 相关工作:
  • 研究遍及情感计算（以生理学信号衡量情感状态）和情感交互（关注情感的复杂性及其社会建构）的领域。
  • 在博物馆领域，越来越多的研究探讨如何通过互动技术创造情感化的体验，但这种方法是否有效和易接受尚待验证。

解决方案

• 核心方法和流程:
  • 提出名为"Sensitive Pictures"的情感访客体验，该体验通过四步实现情感触发与反思：
    1. 启动车段（Onboarding）：访客通过移动应用选择情感并触发相应艺术作品的情感故事情景。
    2. 自我报告（Self-reporting）：通过移动应用或视频录制报告个人情感。
    3. 虚拟对话（Simulated “Phone Call”）：访客与模拟"艺术家登场"角色互动，系统捕捉面部情感信号以增强体验。
    4. 情感纪念品（Souvenir Postcard）：访客的情感数据被生成并印制为个性化明信片。
• 创新之处:
  • 将"情感计算"与"情感交互"结合，为访客提供深度情感触发的叙事体验，并通过模糊性设计增强数据反思。
  • 使用计算机视觉技术自动探测访客的面部动作单元(Facial Action Units)以估测情感。
  • 设计并提供基于情感智能的"数据纪念品"，增强了访客在情感体验后的反思。
• 实施步骤与技术:
  • 与挪威的艾德瓦·蒙克博物馆合作设计从故事、音频到视频捕捉的整合体验。
  • 使用移动Web App生成并记录访客的情感自评分数据。
  • 利用"BlueMax"计算机视觉工具分析访客面部情感反应。
  • 在访客退出体验后，通过明信片方式反映情感数据。

研究成果

• 具体成果:
  • 研究共涵盖132名公众测试者，其中39人接受了深入访谈。
  • 多数参与者报告体验令人印象深刻，情感触发明显，其中部分访客甚至认为该体验对他们具有“自省”或“疗愈”的效果。
  • 明信片设计和叙事结合成功地实现了情感数据的有意义再现。
• 优势：
  • 相较于传统博物馆体验，此设计提升情感内容的深度和互动水准。
  • 创意性地将情感计算与访客解释糅合，促使屏幕后参观者的进一步情感表现。
• 实验与评估：
  • 自我报告与计算机检测结果显示某些局限（如访客对情感滑块输入感到困惑，结合面部识别的情感准确性受限）。
  • 尽管访客部分受限于背景对话开放形式，依然认为情感可视化设计富于洞察力。
• 局限性与未来方向:
  • 局限性：自评量表及滑块模型捕捉游客情感的准确性需要提高；访客信任系统情感输出是否科学可靠仍存争议。
  • 未来方向：
    1. 探索更多元化思维下的情感可视化模型（如Ekman六基本情绪理论）。
    2. 集成更精确的生物感测来改进情感捕捉技术。
    3. 将研究扩展至不同文化情境下的博物馆观众体验。
    4. 考虑将情感体验与增强现实等技术深度结合。

总结与洞见

• 综合评价:
  • Sensitive Pictures表明了互动体验设计如何能够调动访客情感，并证明在数字化博物馆中，情感触觉包含多种技术模型潜力。
  • 情感互动与情感计算模型结合的使用促使了跨领域理解，揭示访客叙述中反映当代HCI框架出现的文化、技术交叉问题。