来了没有声音！声音反馈缺失对游戏化图像分类任务中的表现和用户体验的影响

文献标题

Here Comes No Boom! The Lack of Sound Feedback Effects on Performance and User Experience in a Gamified Image Classification Task

文献信息

• 主题领域: 人机交互、游戏化设计、声音反馈对用户体验与任务表现的影响
• 关键词: 声音效果, 游戏化, 反馈音效, 用户体验, 微任务, 情感体验, 任务表现

研究背景与问题

• 研究问题: 声音效果 (SFX) 在游戏化系统中被广泛使用以补充视觉反馈，但其具体影响尚未被系统研究。作者希望回答不同情感特征的 SFX 如何影响用户的任务表现、情感体验、沉浸感和动机。
• 重要性: 游戏化旨在通过设计元素（如积分、徽章、排行榜等）改善任务体验，提升用户参与度和表现。然而，如果声音反馈不能有效改善用户体验，设计资源的使用可能就需要优化。因此，揭示声音反馈的真实作用对游戏化设计及其推广意义重大。
• 研究动机: 尽管声音效果是游戏和游戏化系统中的常见元素，其实际影响仍未被系统化。例如，对声音包纳的情感特征（如情绪的愉悦度和唤醒度）如何影响用户行为是一个开放问题。本研究旨在填补这一领域的空白。

解决方案

• 方法与解决方案:

  • 声音设计: 创作了18种声音效果，并基于情感模型（情绪圆环模型）设计了高愉悦度-高唤醒度（HV-HA）、低愉悦度-高唤醒度（LV-HA）、低愉悦度-低唤醒度（LV-LA）和高愉悦度-低唤醒度（HV-LA）四组声音效果。
  • 实验设计: 开展两项实验：
    1. 声音激发研究: 对声音效果的情感特征进行验证，选出四个最具代表性的声音效果；
    2. 游戏化平台研究: 在一个游戏化的图像分类任务中测试声音反馈对任务表现及用户体验的影响。
  • 关键技术: 使用声音设计和数字音频工具，如 Cubase Pro 和音频合成器，确保声音特征符合情感模型的目标值。此外，实验表征了声音唤醒度和愉悦度对用户体验的影响。

• 创新之处:

  • 首次系统性地研究声音反馈在游戏化系统中的作用。
  • 通过结合情绪圆环模型和用户实验，验证声音设计能否有效传递预期情感。

研究成果

• 具体成果:

  • 声音激发研究中验证了某些短时声音效果确实能够激发预期的情感反应。
  • 实验结果显示，不同的声音效果对音效听觉的情感体验有所改变（如显著影响“压力/紧张感”），但在实际任务中的影响微乎其微。

• 主要发现与贡献:

  • 在游戏化系统中，声音反馈对任务表现（包括完成时间和积分）、用户享受感、沉浸感以及情感体验均未表现出显著影响。
  • 唯一显著的发现是，低愉悦度的声音效果会增加用户的压力感，这表明不适宜用于正面奖励。

• 实验与评估结果:

  • 任务表现: 用户完成任务的时间和积分未因声音反馈的类型而有显著变化。
  • 用户体验与动机: 声音反馈几乎对用户的享受感、沉浸感和动机无直接影响。
  • 情感体验: 声音在实验中引发的情感体验未能影响用户与任务互动时的情感状态。

• 局限性与未来方向:

  • 研究是在在线环境中进行，无法统一用户音响设备的质量及环境噪音的干扰。
  • 声音反馈可能因其短时性或重复性而被参与者忽略，这反映了视觉反馈的主导效应（视觉信息可能压倒听觉信息）。
  • 未来研究应进一步探讨音乐背景（非短时声音效果）、不同任务类型，及实验室环境下更可控的声音反馈实验。
  • 声音反馈的设计应关注其复杂特性，并研讨更深层次的用户体验影响。

总结

• 核心观点: 声音反馈在游戏化系统中的作用可能被高估，仅在某些情况下（如低愉悦度声效）对用户压力产生负面影响。本研究表明声音反馈的设计应基于更多的基础研究和操作性验证，而非强制性地集成到游戏化系统中。
• 未来研究方向: 声音反馈对用户体验的作用尚待进一步研究，尤其是在缺乏视觉反馈或背景音乐的情况下，同时需要探索对更广泛的任务类型的影响。