面对它：面部表情对协作虚拟现实中的社会存在感的影响

文献标题

Let’s Face It: Influence of Facial Expressions on Social Presence in Collaborative Virtual Reality

文献信息

• 主题领域: 社会虚拟现实（Social Virtual Reality, VR）中社会存在感的增强与面部表情的作用
• 关键词: 虚拟现实, 协作, 社会存在感, 面部表情, 用户研究

研究背景与问题

• 作者发现问题或挑战:

  1. 当前协作性虚拟现实应用无法提供与面对面交流相媲美的社会连接感。
  2. 虚拟现实环境中的多模态水平和非语言线索有限。
  3. 现有研究几乎未关注虚拟现实平台内的面部表情对社会存在感的影响，或任务类型在此间的作用。

• 重要性: 随着全球化和远程工作的普及，人们在私人和职业场景中的物理距离越来越大。社会虚拟现实可以帮助缩小这种距离，同时重新促进社会联系，从而为许多行业和个人领域提供潜在解决方案。

• 研究动机与相关工作:

  • 作者指出面部表情在实际人际沟通中极为重要，但虚拟现实中的研究仍处于早期阶段。
  • 现有研究多集中于非对称设置（例如计算机用户和VR用户之间的互动），缺少真实多用户VR环境的研究。
  • 本研究通过采用新兴面部追踪技术，系统性探索面部表情如何影响社会虚拟现实中的社会存在感。

解决方案

• 提出的解决方案:

  • 通过最近的面部追踪技术实现虚拟现实中四种面部表情（眼睛活动、嘴巴活动、两者结合、以及中性表情），并评估其与两种协作任务（语言性解释与图形性解释）的影响。
  • 进行控制实验（N=48），观察社会虚拟现实中面部表情对社会存在感的影响。

• 创新点:

  • 首次系统性研究社会虚拟现实中的面部表情如何与不同协作任务结合提升社会存在感。
  • 在纯VR设置中探讨动态面部表情的作用，补充了现有计算机交互研究的缺口。

• 实施步骤与关键技术:

  1. 使用先进的VR设备和追踪技术实现实时面部表情捕捉（如Tobii眼动追踪、VIVE嘴部追踪）。
  2. 设计语言性或图形性解释任务，模拟实际的协作需求。
  3. 通过心理问卷和行为测量（例如视线持续时间、嘴部活动变化）评估不同条件下的社会存在感。

研究成果

• 具体成果:

  • 面部表情显著提高了参与者对他人的共同存在感（Co-Presence），尤其是语言任务中的眼部活动和嘴部活动的结合。
  • 图形性任务对面部表情渲染的影响较小，但完全动态的面部动画仍有助于增强VR任务的真实感。

• 现有解决方案的优势:

  • 相比中性表情，动态面部表情（尤其是嘴部活动）显著改善了社会存在感。
  • 提供了对VR任务类型与面部表情影响交互的详细洞察，使开发者能更有针对性提升用户体验。

• 实验或评估结果:

  • 语言任务总体现更高的社会存在感。
  • 动态面部表情（眼睛和嘴巴的联合活动）延长了参与者对彼此的注视时间，同时增强了情感理解。

• 局限性与未来方向:

  • 局限性：参与者对面部表情变化的感知较为有限；硬件设备的追踪精度和表情种类有限影响了研究结果。
  • 未来方向：
    • 扩展表情种类（例如眉毛活动、面部皱纹）。
    • 探索任务设计（如采用白板协作）对非语言线索的改变。
    • 考虑影响社会存在感的更多环境因子，例如用户间的关系或VR应用种类。

附加设计建议

• 为未来VR开发建议:
  • 优先实时渲染嘴部活动以提升用户对对方情感和努力的认知。
  • 使用能集中视觉注意力的任务类型（如语言解释），以增强用户的社会活动感知。
  • 根据硬件或网络限制动态调节面部表情渲染的精细程度。

总结与贡献

本文研究了虚拟现实中面部表情对社会存在感的影响，显示出动态面部表情提升协作体验的显著潜力。通过量化与质化的综合分析，作者提出了重要的设计建议，为未来社会虚拟现实的发展提供了新思路与工具。