将现实世界的干扰整合到虚拟现实中

文献标题

Integrating Real-World Distractions into Virtual Reality

文献信息

• 主题领域: 虚拟现实 (VR) 与人机交互
• 关键词: 虚拟现实, 实感, 干扰, 多模态交互, 哈普提克技术, 沉浸感, 嗅觉模拟, 触觉反馈, 实验验证

研究背景与问题

• 问题或挑战:

  • 虚拟现实用户所处的物理环境中带来的干扰（如声音、风、气味等），常常会破坏用户的沉浸感（Presence）。
  • 当前主要依赖如降噪耳机等硬件解决方案，这种方式无法过滤多模态干扰（如温度变化、触觉、气味等）。
  • 对于现有VR用户而言，现实世界中与虚拟场景不符的外部刺激是一个常见问题，容易导致“沉浸感断裂”（Break in Presence）。

• 研究重要性:

  • 沉浸感是高质量VR体验的核心，突破干扰的限制将提高用户体验。
  • 解决这一问题能够扩展VR在非受控环境（如公共场所、家庭场景）中的应用潜力。

• 相关研究:

  • 先前的研究探讨了虚拟环境的触觉与视觉同步，但对“逆向映射近似”（即将现实中的干扰整合入虚拟体验）探讨甚少。
  • 一些工作关注在VR中如何通知用户外界事件（如重要通知），但鲜有内容涵盖如何对抗无意干扰。

解决方案

• 提出的方法:

  • 提出一种整合现实世界干扰的方法，将外界干扰信号直接映射到虚拟体验之中，从而减少其破坏沉浸感的影响。
  • 方法可涉及多模态映射（声音、风、温度、触觉、气味等）并通过直接和扩展式映射技术进行。

• 创新点:

  • 直接映射 (Direct Mapping): 干扰信号被映射为与实际来源紧密相关的虚拟反馈（例如，物理的风被映射为虚拟场景中的树叶摇动）。
  • 扩展映射 (Stretch Mapping): 干扰信号被映射为松散相关的虚拟反馈（例如，耳边的笑声被映射为一种虚拟幽灵活动）。

• 实施步骤及技术细节:

  • 建立硬件系统，包括传感模块（如噪声、温度、风力的多传感器）。
  • 开发简单的UI，用户可选择允许整合干扰的种类。
  • 创建Unity3D开发工具，用于设计者快速定义从现实刺激到虚拟效果的映射脚本。
  • 在多种现实环境下进行技术评估与用户试验（包括实验室内外）。

研究成果

• 具体成果:

  • 在实验室环境下，验证了该技术可显著提升VR沉浸感（Presence）并降低干扰感知程度：
    • 使用直接映射技术，沉浸感评分显著提升（从3.2提升至5.5）。
    • 对干扰的感知评分显著下降（从4.7降低至2.3）。
  • 在真实环境中测试时，也观察到了与实验室环境一致的趋势。
  • 招募VR内容设计师，观察离线设计实践，获得36种整合映射案例，并总结设计策略。

• 与现有方案的对比:

  • 优势：
    1. 无需改变物理环境的条件，只通过虚拟内容设计即可解决干扰问题。
    2. 技术成本较低，扩展性强，可集成现有VR硬件。
    3. 局限性少——适用于多种类型的干扰。
  • 劣势：
    1. 内容创建依赖设计师花时间进行定制化设计。
    2. 技术实现精确性限制（例如，干扰信号的误分类）。

• 局限性与未来方向:

  • 当前版本设计需显式定义不同干扰的虚拟效果，限制内容快速自动生成的能力。
  • 对“有用干扰信号”（如有人叫名字）的检测和区分能力较低。
  • 假阳性或误触发的现象仍存在。
  • 未来方向：
    1. 开发更高效的自动映射工具以减少设计师的工作量。
    2. 优化传感器性能，改善检测准确性。
    3. 进一步探索如何平衡有用干扰信号与沉浸感之间的关系。

主要设计考量

• 干扰整合设计应尽量对虚拟体验的故事情节无影响。
• 在设计时，可以采用“一对多”映射策略，一个虚拟效果涵盖多种干扰。
• 在性能受限的情况下，推荐通过扩展式映射方案减少工作成本。
• 应限制同时触发的效果数目，避免因过多信息而分散用户注意力。
• 在用户输入上给予足够权限，保证对潜在干扰类型的自主选择能力。

通过本研究，作者验证了一种创新性VR设计方法，以用户为中心，实现了“外部干扰由噪声转换为VR沉浸感增强器”的新用途。