在虚拟现实中混合逆光流以减轻vection和模拟疾病

文献标题

Mixing in Reverse Optical Flow to Mitigate Vection and Simulation Sickness in Virtual Reality

文献信息

• 主题领域: 虚拟现实（VR）、晕动症缓解、人机交互
• 关键词: 虚拟现实, 感官冲突, 模拟病, 光流, 光流逆向可视化, 沉浸感, 感觉失调, 自我运动感

研究背景与问题

• 问题或挑战:

  • 模拟病（模拟器病或VR病）是虚拟现实应用普及的主要障碍之一，尤其是在虚拟导航场景中。
  • 模拟病的主要原因是视觉与前庭感官冲突（感官失配），用户处于静止状态时接收到环境视觉的运动信息（即自我运动感）。
  • 传统解决办法（如参考物体、模糊化处理、视场调节等）虽然部分有效，但常会削弱内容表现力和体验的沉浸感。

• 研究重要性:

  • 解决模拟病问题有助于提高VR技术的广泛接受度和用户体验质量，减少可能的负面生理和心理影响。

• 研究动机与相关工作:

  • 视觉光流是视觉运动感知的主要来源。文献[7][14][15]表明，操控光流特性可以调节视动（vection）及相关的晕动症。
  • 逆向光流（reverse optical flow）的概念尚未在用于VR病缓解的背景下充分研究。
  • 作者认为通过视觉叠加逆向光流，可能减轻感官冲突从而缓解模拟病。

解决方案

• 提出的方法:

  • 通过计算和可视化虚拟视觉运动光流的逆向光流，以降低感官冲突并缓解模拟病。

• 创新之处:

  • 提出了一种基于逆向光流的全新视觉混合方法，旨在直接减小虚拟视觉运动引起的感官冲突。
  • 比较了多自由度（DOFs）运动与视觉复杂度产生的逆向光流缓和效果差异。

• 实施步骤与关键技术:

  1. 逆向光流算法:
     • 使用Lucas-Kanade光流算法和Shi-Tomasi特征检测算法计算逆向光流。
     • 实现动态可视化，将逆向光流以短线段形式叠加在场景中。
  2. 实验设计:
     • 主实验与辅助实验设计，使用统一内容或其它典型导航内容。
     • 使用模拟病问卷（SSQ）量化模拟病程度，使用改进SUS问卷评估用户沉浸感和体验。
  3. 算法性能:
     • 光流算法实时运作，达到了80-90 fps的交互速率，适合VR环境。

研究成果

• 具体成果:

  • 逆向光流显著减少了模拟病（尤其是在2DOF、3DOF和5DOF运动条件下）的发生。
  • 在特定内容（如“Ship Ride”场景）中，光流特性（如视觉复杂度较低的内容）可能削弱方法的缓解效果。
  • 较低密度的光流可导致抑制效果不足，而过高密度可能导致用户体验下降。

• 与现有解决方案的对比:

  • 与传统方法相比，逆向光流直指感官冲突的根源，在多个DOF测试中证明了其显著优势。
  • 但与某些方法（如动态视野调节）相比，逆向光流可能有更高的内容干扰性。

• 实验或评估结果:

  • 检验了在不同DOF条件及典型导航内容下的病症缓解效果。
  • 不同DOF条件下病症的显著缓解程度如下：2DOF(p = 0.013)、3DOF(p = 0.003)、5DOF(p = 0.003)，4DOF不显著。
  • 辅助实验中，"Rollercoaster"和"Car Race"内容证明效果显著，而“Ship Ride”内容中无显著改善。

• 局限性与未来方向:

  • 局限性:
    • 算法的许多参数是以经验性方法设定的，不具有通用性。
    • 当前算法未充分抵消感官冲突，仅实现部分缓解。
    • 在低视觉复杂度场景（如海洋背景）中，逆向光流表现有限。
  • 未来方向:
    • 研究逆向光流与运动学特性（如线性/旋转运动）及视觉复杂度的关系。
    • 探索局部分布式光流混合策略与动态触发逆向光流的方法。
    • 结合现有晕动症预测技术，针对运动突变情况灵活动态调整逆向光流。
    • 探索其他形式的逆向光流可视化（如颜色编码、形状标识、边缘信息等）。

总结

本文率先提出一种基于逆向光流混合的方法用于缓解模拟病，验证了其有效性并指出许多未来发展方向。尽管存在一定局限性，该方法为虚拟现实技术领域的晕动症问题提供了新的解决思路。