从现实到虚拟：探索现实到虚拟连续体中复制品增强的环境转换

文献标题

From Real to Virtual: Exploring Replica-Enhanced Environment Transitions along the Reality-Virtuality Continuum

文献信息

• 主题领域: 混合现实（Mixed Reality）、虚拟现实（VR）与增强现实（AR）过渡技术
• 关键词: Cross-Reality, Virtual Reality, Augmented Virtuality, Augmented Reality, Transitions, Replica, Visual Coherence, User Study

研究背景与问题

• 问题与挑战:

  • 当前大多数混合现实（MR）应用程序局限在现实-虚拟连续体（Reality-Virtuality Continuum, RVC）的单一阶段，未能充分利用从真实环境到虚拟环境的过渡。
  • 过渡过程通常导致用户认知负担增大，空间定向能力降低，过渡体验欠缺连贯性。
  • 虽然已有工具如VRception可模拟RVC的所有阶段，但缺乏针对过渡设计进行评估的研究。

• 重要性:

  • 在多个用例中需频繁穿梭于现实与虚拟场景之间，设计用户友好的过渡方式对于提升用户体验至关重要。
  • 对不熟悉虚拟现实设备的用户而言，流畅的环境切换可以提高技术的可用性和接受度。

• 研究动机与相关工作:

  • 呼应Auda等人关于Cross-Reality的研究领域框架，结合Slater、Steinicke等人关于数字复制体（digital replica）应用的研究，作者探索了将多种技术整合到统一过渡方案中的可能性。
  • 现有过渡技术主要集中于单一技术或单一阶段的实现，未全面整合一致性光照、地理复制环境等方法。

解决方案

• 方法与解决方案:

  • 提出了一个基于RVC的通用过渡架构，涵盖从真实环境到完全虚拟环境的所有阶段。
  • 为实现更自然的过渡，设计并实现了四种不同的基于对象技术的过渡方案：Fade、Dissolve、Translate 和 Combine。
  • 使用数字复制环境（replica environment）作为过渡的中介，确保视觉上的连贯性与用户认知流畅性。

• 创新之处:

  • 首创综合性过渡概念，将现实环境与目标虚拟环境通过数字复制模型连贯地衔接。
  • 引入了子对象和对象组机制，以便更细粒度地控制过渡过程。
  • 完善了过渡过程中光照一致性的处理，使虚拟环境的光源和真实光照更加相符。

• 实施步骤:

  1. 使用基于视频透视的HMD从真实环境开始。
  2. 渐进式引入数字复制环境，并通过特定过渡技术替换真实对象。
  3. 逐步溶解复制环境，将目标虚拟环境构建完毕。
  4. 在目标环境中，用户可自由沉浸；回到真实环境时反向执行过渡。

• 关键技术:

  • 视觉技术: 基于Fade、Dissolve、Translate的效果设计，支持用户视觉引导。
  • 数字复制体: 创建准确的环境数字复制模型，通过材质渲染保证真实感。
  • 光照一致性: 提取当前GPS坐标与天气信息，动态模拟真实光照条件。

研究成果

• 具体成果:

  • 通过用户研究验证了所提过渡模式的用户体验优势，特别是在空间定位和用户熟悉环境变化方面表现突出。
  • Combine技术作为综合性策略受到用户喜爱，平衡了视觉效果与引导。
  • 数字复制环境大幅减少了认知负担，并增强了过渡过程的空间感知能力。

• 与现有解决方案的比较:

  • 与简单的Fade过渡相比，提出的多元化方法提升了视觉吸引力和空间感知支持。
  • 数字复制环境避免了直接从真实到虚拟的突兀变化，弥补了其他方法的不足。

• 实验或评估结果:

  • 使用短版本的用户体验问卷（UEQ-S）对视觉效果进行定量和质性分析，Combine技术综合得分最高，Baseline无复制环境的方案得分最低。
  • Dissolve与Translate技术被部分用户评价为"有趣"，但可能因过渡效果过于突出而引发不适。
  • 光照一致性对过渡效果影响较小，部分用户甚至更喜欢夸张的“非一致性”效果。

• 局限性与未来方向:

  • 研究中的Combine方案未完全随机次序展开，未来需更深入的定量研究。
  • 光照一致性转换可能需要更复杂的实现，逐步模拟从真实到虚拟的光源变化值得进一步探讨。
  • 未来建议在实际场景（例如工业培训或游戏）中扩大验证范围，同时探索自动化生成复制环境的技术。