立体视觉与单眼触觉：VR 中通过移动设备选择远距离对象

文献标题

Stereoscopic Viewing and Monoscopic Touching: Selecting Distant Objects in VR Through a Mobile Device

文献信息

• 主题领域: 虚拟现实（VR）交互技术
• 关键词: 虚拟现实, 智能手机, 透明度, 远距离选择, 双眼视差

研究背景与问题

• 发现的问题或挑战:

  • 在VR中使用远距离选择技术时，双眼视差（binocular parallax）会导致用户难以精准地选定目标物。
  • 当前许多基于移动设备的VR交互技术未有效解决远距离交互的挑战，例如对象选择中的准确性与直观性。

• 重要性:

  • 随着VR技术的普及，日常设备如智能手机可能会成为用户与虚拟环境交互的重要工具。如果能够有效结合VR的沉浸式视觉输出与智能手机的触觉输入，将增强人与虚拟环境交互的效率与体验。

• 研究动机与相关工作:

  • 许多研究探索了使用智能手机在VR环境中进行平面交互（on-plane）或者面切交互（as-plane）的可能性，但较少关注“透面交互”（through-plane），即通过透明面与远处目标物交互。
  • 双眼视差的问题在透明界面中长期存在，现有解决方案如目标位置重复不可避免，但仍有局限，有必要引入新的技术来彻底解决这一问题。

解决方案

• 提出的方法或解决方案:

  • 提出了一种结合“立体观察模式”（Stereoscopic Viewing）与“单眼触碰模式”（Monoscopic Touching）的新选择技术。
  • 用户可以通过智能手机屏幕观察远处目标物，并通过智能手机屏幕触摸精准选择这些目标物。
  • 在两种模式之间引入平滑动画过渡，以减少视觉上的不适感。

• 创新之处:

  • 首次将单眼渲染（monoscopic rendering）应用于透明移动设备，并通过动画过渡解决了双眼视差带来的交互问题。
  • 实现了一种更快、更精准、直观的远距离选择技术，与当前广泛使用的射线投射（ray casting）技术相比效率更高。

• 实施步骤与关键技术:

  1. 智能手机默认以“立体观察模式”呈现为透明玻璃面，允许用户通过屏幕观察远处目标。
  2. 当用户手指接近屏幕时，切换至单眼触碰模式，将屏幕内容以单眼渲染展示以消除双眼视差问题。
  3. 通过动画平滑过渡两种模式以避免突然的视觉变化导致眼疲劳。
  4. 使用算法动态调整目标物的三维网格空间位置以实现动画过渡。

研究成果

• 具体成果:

  • 提出的技术显著改善了目标选择的时间与精度：使用新技术的目标选择时间减少了27%，选择精度提高了45%。

• 与现有解决方案相比的优势:

  • 与射线投射相比，该技术在远距离目标选择时表现得更出色，特别是在目标距离增加的情况下。
  • 动画过渡减少了视觉疲劳，并增强了用户的交互体验。

• 实验或评估结果:

  • 通过对12名参与者的量化实验和NASA TLX问卷调查发现：
    • 新技术在目标选择的时间和准确性上比射线投射显著更优。
    • 新技术在用户感知的心理负担、挫败感以及性能表现上得分更优。

• 局限性与未来方向:

  • 局限性：
    • 原型实现采用透明亚克力板模拟智能手机，可能限制了用户的持握姿势选择。
    • 当前通过声音检测触摸事件的方法存在误触发的问题，但对实验结果影响较小。
  • 未来方向：
    • 探索更舒适的长期使用和重复任务的设计。
    • 建模其交互性能以定量分析其应用场景，例如使用Fitts法则进行性能建模。
    • 技术可扩展至不同尺寸的触摸设备或墙面。
    • 支持触笔输入以增强像3D速写这样复杂的场景使用。

该文献为VR领域的交互技术提供了强有力的新思路，强调通过智能手机屏幕的直觉式透明交互丰富VR空间操作的可能性。