搭便车的手：通过视线切换多个手部化身实现“虚拟直接”VR 操控

文献标题

Hitchhiking Hands: Enabling “Virtually Direct” VR Manipulation by Switching Multiple Hand Avatars with Gaze

出版信息

• 主题领域: 虚拟现实（VR）中远程对象操控的交互技术。
• 关键词: 虚拟现实, 手部追踪, 远程操控, 基于注视的交互, 虚拟直接操控, 身体感, 6自由度交互, 用户研究, 手部位移, 交互设计。

背景与问题

• 问题/挑战: 现有的VR操控技术受限于物理范围（直接操控）或缺乏灵活性和身体感（间接方法）。混合方法未能充分利用直接操控在整个交互过程中的优势，例如预成形和接触。
• 重要性: 解决这一问题对于实现精确且直观的VR远程对象操控至关重要，这在虚拟工作空间、设计和增强现实（AR）等领域具有广泛应用。
• 动机与相关工作: 先前的研究探索了直接、间接和混合操控技术，但没有一种方法能够充分利用在交互过程中保持接触的优势。“虚拟直接”操控的概念，即在牺牲对齐的同时保持接触，仍然未被充分研究。

解决方案

• 提出的方法: Hitchhiking Hands（HH），一种虚拟直接VR操控方法，允许用户通过注视在多个预定义的虚拟手部区域之间切换，从而实现精确的远程交互，同时保留直接操控的优势。
• 创新点:
  1. 引入“虚拟直接”操控概念，补充了3D用户界面中直接/间接的分类。
  2. 开发了HH，将手部位移与基于注视的切换相结合，用于远程操控。
  3. 通过两项用户研究评估HH在结构化和非结构化任务中的性能、身体感和适用性。
• 流程与关键技术:
  • 在交互区域附近预定义“手部区域”，每个区域关联一个虚拟手。
  • 用户通过注视激活某个手部区域，从而通过虚拟手进行操控，同时保持接触。
  • 切换方法包括即时注视、注视停留和手势+注视，用于实现有意激活。
  • 虚拟手在停用时重置到可预测位置，以降低认知负担。

结果

• 具体发现:
  • 在需要高灵活度的操控任务中，HH显著优于HOMER，表现为更快的放置时间和更高的身体感评分。
  • HH的持续接触使自然的预成形和精确的6自由度控制成为可能。
  • 用户更倾向于在结构化任务中使用HH，但认为其不太适合非结构化的全局交互。
• 相较基线的优势:
  • 在放置任务中，HH表现出更高的性能，并比HOMER引发了更强的身体感。
  • HOMER在远距离对象选择方面更快，但缺乏HH的灵活性和身体感优势。
• 实验/评估:
  • 研究1: 定量比较HH和HOMER在6自由度对象放置任务中的表现。指标包括任务完成时间、NASA-TLX工作负荷和身体感问卷。
  • 研究2: 定性评估HH在局部、区域间和全局操控任务中的表现。通过思维大声法、UEQ-S评分和访谈收集见解。
• 局限性与未来工作:
  • HH在非结构化全局任务中表现欠佳，原因是认知负担和自由创建手部区域时缺乏运动学习。
  • 需要与其他间接和直接技术进行比较评估。
  • 未来工作包括用于全局操控的混合系统、协作场景以及动态手部特性研究。

总结

本文提出了虚拟直接操控作为一种新的VR交互范式，将直接性分解为对齐和接触。Hitchhiking Hands（HH）利用这一概念，通过基于注视的切换在位移的虚拟手之间切换，保留接触优势以实现精确的远程操控。两项用户研究表明，HH在灵活任务和身体感方面优于HOMER，同时也揭示了其在全局交互中的局限性。这些发现为设计平衡真实感、范围和人体工学的VR系统提供了新见解，适用于结构化和非结构化任务。