XR中的UI移动性控制：在静态、动态和自我实体之间切换UI位置

文献标题

UI Mobility Control in XR: Switching UI Positionings between Static, Dynamic, and Self Entities

文献信息

• 主题领域: 扩展现实（XR）中的用户界面移动性与交互设计
• 关键词: UI移动性, 扩展现实, 虚拟现实, 用户界面交互, 手势控制, 模式切换, 具身交互

研究背景与问题

• 问题与挑战: 当前针对3D用户界面（UI）在扩展现实中的移动性研究尚不充分，缺少对UI跨人、物和环境之间无缝过渡的设计空间、应用场景以及用户感知的探索。此外，商业XR应用中支持用户跨实体自由切换UI的案例十分稀少。
• 重要性: 随着XR技术的发展，UI不再局限于物理屏幕或设备，这为用户交互及UI设计带来了新的可能性和潜在问题。探索如何优化这种3D UI移动性有助于提升用户体验，满足更多场景需求。
• 研究动机与相关工作: 作者回顾了空间UI定位的设计框架、UI移动性的相关研究以及XR中模式切换技术的研究现状，并发现难以实现全面涵盖“静态、动态、自我”三种实体的UI移动性控制是目前的研究空白。

解决方案

• 提出方法: 作者定义了“3D UI移动性”概念，描述UI在静态实体、动态实体和自我实体（三类主机实体）之间的切换。同时开发了一个名为FingerSwitches的交互技术，结合用户凝视与手势操作，来支持用户指定UI在3D空间中的目标实体。
• 创新点:
  • 提出了一种完整的3D UI移动性分类法，涵盖静态、动态、自我三种实体之间的9种移动模式。
  • 开发了利用手指位置和凝视位置实现模式切换的FingerSwitches技术，可通过手势预判目标实体类型。
  • 设计了实际使用原型，将其应用于课堂、会议室、国家公园等具体场景。
• 关键技术和步骤:
  1. 定义UI主机实体类型，并将案例应用归类为跨静态、动态、自我三种实体的UI移动。
  2. 调研113款XR应用，识别当前UI移动性控制的不足。
  3. 实现FingerSwitches技术，用户通过注视选择UI、利用手势调整目标实体类型并完成交互。
  4. 使用Meta Quest Pro进行原型验证和用户研究。

研究成果

• 主要成果:
  • 确定了XR中3D UI移动性的设计空间、关键场景及应用需求，总结出以用户主机实体为核心的分类框架。
  • 基于商用XR应用的调研发现，仅6.2%的应用支持UI跨实体移动，且无人完全覆盖所有9种可能性。
  • 通过用户评价，证实FingerSwitches技术在多种场景下的有效性与可用性。
• 优势:
  • 相较于现有解决方案，FingerSwitches技术提供了更加全面的3D UI移动性控制，支持用户在静态、动态及自我实体间无缝切换UI。
  • 系统过渡流畅、控制精确，特别适用于在多变场景中的专业或娱乐用途。
• 实验/评估结果:
  • 用户研究显示，用户对静态到自我、动态到静态等模式的需求强烈，对动态到动态的共享行为高度认可。
  • 不同场景中的适用性评价差异明显：例如在会场等正式场合应用更受欢迎。
• 局限性与未来方向:
  • 局限性: 受制于现有XR设备硬件计算能力，用户手势跟踪存在一定误差；实验参与者背景不够多样，长尾应用未得到充分验证。
  • 未来方向:
    1. 改善手部跟踪与UI遮挡问题，提升技术鲁棒性。
    2. 加强隐私与数据保护机制，防止UI共享过程中可能的安全隐患。
    3. 针对特定行业与场景（如医疗培训、沉浸式数据分析）进行深度优化与扩展设计。