与脊髓肌萎缩症患者在虚拟现实中的上身手势交互设计

文献标题

设计面向患有脊髓性肌萎缩症群体的虚拟现实上半身手势交互

文献信息

• 主题领域: 人机交互、虚拟现实、辅助技术与无障碍设计
• 关键词: 脊髓性肌萎缩症, 虚拟现实, 上半身手势, 用户定义手势, 人机交互

研究背景与问题

• 发现的问题或挑战:

  1. 脊髓性肌萎缩症（Spinal Muscular Atrophy, SMA）是一种严重的常染色体隐性遗传疾病，对运动功能造成很大影响，尤其是身体近端肌肉的运动能力。
  2. 当前虚拟现实（VR）设备的交互设计未充分考虑SMA群体的具体需求，其偏向能够正常使用控制器或手势的用户。
  3. 尽管研究已开始探索基于注视辅助手势的VR交互，但尚未了解SMA患者对技术的实际需求以及能否执行相关手势。

• 研究的重要性: 虚拟现实不仅提供了无法在现实中实现的交互体验，还能够为行动受限的用户提供更多平等的参与机会。然而，目前的VR输入方式对具有运动障碍的用户，尤其是SMA患者并不友好。因此，研究这类群体的需求对于提升技术的包容性和无障碍性至关重要。

• 研究动机与相关工作: 本研究继承了“用户定义手势”方法的优势，通过直接邀请目标群体参与设计过程，探索最适合他们的交互方式。此外，文献回顾发现已有研究探索基于眼神注视结合手势的交互方法，但未具体针对SMA群体。

解决方案

• 提出的方法或解决方案: 作者设计了一项用户定义手势的研究，专门面向有VR使用经验的SMA患者，通过视频观察和交互实验，收集他们为虚拟现实任务设计的上半身手势数据。

• 创新之处:

  1. 本研究是少有的针对SMA群体的VR手势交互设计。
  2. 扩展了手势设计空间，涵盖了眼睛、面部、头部、上肢及其他部分的潜在手势，并分析了参与者的心理模型。
  3. 提出了面向无障碍交互的手势分类体系和用户设计偏好，从认知、身体需求和社会接受性角度提供建议。

• 实施细节和关键技术:

  1. 实验对象: 招募了12名SMA患者（分别为I、II和III型），通过远程和线下实验记录其手势设计过程。
  2. 视频分析与命令采集: 收集60个流行VR应用视频，提炼26个通用命令并分为三大类（菜单相关、三维物体相关、运动相关）。逐步展示这些命令的交互效果，引导参与者理解任务。
  3. 数据分析: 将收集的312种手势分类为15种不同身体部位参与的手势，并计算每个命令的手势一致性分数。

研究成果

• 具体成果:

  1. 制定了一套面向普遍VR交互的26个命令参考集合。
  2. 提出了一个用户定义手势分类体系，包括手部、眼部、头部、肩部等参与的手势。
  3. 识别出四种与SMA群体相关的手势设计心理模型。

• 比较优势: 与现有研究相比，本文深入考虑了目标群体的能力极限和独特需求，提出了三种问题解决的策略（例如通过微动作映射大范围动作），增强了设计的实际性和可接受性。

• 实验与评估结果:

  1. 大多数参与者倾向于使用手作为设计手势的主要部位，尤其在三维物体操作中。
  2. 不同任务类别之间体现出显著的身体部位使用偏好差异。例如菜单命令类别更多依靠眼部操作。
  3. 通过计算一致性分数发现，大部分命令的用户设计手势分布广泛，表现出了显著个性化需求。

• 局限性与未来方向:

  1. 局限性:
     • 参与者数量有限，尤其是重症类型的SMA群体参与较少。
     • 采用2D视频方式示范VR任务，可能影响参与者的设计灵感和质量。
     • 使用单摄像机记录远程实验，可能限制了手势观察的完整性。
  2. 未来方向:
     • 扩展未来实验参与者范围，涵盖更多严重运动障碍患者。
     • 在真实VR环境中，通过沉浸式辅助技术和能够实时记录的设备完善实验设计。
     • 探索基于用户偏好的动态手势适配系统。
     • 将用户定义手势纳入康复训练场景，进一步发挥虚拟现实的治疗潜力。

总结与影响

本文通过用户参与设计的方法，为患有SMA的群体探索了虚拟现实交互的手势可能性。这项研究不仅揭示了目标群体的心理模型，还提供了具体设计建议，使虚拟现实技术既能成为娱乐工具，也能融入康复培训，提高无障碍技术的整体水平。