Weirding Haptics：通过发声对虚拟现实中触觉反馈进行原位原型设计

文献标题

Weirding Haptics: In-Situ Prototyping of Vibrotactile Feedback in Virtual Reality through Vocalization

文献信息

• 主题领域: 人机交互设计工具，特别是虚拟现实中的触觉反馈设计与应用
• 关键词: 触觉设计, 振动触觉反馈, 虚拟现实, 设计工具, 语音输入, 发声, 直接操作

研究背景与问题

• 问题与挑战:

  1. 在虚拟现实中设计振动触觉反馈是一项复杂的任务，目前许多设计工具需要深入的专业知识，使用抽象参数来设计效果（如频率和幅度），这对初学者来说具有挑战性。
  2. 大多数现有工具不支持直接在虚拟环境中进行快速迭代设计，也没有提供基于用户实时交互的触觉反馈的映射方法。
  3. 对于没有触觉设计经验的用户群体，如游戏开发者、新手学习者等，缺乏直观且高效的设计工具。

• 研究重要性: 高效的触觉设计可以增强用户在沉浸式虚拟环境中的沉浸感和存在感，以及与物体交互时的直观性。这对虚拟现实应用的用户体验优化至关重要。

• 研究目标和动机: 通过开发一款名为 "Weirding Haptics" 的设计工具，探索如何利用用户的声音在虚拟现实中直接设计振动触觉反馈，简化设计流程，支持触觉反馈的快速迭代和调整。

解决方案

• 方法概述: Weirding Haptics 提出了一种结合语音输入和直接操控的创新设计框架，允许用户在虚拟现实环境中通过发声快速原型触觉反馈。核心思想是“边设计边体验”，即用户实时操作虚拟对象，对设计进行发声和调整。

• 创新点:

  1. 利用用户发声的频率和振幅特性，自动生成触觉反馈并映射至虚拟环境中的对象交互。
  2. 提供了语音范围的校准功能，支持低门槛上手操作。
  3. 支持多层触觉反馈的复合设计，允许用户叠加不同的振动效果（如背景嗡嗡声和运动爆发感）。
  4. 带有一系列微调功能，包括加强随机性、调节信号强度和调制等，以支持发声中的进一步调整。

• 实施步骤:

  1. 校准阶段: 用户先通过简单任务校准语音范围（频率、振幅）。
  2. 录制流程: 用户在虚拟现实中同时操作虚拟物体和录制声音，系统根据用户的动作提取录音中频率与幅度作为振动特征。
  3. 映射设置: 为录制的音频分配预定义的时空映射（瞬时、连续、动作相关、位置相关），用户可切换不同的映射方式。
  4. 微调及体验: 通过触觉反馈实时感知设计效果，使用滑块对振幅、频率以及随机层次进行调整。
  5. 多层叠加: 用户可以为每个对象创建多个振动层并在实际交互中同时体验它们的合成效果。

研究成果

• 实验结果:

  • 设计体验: 使用者（新手触觉设计师）在经过约 15 分钟的培训后能够设计出符合其预期的振动触觉反馈（平均评分为 5.49/7）。
  • 案例探索:
    • 用户成功设计了模仿沙子流动、小石块滚动及滑动门阻力等多种触觉体验。
    • 单层设计在大多数情况下（81.2%）已足够表达用户的目标。
  • 映射应用: “动作相关”和“位置相关”映射最常被使用，分别占 50% 和 27%。

• 比较分析: 使用高分辨率自定义振动设备时，用户表示其设计的准确性有显著提高，相比普通现成控制器，提供的振动反馈更加细腻。

• 局限性与未来方向:

  1. 设计范围限制: 目前无法支持多对象交互设计，也未考虑较复杂的动作方向映射。
  2. 精细编辑功能不足: 用户表达了对裁剪、细化和分层操作的需求，这对于某些细节设计较为重要。
  3. 实时性与一致性: 出现了设计信号与实际体验之间存在些许时间延迟的问题。
  4. 输出多样性: 高分辨率振动设备尽管提升了设计效果，但在普适性上仍需要优化。

总结与未来工作

Weirding Haptics 提供了一种易用且创新的触觉设计工具，通过将用户语音的实时信号与虚拟交互映射结合，极大地降低了触觉设计的上手难度。未来可以探索以下改进方向：

1. 扩展到支持多对象交互的复杂设计场景。
2. 提供更高分辨率的输出设备，并对现有硬件优化。
3. 继续引入更精细的编辑功能，使其覆盖更高保真度的设计需求。

Weirding Haptics 的核心理念可以被应用到物理环境中的触觉设计，进一步推动触觉交互的应用研究。