ThroughHand: 2D 触觉交互同时识别和触摸多个物体

文献标题

ThroughHand: 2D Tactile Interaction to Simultaneously Recognize and Touch Multiple Objects

文献信息

• 主题领域: 计算机人机交互，专注于支持视觉障碍用户的触觉交互技术研究
• 关键词: 触觉传感, 动态交互, 视觉障碍, 无障碍技术, 2D触觉显示, 游戏设计, 手掌感知, 多对象实时交互, 人机交互

研究背景与问题

• 问题或挑战:
  • 传统触屏交互对视觉障碍用户而言很困难，尤其是对于需要快速识别和操控多个动态目标的应用（如体育游戏）。
  • 当前视觉替代为听觉或触觉的系统存在局限性，如听觉信息的过载、方向定位不够精确以及缺少即时触觉输入互动的能力。
• 研究重要性:
  • 提高视觉障碍用户在实时互动和动态任务中的能力，将重塑这类人群的娱乐体验和日常人机交互。
  • 通过开发新形式的触觉交互，在多目标实时识别与操控中填补技术空白。

解决方案

• 提出的解决方案:
  • 开发了一种叫做ThroughHand的触觉交互方法，利用触感在手掌和手背两侧的交互能力，实现视觉障碍用户对2D动态空间中多个对象的识别和实时操控。
• 创新之处:
  • 通过手掌传递触觉输出，同时利用手背作为触控输入空间，形成一体化的触觉交互。
  • 提出并验证通过手掌感知多对象位置并在手背进行交互的技术可行性。
• 实施步骤及关键技术:
  • 使用能改变形状的触觉显示设备传递手掌上的刺激。
  • 利用光学跟踪技术检测主导手的触碰位置并作为输入。
  • 提前通过个性化校准提高精确度，包括记录识别的可感知点和触控误差阈值。

研究成果

• 具体成果:
  • 用户研究表明，该方案能在约13毫米误差范围内定位手掌上的刺激，并能在不同的游戏场景中提供有效的2D实时交互体验。
  • 成功开发并测试了四款游戏应用（打地鼠、射击、多人乒乓、节奏游戏），验证ThroughHand的实际应用场景。
• 与现有方案对比的优势:
  • 能同时感知多个动态对象，并实现实时互动。
  • 减少了听觉信息过载的问题，支持更直观的触觉反馈与输入。
• 实验或评估结果:
  • 精确度: 定位误差平均13.2毫米，相比基于视觉的触控选择时间仅延迟18%。
  • 游戏表现: 用户可轻松适应游戏操作（如打地鼠的成功率达67%-94%），并显示出基于触觉的游戏新可能性。
• 局限性与未来方向:
  • 显示针点分辨率受限于手掌的两点辨别阈值；提高分辨率将有助于减少运动对象的离散感。
  • 某些用户表示设备适应性需要增强，比如手较小时感知范围有限。
  • 加强形状识别能力（如利用更明显的触觉模式），探索节省个性化校准时间的方案。
  • 在未来可将潜在应用推广至动态图形用户界面、网页辅助浏览等领域。

总结

ThroughHand创新性地利用手掌感知和手背输入结合的方法，为视觉障碍用户提供了有效的2D触觉互动新形式。其成果显示了从游戏到日常动态交互的广泛应用潜力。然而，未来研究应进一步优化分辨率和用户适配性，同时探索更广泛的实际应用情境。