ThrowIO: 通过悬垂式移动轮式机器人实现“投掷和接住”空间交互的驱动TUI

文献标题

ThrowIO: Actuated TUIs that Facilitate "Throwing and Catching" Spatial Interaction with Overhanging Mobile Wheeled Robots

文献信息

• 主题领域: 人机交互和机器人技术领域，研究一种新型的可动实体用户接口用于空间交互。
• 关键词: Actuated Tangible User Interface, Human-Robot Interaction, Human-Computer Interaction, Swarm User Interface, Spatial Interaction

研究背景与问题

• 作者发现的挑战:
  • 现有的虚拟现实(VR)和增强现实(AR)交互技术缺乏对日常空间真实物品投掷和接收动作的支持，许多研究集中于提供触觉反馈或中空物品悬浮的体验，但很少关注交互性强的"投掷与接收"操作。
  • 投掷与接收是日常活动中的自然动作，如垃圾投掷、运动训练、亲子互动等，但现有的技术实现难以保留交互的真实触觉感和学习体验。
• 重要性:
  • 投掷与接收是重要的空间交互行为，用于运动技能学习、沉浸式体验、娱乐等。开发新的技术来强化此类交互不仅有助于学习和游戏，还可扩展至存储、通信等实用场景。
• 研究动机与相关工作:
  • 历史研究关于机器人操纵物品的投掷与接收功能需要复杂的物理环境安装和快速反应控制。这些系统通常忽略了与用户的直接空间交互。
  • 虚拟现实中已有的解决方案无法在真实物品的物理投掷和接收中模拟触觉感，还有操作行为本身的缺失。

解决方案

• 提出的方法与创新:

  • 核心概念: 作者提出了一种称为"ThrowIO"的新型可动实体用户接口(Actuated Tangible User Interface)，以天花板悬挂表面的可移动轮式机器人为媒介促进真实物品的投掷与接收交互。
  • 实现方式: 用户将含有磁体的物品投向铁磁性悬挂表面，机器人通过推移或掉落操作，将物品移至指定位置供用户接收。
  • 创新点: 融合了实体物品的物理交互与数字系统的支持，展示了其在沉浸体验、学习场景以及日常空间应用上的可能性。ThrowIO安装简单，易于与日常空间集成。

• 实施步骤与技术:

  • 使用可移动轮式机器人(toio)和自定义机械外壳实现推移和掉落操作。
  • 利用铁磁性表面结合RGBD摄像头跟踪投掷物品位置，并通过计算机算法分析物品轨迹。
  • 系统结合图形增强界面，如屏幕显示与投影映射，扩展用户体验并增加互动性。

研究成果

• 具体成果:

  • 开发了一种原型系统，证明了物品在悬挂表面的投掷与接收通过机器人控制是可行的。
  • 实现了多种应用场景，包括运动技能训练、游戏互动、沉浸式体验、天花板储藏以及通信。
  • 技术评估:
    • 投掷物品后黏贴到悬挂表面的平均成功率为79.48%，接收物品时的成功率为90.71%。
    • 机器人在推移操作和掉落操作中的可靠性较高，均达到100%的操作成功率。
  • 用户研究:
    • 在16名参与者上进行测试，用户对系统的易用性、直观性和实用性均给出了正面评价，尤其认可其在游戏和储藏情景中的应用。
    • 提出了改进建议，如加强黏贴性能和增加对检测状态的视觉提示。

• 优势与不足:

  • 优势: 融合了物理和数字交互，为用户提供真实触觉体验。ThrowIO安装简单，能够进行多种高度调整和应用扩展。
  • 局限性:
    • 投掷物品在某些角度和速度下不能很好黏贴到表面。
    • 当前原型受限于机器人数目和跟踪系统，无法支持多对象同时交互。
    • 机器人掉落物品的速度和角度不可变，限制了其在沉浸体验中的精确控制。

• 未来方向:

  • 开发可扩展的跟踪技术以支持更多机器人同时操作。
  • 优化投掷物品材质和形状以增强附着性能。
  • 提升机器人掉落操作的灵活性，能够控制掉落角度和速度。
  • 扩展系统应用场景至墙面、窗户等表面，同时支持更多用户同时参与交互。

总结

ThrowIO揭示了一种新型空间交互技术的潜力，通过结合真实物品触觉与数字系统支持，为运动技能训练、娱乐、物品储藏和通信提供了创新解决方案。尽管在性能和扩展性上存在挑战，它为未来空间用户界面设计开辟了独特方向。