Ubi-TOUCH：通过增强现实中一致的手-物体交互实现无处不在的实物利用

视频

DOI

利用日常物体作为增强现实（AR）的实物代理为用户提供与虚拟物体交互时的触觉反馈。然而，现有方法侧重于物体属性，限制了可能的代理并导致用户体验不一致。因此，我们提出了 Ubi-TOUCH，这是一种 AR 系统，基于用户期望的手-物体交互（HOI）帮助用户寻找更广泛的 AR 应用实物代理。给定与虚拟物体的目标交互后，系统扫描用户周围环境并推荐具有相似交互的物体代理。用户选择后，系统同时跟踪并将用户的物理 HOI 映射到虚拟 HOI，自适应优化物体六自由度及手部姿势，以提供交互之间的一致性。我们展示了 Ubi-TOUCH 的有前景用例，如远程教程、AR 游戏和智能家居控制。最后，我们通过用户研究评估了 Ubi-TOUCH 的性能和可用性。