ReachPad：通过触觉重定位使用单个物理板与多个虚拟屏幕进行交互

研究背景与问题

• 发现的问题或挑战
  随着虚拟现实（VR）技术的发展，二维用户界面被扩展到三维空间，但随之而来的是缺乏触觉反馈的问题，这对用户体验和精确操作产生了消极影响，尤其是对跨屏幕选择和交互任务。现有的解决方案通常需要特殊的触觉设备或高度定制的硬件支持，且很少研究如何通过单一物理代理与多个虚拟屏幕进行交互。

• 重要性
  用户在三维空间中操作多个虚拟屏幕时，触觉反馈不仅可以提升用户浸入感和满意度，还可以显著减少交互错误，提高用户控制的精确度和任务效率。然而，目前的技术还不能简单地与多个虚拟屏幕结合，探索一种低成本、易于实施的解决方案非常重要。

• 研究动机与相关工作
  为了应对上述挑战，该论文借鉴了以往关于虚拟屏幕交互技术和触觉重定位技术的研究，结合交互和触觉反馈的优势，提出了一种基于单一物理板的多屏幕触觉重定位方法，并进行了详细的实验验证其性能和设计空间。

解决方案

• 提出的解决方法
  作者提出了“ReachPad”，一种将多个虚拟屏幕映射到单一物理板上的交互方法。用户使用一块固定的物理板，通过触觉重定位技术感知多个虚拟屏幕，从而无需多个硬件或复杂环境，就能实现跨屏操作。

• 创新之处

  1. 利用触觉重定位来动态改变虚拟手与物理板的映射关系，扩大单一物理板的用途。
  2. 通过眼动跟踪，用户能够在多个虚拟屏幕之间进行自然无缝的切换。
  3. 提出了三种跨屏幕拖放方法，并在实验中验证了其性能，为未来的多屏交互提供设计参考。
  4. 将低成本的触觉代理的可能性扩展至支持复杂的多屏任务。

• 实施步骤与关键技术

  1. 使用触觉重定位方法，将用户的虚拟手动态重定向至虚拟屏幕，保持物理手与实际输入板之间的同步。
  2. 通过眼动追踪技术，实时切换物理板所映射的虚拟屏幕，确保屏幕操作的跃迁自然平滑。
  3. 设计并测试三种跨屏拖拽方式（角落法、长按法、边缘法），以优化用户体验。
  4. 在实际应用情景中，将“ReachPad”和传统交互设备（如手柄和空中交互）进行了实验对比。

研究成果

• 具体成果

  1. 优化设计：通过实验确定了最佳虚拟屏幕尺寸（46度视野角）和位置（偏右偏下更受欢迎）。
  2. 跨屏交互创新：提出了边缘法，在跨屏拖拽任务中表现最佳，兼具速度、路径效率和低错误率。
  3. 实用性验证：与现有方法（空中交互和手柄）相比，ReachPad在沉浸感和享受度上显著优于其他交互方法，同时保持较低的任务负担。

• 优势 compared to existing solutions

  • 相较于手柄交互，ReachPad提供了更精确的拖拽操作，适合连续性和复杂任务。
  • 与空中交互相比，触觉反馈减少了手部疲劳，提高用户的自然交互体验，同时降低了错误率。
  • 不需要更多的物理界面，拥有较高的成本效益和实际可用性。

• 实验或评估结果

  1. 用户在实际应用场景（如绘画、夜店控制）中对ReachPad的浸入感和享受度评分显著高于其他方法。
  2. 实验数据显示，边缘法的跨屏拖拽效率最好，且误差次数最低，适用性最高。
  3. NASA-TLX评估表明，ReachPad的用户任务负担低于空中交互，与手柄方法相当。

• 局限性与未来方向

  1. 硬件限制：当前需要外部精度较高的手部追踪系统（例如Optitrack），未来可能会探索内嵌追踪方案的兼容性。
  2. 设计扩展：虽然使用单指操作已证明效果良好，还需进一步研究多指和双手交互下使用触觉重定位的效果。
  3. 精度挑战：非离线环境下的深度轴操作和触觉重定位需要进一步优化，以提升复杂任务场景的表现。
  4. 应用场景延拓：探讨如何在真实办公环境中扩展ReachPad的设计及其对工作流程效率的提升。

该论文的研究为VR多屏交互提供了一种低成本且创新的解决方案，能够突破现有方法的物理限制，并在多种任务中证明其卓越表现。未来可围绕更复杂场景以及更广泛的用户需求扩展研究内容，从而进一步推动多屏VR交互技术的实际应用。