超越鼠标：使用抬指操作在GUI中导航的鼠标

研究背景与问题

• 作者发现了哪些问题或挑战？
  现代图形用户界面 (GUI) 常常具有层级结构（即所谓的 z 轴），但传统鼠标不支持高效的 z 轴导航。这导致了用户在操作这些结构时增加了物理移动和认知负担。解决该问题的传统方法，如增加鼠标按键或基于触摸/压力的输入方式，存在操作复杂性、记忆负担和结构扩展性受限的问题。

• 为什么这个问题很重要？
  GUI 层级结构是现代用户界面的核心特色之一，支持高效导航对于用户体验至关重要。这涉及快速切换任务窗口、便捷浏览内容以及减少误操作的风险。传统鼠标缺乏 z 维互动能力会显著降低用户在复杂桌面环境中工作的效率。

• 研究动机与相关工作
  作者分析了现有基于触摸、压力及扩展鼠标按钮的研究发现。这些方法虽然提供了部分解决方案，但仍存在局限性，如操作干扰、精度问题及学习曲线的陡峭。基于这些不足，作者提出了一种新的交互方式：通过手指提升动作以操控 GUI 的 z 轴层级，从而实现更直观与高效的界面导航。

解决方案

• 作者提出了哪些方法或解决方案？
  作者提出了 OtMouse，一种支持手指提升操作的新型鼠标。OtMouse 通过嵌入在鼠标按钮下方的距离传感器来检测手指高度；并开发了与此硬件相适配的 Over the Mouse (OtM) 界面，用于实现 z 轴交互。

• 该解决方案的创新之处是什么？

  • 手指提升检测：利用 Time-of-Flight (ToF) 传感器捕捉手指高度，并结合触摸传感器以减少误触发。
  • 操作与功能映射：将手指的高度动作映射到 GUI 的层级结构（如内容、选项卡、窗口等），并可结合鼠标平面动作进行功能触发。
  • 多级交互支持：包括连续和离散两种输入模式，适用于滑动条调整或 z 轴层级选择。

• 实施步骤是什么？使用了哪些关键技术？

  1. 硬件设计：通过市售鼠标改造，安装 ToF 传感器进行高度检测，并添加触摸传感器以校准提升动作。
  2. 交互设计：定义手指提升动作的不同高度阈值，开发适配任务的交互场景，例如窗口切换、文件预览和地图缩放。
  3. 实验评估：通过用户实验验证手指提升操作的速度和准确性，以及 OtM 界面的可用性优势。

研究成果

• 取得了哪些具体成果？

  • 在两级和三级手指提升操作中，分别实现了平均 0.47 秒和 0.63 秒的任务完成时间，同时误差率低于 2.5%。
  • OtM 界面在动态窗口切换与文件导航任务中显著减少了鼠标移动，提高了用户操作效率。
  • 在与传统鼠标的对比中，OtM 在两个任务中的 SUS（系统可用性评分）显著提升，提供了更直观的交互体验。

• 与现有解决方案相比，它有哪些优势？

  • 更直观的交互操作：手指提升动作直接对应层级结构 (z 轴)，无需鼠标侧键记忆或复杂手势。
  • 效率提升：通过减少物理移动和点击次数降低操作耗时。
  • 交互扩展性：可动态调整提升级别以适应复杂任务需求，而不仅仅局限于固定按键或压力级别。

• 实验或评估结果是什么？

  • 在任务 2（文件导航）中，OtM 的任务完成时间比传统方法平均减少了 22%。
  • 用户的主观反馈认为 OtM 操作更减少了错误可能性，特别是在多层级菜单或窗口切换场景中。

• 局限性与未来方向

  • 局限性：
    • 手指提升操作在某些任务场景中（如地图缩放）仍难以实现精确控制。
    • 长时间使用时可能存在手腕疲劳的问题，需改进硬件设计以优化人体工学适配。
    • 新用户对 OtM 界面的学习曲线较陡。
  • 未来方向：
    • 改进操作机制，如添加“锁定”功能以解决手指保持操作疲劳。
    • 为连续缩放或精准调整任务开发更多层级或更平滑的控制方式。
    • 设计更符合人体工学的鼠标形状以减少手腕压力。

总结来说，作者通过 OtMouse 和 OtM 界面创新地解决了传统鼠标在 z 轴操作中的不足，为高效导航复杂 GUI 开辟了新的维度，同时也为未来交互式硬件设计提出了新的可能性。然而，该系统仍有进一步改进的潜力，尤其是在操作精度与人体工学方面。