SurfAirs: 适用于大型垂直显示器的表面与空中结合输入

文献标题

SurfAirs: Surface + Mid-air Input for Large Vertical Displays

文献信息

• 主题领域: 人机交互 (Human-Computer Interaction)，特别是在大尺寸垂直屏幕环境中的输入技术
• 关键词: Tangible Input, Wall Displays, Mid-air Input, Surface Input, Hybrid Interaction

研究背景与问题

• 发现的问题或挑战:

  • 大型垂直显示屏提供了高分辨率的大工作空间，使用户可以通过物理导航近距离观察细节或远距离获取宽广视角。然而，设计跨越这种大交互空间的输入技术非常具有挑战性。
  • 现有的手势识别（例如裸手输入）虽然直观，但存在识别不准确、缺乏稳定性以及与用户常规动作冲突的问题。
  • 手持式控制器虽然可以提供间接控制，但要求用户始终持握设备，影响与屏幕的直接触摸交互。

• 重要性:

  • 随着大型显示屏的广泛应用，特别是在协作和数据分析环境中，能够高效、顺畅地支持近距触摸和远距空气操作的输入技术是提升用户体验和功能的重要方向。

• 研究动机与相关工作:

  • 近年来，基于触控桌面和壁面显示的物理控制器展示了更高的效率和舒适性，但这些控制器要么只支持屏幕本身的操作，要么只支持空气中操作，尚未整合两者。
  • 作者提出研究一种能够既支持屏幕操作，又支持空气操作，并且可以跨越两者进行连续交互的混合输入设计。

解决方案

• 提出的解决方案:

  • 作者提出了 SurfAirs，一种可以在屏幕表面（Surface）、空气中（Mid-air）进行操作，并可在单次操作中完成从屏幕到空气的过渡的物理控制器。

• 创新之处:

  • SurfAir是一个真正的混合型物理控制器，可实现从表面到空气的连续操作，填补现有输入技术的短板。
  • 它结合触觉反馈与机械开关，支持精确的选择和多维度控制，同时具备手持和可固定使用的功能。

• 实施步骤与关键技术:

  • SurfAir设计与制作:
    • 通过模块化制造过程进行快速原型设计，包括吸盘机构和带滚动开关的手柄。
    • 原型设计包括两种握持设计：Torch形状和Handle形状。
  • 输入状态与转换:
    • 详细定义了触控输入和空气中输入的状态及转移，包括拖动、旋转、缩放等维度。
    • 支持无缝过渡，例如从屏幕上操作到空气操作，以及反方向过渡。
  • 跟踪与识别:
    • 使用多点触控框架和红外跟踪系统同时追踪控制器的位置和开关状态，确保精度与稳定性。

研究成果

• 具体成果:

  • SurfAirs在实验中表现出色，显著优于裸手输入。用户使用SurfAirs进行指向与停靠时的操作更加稳定、精确且舒适。
  • SurfAirs消除传统手势输入的用户依赖性，同时无需用户穿戴或手持设备，降低使用负担。

• 优势:

  • 从空气到表面的过渡流畅，用户在操作过程中感觉更稳定和自信。
  • 在同时控制多个自由度、精确选择以及复杂操作任务中，SurfAirs表现显著优于裸手输入。

• 实验或评估结果:

  • 第一项实验比较了SurfAirs与裸手输入在纯空气操作任务中的表现：
    • SurfAirs在指向任务中时间更短、错误率更低，用户主观反馈也表明其交互信心更高。
    • Handle形状比Torch形状表现更好。
  • 第二项实验评估了同时包含表面和空气操作的混合任务：
    • SurfAirs显著提高了精度与稳定性，特别是在屏幕上进行拖动、旋转和缩放操作时表现更佳。
    • transition过程中，Grab过渡技术略优于Flick。

• 局限性与未来方向:

  • 本研究的实验环境为特定的实验室设置，包括墙面显示与光学跟踪系统，未来需要验证SurfAirs在其他实用环境（如非光学屏幕或者电容屏幕）中的适用性。
  • 当前研究主要在单个用户与基本任务场景下进行，未来可以扩展至涉及多用户、多控制器以及高认知需求任务的场景应用。
  • 探讨将SurfAirs应用于复杂多显示环境中，例如结合垂直显示屏与水平触控桌面。