AirConstellations：通过多个空间感知骨架实现空中设备组装的跨设备交互

文献标题

AirConstellations: In-Air Device Formations for Cross-Device Interaction via Multiple Spatially-Aware Armatures

文献信息

• 主题领域: 人机交互（Human-Computer Interaction, HCI）
• 关键词: 跨设备计算, 设备排列, 半固定工作空间, 多设备交互技术, 平台, 跨设备追踪, SurfaceFleet, 设备生态

研究背景与问题

• 研究背景: 随着越来越多的用户在个人生活和工作中同时使用多种设备，跨设备交互技术逐渐成为支持复杂工作场景的重要工具。然而，现有的跨设备方法大多基于固定的设备设置（如在环境中嵌入的交互式表面）或移动式设备联动，这些方法在空间重新配置和传感器跟踪方面存在明显的局限性。
• 问题或挑战:
  • 固定设备配置难以适应任务、用户和上下文的快速变化。
  • 移动设备生态系统（例如手机和平板电脑）提供的空间安排选择有限，设备通常需要手持使用或放置在平面表面。
  • 缺乏对设备在空间中的位置和方向进行追踪的可靠解决方案，这限制了许多跨设备交互技术的应用。
• 研究动机:
  • 提供一种既能保持移动设备的模块化和重构能力，又能根据需求物理调整设备配置的解决方案。

解决方案

• 核心方法与平台:
  • 引入一种称为 "AirConstellations" 的系统，以实现动态的“在空中”设备排列。
  • 将低成本、耐用的传感器集成到标准化的机械臂或支架上，实现设备在三维空间中的位置和方向追踪（7DoF 模型）。
  • 提供了一种“半固定”类型的跨设备互动设置，可让设备通过支架进行空间自由移动和实时定位。
• 创新点:
  • 动态“在空中”设备排列：设备的位置、方向、组合方式可动态调整，适应用户任务和场景需求。
  • 以用户友好的方式实现传感器驱动的互动行为，例如通过设备近距离感应来触发动态界面调整。
  • 提出并定义了一个设计空间，涵盖了设备物理与空间配置及其交互维度，共16个。
• 实施步骤与技术:
  1. 硬件设计: 使用通用的三关节机械支架，安装惯性测量单元（IMU）、旋转传感器以及低成本微控制器，支持姿态感知。
  2. 传感与数据融合: 将IMU获取的姿态数据与旋转传感器数据结合，构建稳定的3DoF/6DoF设备运动模型。
  3. 实时软件平台: 提供包括数据过滤、交互设计与动画可视化在内的软件工具，让系统能响应设备位置和方向变化。
  4. 交互行为设计: 为基于物理排列的用户行为（例如设备靠近、移动、旋转等）设计对应的反馈和功能。

研究成果

• 具体成果:
  1. AirConstellations 系统: 提供了一种支持“半固定”跨设备交互的解决方案。
  2. 设计空间: 详细定义了动态设备排列的16个核心维度，用以指导硬件和软件设计。
  3. 应用场景与交互技术:
     • 视频会议场景：提供独立的“任务空间”和“人物空间”，支持动态切换与个性化互动。
     • 生产力应用：设备靠近时触发工具栏切换、键盘输入重定向等功能。
     • 数据分析工作空间：支持横向或纵向设备拼接，轻松实现多显示器扩展和个人视图共享。
     • 系统层级的设备联动操作：表现为跨设备的窗口管理和轻量级应用迁移。
  4. 用户访谈反馈:
     • 用户对系统的“移动且稳定”特性高度评价，强调在共享空间调节中较高的灵活性。
     • 强调交互反馈动画的自然性和流畅性。
     • 提出了进一步简化和优化不必要的自动化行为的需求。
• 优势:
  • 与现有解决方案相比，AirConstellations在动态配置、模块化灵活性和传感精确性上有显著提升。
  • 高度适应性使其在快速变化的工作场景中具有很强的实用性。
• 局限性:
  • 当前设备支架设计从成本与稳定性之间存在一定的权衡。
  • 部分用户担忧无意操作可能导致的交互误触问题。
• 未来方向:
  1. 探索与群体协作相关的设备排列布局，支持多人、共用设备交互模式。
  2. 结合其他形式因素，例如可调节高度的机械臂、更轻便的传感装置。
  3. 在虚拟现实增强现实的应用中探索动态设备表面的潜力。