BackTrack：通过前触摸屏实现的2D设备背面交互

文献标题

BackTrack: 2D Back-of-device Interaction Through Front Touchscreen

文献信息

• 主题领域: 人机交互（HCI）与智能手机触控交互
• 关键词: 背面设备交互, 电容感应, 智能手机触控, 2D轨迹板, 用户界面设计, 人机界面, 无需电源的交互设备, 原型设计, 低功耗交互设备, 多点触控

研究背景与问题

• 发现的问题或挑战:

  • 智能手机的正面触控屏幕容易被手指遮挡，从而影响用户交互体验。
  • 背面设备交互（Back-of-Device, BoD）可以使用智能手机背面的闲置手指进行操作，但现有系统大多功能受限，仅支持1D滑动或点按交互。
  • 大多数BoD的实现需要外部电源或对操作系统进行修改，给应用带来了较大的实现难度。
  • 缺乏开关机制，易因意外触摸导致误操作。

• 重要性:

  • 推进BoD交互技术的发展可以提升用户对智能手机的操作灵活性，减少触控屏的遮挡问题，增强用户体验。

• 研究动机与相关工作:

  • 现有的BoD交互方法（如通过摄像头、麦克风或惯性测量单元实现的交互）易受环境噪声干扰，且无法实现精细的2D手指轨迹追踪。
  • 部分基于电容触控的解决方案需要对操作系统进行修改，且缺乏对误触的防护机制。

解决方案

• 方法或解决方案:

  • 提出了一种名为“BackTrack”的系统，它使智能手机背面变成一个无源2D轨迹板，通过正面的电容屏幕感应背面手指的精细运动。
  • 系统采用全封装化设计，集成于手机壳中，无需额外电源、无线连接或者系统修改。

• 创新之处:

  • 运用了现有电容屏幕的多点触控功能，设计了一种全新的2D轨迹板编码方式，仅需2N个导线连接便可实现N×N分辨率。
  • 采用透明的铟锡氧化物（ITO）薄膜覆盖屏幕，确保正面屏幕功能不受影响。
  • 设计了一个独特的无电池开关，通过用户的拇指动作启用或禁用BoD轨迹板，避免误触问题。

• 实施步骤与关键技术:

  1. 设计轨迹板电极：优化电极的形状（选择圆形）、大小和间距，平衡电容变化与触控可靠性。
  2. 确定电极的连接模式：通过实验比较“网格”、“旋转网格”、“Z字形”等模式的鲁棒性，最终选择适合的“网格模式”。
  3. 添加电容开关：使用一小块铜箔作为开关，通过改变用户与手机地之间的电容实现开关功能。
  4. 制作原型：将上述设计整合到一款兼容多种智能手机的定制化手机壳中。

研究成果

• 具体成果:

  • 成功实现了一个2D BoD轨迹板系统，可用于实时精细追踪背面手指运动。
  • 系统完全无源，无需修改智能手机操作系统，且安装后不影响触控屏的功能。

• 与现有解决方案相比的优势:

  • 实现了完全独立于电源和操作系统的便携式BoD交互设备。
  • 支持连续2D指尖轨迹跟踪，而不仅局限于1D或简单的点按交互。
  • 提供了硬件开关机制，显著减少了误触风险。

• 实验或评估结果:

  • 人体试验表明，在仅3分钟的训练后，用户对4种交互任务的准确率明显提高，其中：
    • 4方向点击的准确率达到了99.16%，
    • 4方向滑动的准确率达到了100%。
  • 用户报告触控屏性能并未因附加的ITO涂层受到影响，甚至在高精度任务（例如文本输入）中也表现正常。

• 局限性与未来方向:

  • 局限性:
    • 系统在用户手指湿润或佩戴绝缘手套（例如乳胶手套）时性能下降。
    • 不支持多点触控交互，且缺乏触觉反馈。
    • 电极设计的参数优化仅为定性分析，难以达到精确量化。
  • 未来研究方向:
    • 对BackTrack的设计进行定量建模，发展系统化的设计框架。
    • 研究用户条件（如皮肤湿度和手指大小）对信噪比和交互性能的影响。
    • 探讨不同环境下和接地条件的性能表现。

附加信息

• 研究原型产品适配了包括Google Pixel 2、LG Nexus 5、Samsung Galaxy S8和iPhone 11 Pro Max等多个手机型号。
• 研究由Snap Inc.公司资助，部分得到了美国国家科学基金会（NSF）的支持。