LipIO: 实现嘴唇作为输入和输出界面

文献标题

LipIO: Enabling Lips as both Input and Output Surface

文献信息

• 主题领域: 人机交互，特别是基于触觉感知的输入输出界面
• 关键词: Haptics, lips, tongue, on-skin interface, eyes-free interaction, hands-free interaction, electrotactile stimulation, capacitive touch, accessibility, tactile feedback

研究背景与问题

• 作者发现了哪些问题或挑战？

  • 传统的人机交互模式（如手指触控和语音交互）在用户眼睛和手被占用的场景中受限。
  • 现有的口腔接口（如基于舌头的输入设备）通常只能实现输入或输出，难以实现输入和输出的联合使用。
  • 当前的口腔设备多为体积大、依赖有线连接、不适合日常使用的形式。

• 为什么这个问题很重要？

  • 眼睛和手在交互中的不便性会影响用户执行任务的效率和体验，特别是在复杂环境或需要多任务处理的场景中。
  • 新的交互方式对提升可访问性（如为行动受限的用户提供支持）同样至关重要。

• 研究动机与相关工作

  • 已有研究集中于眼睛或手的输入输出设备、大脑接口以及基于口腔的输入方式，但对“同时实现输入和输出”的研究较少。
  • 口腔及嘴唇的高灵敏度和舌头的高灵活性为界面设计提供了启示。
  • 本研究旨在开发一种小型化、贴合嘴唇的设备，解决现有技术中的局限性。

解决方案

• 作者提出了哪些方法或解决方案？

  • 开发了一种名为“LipIO”的新型设备，它将嘴唇同时用作输入和输出的表面，支持基于电触觉的输出和基于电容触控的输入。
  • LipIO设备由两层柔性电极组成，其中一层面向外，用于电容感应输入；另一层面向嘴唇，用于电触觉刺激输出。
  • 提供实时的触觉反馈，即用户用舌头触摸嘴唇时，会感觉到与触点位置相关的触觉刺激。

• 该解决方案的创新之处是什么？

  • 将输入和输出功能合并到用户嘴唇的同一表面，这是首次在此领域提出。
  • 通过触觉反馈机制实现了类似手指触控设备的透明交互体验。
  • 即使用户的双眼和双手被占用，亦可实现高效交互。

• 实施步骤是什么？使用了哪些关键技术？

  1. 设备设计:
     • 两层电极叠层设计（分别用于输入和输出），结合塑料隔离层和柔性粘附层。
     • 使用导电胶带和喷墨打印技术制造电极阵列。
  2. 信号处理与反馈:
     • 使用电容触摸传感器 (MPR121) 实现输入检测。
     • 利用时间复用技术实现多点触觉反馈。
  3. 用户研究:
     • 设计和验证三项实验，优化设备的交互性能，包括感知精度、触觉反馈的作用及优化电极点数量。
  4. 应用实现:
     • 开发多种场景的原型应用，如门锁控制器、电动自行车导航和嘴唇游戏。

研究成果

• 取得了哪些具体成果？

  • 用户可以通过嘴唇同时实现高效的输入和输出，平均准确率达到93%。
  • 开发了多个应用场景的原型，包括控制智能门锁、调音吉他、骑行界面和基于嘴唇的简单游戏。
  • 用户实验表明触觉反馈显著提高了交互的准确性（从41.3%提升至66.3%），并通过减少电极点数量优化到93%。

• 与现有解决方案相比，它有哪些优势？

  • 同时支持输入和输出，且两种功能共位于嘴唇表面。
  • 舒适性较好，不明显干扰用户的日常活动（如讲话或进食）。
  • 灵活贴合嘴唇，且制作成本相对较低。

• 实验或评估结果是什么？

  • 初步实验表明用户更倾向触碰上嘴唇，灵活性更高。
  • 添加触觉反馈的共位设计显著提高精度，显示触觉反馈在眼手忙碌场景中的可行性。
  • 减少电极数量的设计进一步提升了设备的易用性。

• 局限性与未来方向

  • 局限性:
    • 电触觉刺激需要校准（约5分钟）。
    • 电容传感器可能因唾液影响需要重新校准。
    • 一些嘴唇相关活动（如涂抹口红）可能受限。
    • 设备在外观上明显，对一些用户而言可能缺乏社交接受度。
  • 未来方向:
    • 探索进一步减小设备尺寸，优化硬件实现。
    • 针对用户多样性和特殊需求进一步设计更广范围的应用场景。
    • 开展更全面的用户体验研究，评估其社会接受性和长时间使用表现。