ParaGlassMenu: 朝着对话中友好社交的微妙互动

文献标题

ParaGlassMenu: Towards Social-Friendly Subtle Interactions in Conversations

文献信息

• 主题领域: 人机交互、智能设备交互、社会互动可接受性
• 关键词: IoT设备操控, 环形菜单, 戒指交互, 社会互动, 对话, HMD, 智能眼镜, 物联网

研究背景与问题

• 作者发现了哪些问题或挑战？ 在社交互动中，使用数字设备会减少社会参与并中断对话。现有的设备交互方式难以在社交场景中维持用户对对话对象的注意力，常常干扰眼神交流且增加操作的认知负荷。

• 为什么这个问题很重要？ 在单一任务和社交互动之间切换时，如何最小化对对话的干扰至关重要。随着物联网（IoT）设备的普及，在社交场景中便捷且不显眼地操作数字设备的需求日益增加。

• 研究动机与相关工作

  • 许多研究提出了隐秘交互技术（如Jaw-Teeth交互、隐藏震动提示），但在灵活性、可扩展性与社交场景适配上存在局限。
  • IoT设备操控涉及信息查询、离散和连续操作等复杂任务，缺乏一种支持所有交互需求并适应社交场景的统一设计。

解决方案

• 作者提出了哪些方法或解决方案？ 作者设计了一种名为ParaGlassMenu的技术，该技术在光学透视头戴显示器（OHMD）上显示半透明圆形菜单，并通过戒指鼠标进行隐蔽操作。此菜单围绕对话对象的面部呈现，以支持社交友好型的IoT设备操控。

• 该解决方案的创新之处是什么？

  1. 利用OHMD显示圆形菜单，实现用户在侧视区内操作，不干扰对话。
  2. 戒指鼠标支持隐秘的输入方式，降低对他人的干扰。
  3. 支持离散和连续操作，包括快速切换任务的功能。
  4. 菜单设计满足层级扩展性，适应较大数量的功能命令。

• 实施步骤是什么？使用了哪些关键技术？

  1. 菜单环绕对话对象周边，图标颜色和透明度优化以避免遮挡对话。
  2. 戒指鼠标操作包括点击选择按钮、触摸板滚动连续选项。
  3. 菜单的激活和关闭通过戒指鼠标实现，减少非必要的视觉干扰。
  4. 系统设计基于Unity和OpenCV进行开发，以支持人脸追踪和交互任务。

研究成果

• 取得了哪些具体成果？

  • 在模拟实验中ParaGlassMenu实现了最好的对话质量（最高的面部关注度、礼貌性和自然性得分）与IoT设备操控表现（最短任务时间、最高准确度）。
  • 在真实社交场景中进一步验证了其可用性，用户发现该系统能高效完成任务并保持对话流畅。

• 与现有解决方案相比，它有哪些优势？

  • 与智能手机和语音助手相比，ParaGlassMenu能显著减少任务对对话质量的干扰。
  • 尤其在复杂任务（如滚动选歌）中显示了比线性菜单布局更低的认知负荷。

• 实验或评估结果是什么？

  • 实验结果表明ParaGlassMenu对IoT操控的支持涵盖离散、连续性与列表选择任务。
  • 用户评级中，它被认为是最直观且高效的交互方式。
  • 在真实对话中，主机能够通过隐蔽或透明的交互方式灵活处理IoT任务。

• 局限性与未来方向

  • 当前OHMD的硬件设计（如重量和透镜）无法完全适配长时间佩戴的舒适性。
  • 戒指鼠标滚动功能精度敏感性需进一步优化。
  • 实验参与者样本主要以大学群体为主，不同文化背景和年龄组的普适性需进一步验证。
  • 后续研究可以探索更复杂的实时功能，如语音处理引导透明选择，以及应用场景扩展至无人机控制、远程学习等。