OpenMic：在多方视频会议中利用近空间隐喻进行对话轮转换接

文献标题

OpenMic: Utilizing Proxemic Metaphors for Conversational Floor Transitions in Multiparty Video Meetings

文献信息

• 主题领域: 人机交互 (HCI) / 视频会议系统设计
• 关键词: 多方视频会议、视频会议、轮流发言、非语言交流、空间距离

研究背景与问题

• 发现问题或挑战:

  • 在多方远程会议中，轮流发言是主要的互动挑战，尤其是在COVID-19疫情期间的远程工作环境中。用户在视频会议中难以处理重叠和打断的对话。
  • 当前的会议工具缺乏支持社会和空间线索（proxemic cues）的视觉设计，这些线索在人类沟通中至关重要。
  • 现有关于视频会议和社会虚拟现实的研究受限于需要专门设备，或仅专注于人员进入和退出对话，而缺乏对轮流发言动态的支持。

• 研究的意义:

  • 支持轮流发言动态不仅可以改善互动，还可以缓解经常出现的音频和视觉管理问题。
  • Proxemic理论（空间距离理论）可以被用作设计视频会议工具的新方法，以帮助更自然地理解用户的意图。

• 研究动机与相关工作:

  • 过去研究开发了各种基于空间线索的视频会议工具，如2D或3D虚拟空间，但这些系统缺乏适用于轮流发言动态的设计。
  • Turn-taking在多人会议中通过语言交流和非语言线索来形成合作和解决问题。这些结构的动态需要新的数字交互方法加以支持。

解决方案

• 提出的方法或解决方案:

  • 开发了一款视频会议系统原型(OpenMic)，利用空间隐喻支持轮流发言动态管理。该解决方案包括:
    1. 虚拟地板（Virtual Floor）: 一个固定特性（fixed-feature）的空间界面，用于传递发言意图并调整麦克风管理。
    2. 可调整镜面(Malleable Mirrors): 用户可以动态调整视频窗口的大小和位置来表达与他人的距离和发言参与意愿。

• 创新点:

  • OpenMic首次将空间隐喻引入视频会议，用于支持轮流发言的非语言管理。
  • 在多人参与环境中，提供连续的、渐进的视觉动态转变，而非传统的二元切换（例如举手按钮、静音/解除静音）。

• 实施步骤和技术:

  • 构建2D界面，让用户可以通过拖动视频窗口进入“虚拟地板”。
  • 使用WebSockets管理前后端数据传输，支持更多用户的视频交互。
  • 通过调整视频窗口的相对大小和位置，用户能够主动表达自己是否愿意参与对话的意图。

研究成果

• 具体成果:

  • 用户研究发现OpenMic的两大功能（虚拟地板和可调整镜面）能改善多方视频会议的轮流发言流动。
  • 分析了基于空间隐喻下的发言动态，包括参与者如何利用视频窗口调整个人在对话中的位置和影响。

• 与现有解决方案相比的优势:

  • 通过动态交互视频窗口，OpenMic相较传统视频会议工具具有更精细的非语言交互支持。
  • 增强了用户对“发言意图”和“参与区域”的视觉意识，从而减少了对话混乱。

• 实验或评估结果:

  • 实验显示出不同组规模（小组4人、中等组8人）表现出显著不同的轮流发言行为。
  • 发言区域在虚拟地板上被划分为不同功能区（例如中心区、过渡区、边缘区和观众区），支持用户逐渐过渡到发言状态。

• 局限性与未来方向:

  • 小组规模的扩展：目前OpenMic适用于小型和中等规模会议，应继续探索支持更大群体的设计。
  • 视频窗口操作负担：手动调整窗口可能增加用户的交互压力，未来可研究基于自动化的聚类与布局优化。
  • 主持人的协调挑战：多位发言者在虚拟地板上的沟通可能导致权限管理的混乱，未来建议加入支持主持人协作的额外信道。

总结

本文提出了一种基于proxemic理论的新型视频会议系统设计，通过虚拟地板和可动态调整视频窗口，为用户提供了新的轮流发言管理方式。在探索性研究中发现显著结果，表明该设计能够通过视觉线索帮助发言过渡，减少对话中的混乱并增强用户的协作体验。未来应进一步扩展系统以支持更多用户规模和自动化转变设计。