MirrorBlender：支持混合会议的可塑性视频会议系统

文献标题

MirrorBlender: Supporting Hybrid Meetings with a Malleable Video-Conferencing System

文献信息

• 主题领域: 人机交互，视频会议技术，混合会议
• 关键词: 混合会议, 视频会议, 混合交互空间, 可调整动态媒体, 包容性会议, 非语言沟通, 集体决策支持

研究背景与问题

• 问题与挑战: 混合会议中，因空间一致性缺乏，远程参与者难以通过非语言线索吸引注意力或有效参与。这种主会场主导的现象经常使远程参与者感到被排斥。
• 重要性: 在远程工作日益普及的背景下，优化混合会议的互动体验尤为重要，特别是增强远程参与者的参与感和存在性。
• 研究动机: 当前视频会议技术常局限于提供低成本、稳定性高的解决方案，但对非语言交互的支持不足，尤其是指向性手势（deictic gestures）。解决这一问题可以增强混合会议的包容性和效率。
• 相关工作: 之前研究尝试使用物理和虚拟框架（e.g., ClearBoard 和 HyperMirror）支持非语言交流，但硬件昂贵且不够灵活。这促使研究者探索通过更灵活、更低成本的软件实现解决方案。

解决方案

• 方法与创新:

  • 提出了一种新型可调整的混合视频会议系统——MirrorBlender。
  • MirrorBlender 提供共享的虚拟 2D 空间（WYSIWIS，What-You-See-Is-What-I-See），允许用户动态调整并混合镜像视频流（包括摄像头和屏幕镜像）。
  • 引入了镜像操作（缩放、平移、透明度调整）的连续交互特性，以支持包含性和非语言沟通。
  • 提供镜像融合功能，允许用户将视频流叠加以实现虚拟与物理空间的“交融”。

• 关键技术与实施步骤:

  1. 实现基础的 WYSIWIS 共享框架，使所有用户同步看到相同的 2D 布局。
  2. 开发了镜像操作功能，包括调整位置、大小及透明度，同时允许重叠镜像。
  3. 通过动态重叠和透明度调整，实现用户之间的非现实空间整合，如创建光学错觉。
  4. 使用 WebRTC 和共享屏幕 API 构建跨平台应用，在普通浏览器中运行。

• 研究方法:

  • 在三组各五人参与的混合会议中部署 MirrorBlender，进行任务驱动的系统测试。
  • 收集初步定性数据以揭示系统在支持非语言交互与参与者行为动态中的作用。

研究成果

具体成果

1. 系统支持的创新机会:

   • 光学错觉和互动趣味性: 用户通过镜像调整创造游戏化的光学错觉（例如，将远程参与者的头像与实物对象或共处参与者身体结合）。
   • 支持多样的指向性手势: 用户能够通过镜像以身体手势表达空间指向，如双手划分工作区域或通过镜像指点屏幕内容。
   • 动态关注调节: 用户可以通过调整镜像属性引导群体注意力，从微小调整（如移动镜像）到显著夺目（如放大镜像并提高不透明度）。

2. 平等参与和包容性的改善:

   • 通过镜像调整，远程参与者更加主动地融入会议活动，增强了对主会场的感知以及相互作用的流畅性。
   • 打破了传统混合会议中远程参与者无法平等参与的固有权力动态。

3. 非语言交流支持的增强:

   • 跨越物理与虚拟框架，允许用户自定义协作布局以支持多样的协作风格和非语言互动。

与现有解决方案的比较

• 优势: MirrorBlender 减少了对昂贵硬件或固定空间布局的依赖，通过提供高灵活性和可调整性支持多样化场景。同时在界面交互性和用户控制权上超越了现有的视频会议系统。
• 劣势: 当前的镜像指向仍受限于视差问题（parallax effect），特别是在本地参与者中。

实验与评估结果

• 参与者反馈: 大部分参与者报告了由于远程镜像带来的新互动机会和包容感受，尽管有时需要额外的认知努力进行手势校准。
• 动态适应性: 不同群体展现了系统灵活性支持的各种协作风格，从分工明确的任务分配到高耦合的集体答案生成。

局限性与未来方向

1. 适用性与扩展: 系统对大规模会议参与者或真实组织环境中的适用性尚需进一步研究。
2. 技术优化:
   • 缓解视差问题（尤其在多屏物理装置中）。
   • 引入智能预设布局或背景去除以减少视觉混乱。
3. 用户培训: 探索更自然的用户学习曲线以减少认知负担。
4. 任务多样化: 在更多现实应用场景中进行评估，例如教育、远程医疗或团队创意会话。

总结

MirrorBlender 提供了一种新颖的、有效的混合会议系统设计，显著增强了非语言沟通能力和远程参与者的包容性。在实现“超越在场”的混合会议体验方面迈出了重要一步，同时揭示了多屏协作设计领域的进一步研究空间。