MiniMates：适用于有限物理空间中的AR远程会议的微型头像

研究背景与问题

• 发现的问题或挑战： 作者指出，目前的视频会议工具（如 Zoom）在提供自然交流方面存在局限性，尤其是在定向沟通和同时进行分组讨论时。这些工具无法有效地表达身体方向、头部或眼神接触等非语言沟通线索。此外，传统视频会议共享一个音频通道，限制了自然的侧面交流。虽然一些基于虚拟现实（VR）的方法能够解决部分问题，但它们将用户隔离在虚拟环境中，缺乏对周围实际环境的感知能力。

• 重要性： 非语言线索（如身体方向、眼神接触）对于理解语境和自然交流至关重要。此外，随着在线会议需求的增加，用户在狭小空间中的远程协作效率显得愈发重要。

• 研究动机与相关工作： 本研究受到相关工作的启发，包括对视频会议中定向沟通的研究、AR和VR中的虚拟形象定位方法，以及使用微缩头像的实验。作者尝试利用AR技术解决传统视频会议工具和沉浸式VR方法的局限性，通过微缩头像的创新设计满足用户在空间受限环境下的需求。

解决方案

• 提出的解决方案： 作者提出了一种新的基于AR的远程会议系统——MiniMates，采用微缩3D头像。MiniMates能够在用户周围的有限空间中有效放置多个远程参与者，减少虚拟形象与物理环境的干扰，同时通过定向沟通算法优化用户互动体验。

• 创新之处：

  1. 微缩头像：相比传统的真人大小虚拟形象，微缩头像减少了空间占用，适合小型办公桌或家庭环境。
  2. 定向视线与体态重定向算法：确保所有参与者通过非语言线索理解谁对谁进行交流，保持现实对话的自然性。
  3. 空间布局形成算法：提供一致的头像排列，以解决用户本地空间的大小和布局差异问题。

• 实施步骤与关键技术：

  1. 头像微缩与布局：通过计算机视觉算法将头像缩小到约占原始大小的20%，并沿桌面半圆形排列以适应狭小空间。
  2. 重定向算法：根据用户的头部和身体方向动态调整虚拟形象，以确保在所有用户的视角中都保持一致的互动体验。
  3. 音频分层处理：将声音来源与头像位置同步，增加自然的空间音频体验。
  4. 额外功能扩展：例如与光标的交互，允许用户在共享屏幕时移动头像以增强协作感。

研究成果

• 具体成果：

  • MiniMates有效实现了自然的非语言沟通能力，使用户能够直接通过身体朝向和头部方向与他人交流。
  • 系统显著提高了用户的临场感，尤其是在具有多个参会者的情境下允许同时进行分组讨论。

• 优势对比：

  • 与传统的2D视频会议相比，MiniMates大幅度提升了用户的共同存在感和社会参与感。
  • 与全沉浸式VR会议相比，MiniMates同时保持用户对周围环境的认知能力，使其更适合日常办公情境。

• 实验与评估结果：

  • 通过对24名参与者进行的用户研究发现，MiniMates在TPI（临场感问卷）的多个维度上评分显著高于传统视频会议。特别是用户觉得系统更具吸引力和沉浸感。
  • 在允许同时开展侧面交流的“首次接触任务”中，用户能够高效地进行并行对话，这在传统视频会议工具中被认为是不可行的。
  • 在非语言指向任务中，误差率极低（仅2次错误），验证了系统定向沟通功能的有效性。

• 局限性与未来方向：

  • 当前局限性：微缩头像可能难以准确传达面部表情。此外，目前测试用户数量限制在五人以内，尚未针对更大规模的会议进行优化。
  • 未来方向：
    1. 改善面部表情识别和呈现，探索高清硬件对微缩头像表现的提升。
    2. 扩展到动态场景，如用户在虚拟空间中移动或者跨组进行互动。
    3. 开发更智能的音量调整算法以降低分组会话中额外对话的干扰。
    4. 测试其他任务类型（例如演讲式会议）和更复杂的协作活动。