DistanciAR：为远程环境创作场地特定的增强现实体验

文献标题

DistanciAR: Authoring Site-Specific Augmented Reality Experiences for Remote Environments

文献信息

• 主题领域: 增强现实 (AR)，远程虚拟环境设计
• 关键词: 增强现实, 远程创作, 空间设计, 3D扫描, 用户界面, 远程环境, AR工具, 虚实结合

研究背景与问题

• 问题与挑战:

  • 传统的增强现实 (AR) 创作工具通常局限于设计者当前所在的物理环境，而在现代全球化与分布式工作的背景下，设计师需要为远程环境定制特定场景的AR体验。
  • 远程AR设计的主要问题在于设计者无法直接访问远程场景，因而难以理解环境的空间布局、大小和内容。
  • 当前工具尽管提供了桌面预览与泛化场景支持，但无法满足远程场景特定上下文的站点Specific需求。

• 重要性与研究动机:

  • 远程AR创作工具可以解决地理限制，在诸如室内设计、远程教育和导航等应用中带来更多灵活性与便利性。
  • 尤其在全球大流行时期，支持远程创作的AR工具可以满足远程协作、异步设计的需求。

解决方案

• 方法或方案:

  • 提出了一种名为 DistanciAR 的基于平板电脑的远程AR创作工作流，它分为三个步骤：
    1. 扫描: 使用配备LiDAR（激光雷达）功能的设备（如iPad）扫描远程环境。
    2. 创作: 在不同位置模拟设计者对远程场景的AR创作体验。
    3. 查看: 在原场景中查看设计成品。

• 解决方案的创新点:

  • 提出了两种新增模式：
    1. Dollhouse模式: 提供俯视远程场景的"上帝视角"，以便设计者快速理解全局布局并在远程场景中快速移动。
    2. Peek模式: 使用捕获的视频帧生成逼真的复合图像，提供更真实的视觉反馈，从而改善3D扫描质量欠佳的情况下的创作体验。
  • 改进了现有的Portal模式，使其更加连贯并接近本地AR工具的交互体验。

• 主要实现步骤与技术:

  • 扫描: 通过iPad的LiDAR实现远程环境的3D网格生成，并结合视频录制与ARKit实现精确的位置信息捕获。
  • Dollhouse模式设计: 实现了单面材质渲染，通过轨道相机的交互方式让用户快速切换位置与视角。
  • Peek模式设计: 通过比较AR相机和扫描录制相机的UV覆盖率，为设计者动态捕捉最接近当前视角的捕获帧。
  • 改进交互方式: 添加高级导航与对象操作功能，包括视觉反馈（高光显示、局部元点可视化）和对象组操作。

研究成果

• 实验与评估:

  • 第一轮探索性研究:
    • 用户反馈表明，尽管DistanciAR的基础系统有效解决了一些远程AR创作的需求，但需要改善导航与理解远程环境的能力。
  • 改进后的用户研究:
    • 与仅具备Portal模式的版本相比，加入Dollhouse和Peek模式的完整系统得到更好的用户评价，在导航（Q3, p=0.0004, t=-5.438）和理解远程环境（Q2, p=0.003, t=-4.019）方面竞争力更强。
    • 通过计时与任务分析发现，完整系统的任务执行更有效率且操作更准确。例如，Dollhouse模式用于全局导航，Peek模式帮助微调和验证设计。

• 与现有解决方案的比较:

  • DistanciAR将移动AR工具的沉浸式属性和桌面工具的环境全局信息结合起来，在功能上弥补了两者的不足。
  • 增强现实创作中罕见的非沉浸模式（Dollhouse）同样显示出重要价值。

• 局限与未来方向:

  • 扫描质量问题: 当前的3D扫描与纹理映射质量对虚拟对象的放置仍有一定影响，未来可通过增强的机器学习算法对扫描进行优化。
  • 用户体验改进: Peek模式缺乏独立深度信息支持，导致遮挡效果不完整；同时多视图切换可能增加复杂性。
  • 拓展与场景适配: 未来工作可以继续研究多用户协作模式、突出实际环境的交互行为，以及更加支持多样主题（如动态触发器或动画）的AR功能。

总结

DistanciAR提出了一种新颖的远程AR创作工作流，尤其适合远程环境和多功能创作需求。虽然其核心创新点解决了现有方法的诸多限制，但仍有进一步优化空间，尤其是在3D扫描质量、复合深度面片技术等方面。该研究为未来跨场景AR创作与协作研究打下了坚实的基础。