围绕智能手机：调查虚拟扩展显示大小对空间记忆的影响

文献标题

ARound the Smartphone: Investigating the Effects of Virtually-Extended Display Size on Spatial Memory

文献信息

• 主题领域: 人机交互 (Human-Computer Interaction)，增强现实 (AR)，空间记忆
• 关键词: 空间记忆, 增强现实, 虚拟扩展显示, 混合用户界面, 认知负担, 用户体验, 用户实验, 显示尺寸, 任务负荷, 视线切换

研究背景与问题

• 发现的问题或挑战:

  1. 智能手机在便携性和人体工效优化中面临屏幕尺寸受限的瓶颈，较小的显示空间可能限制用户的操作效率、空间记忆和用户体验。
  2. 增强现实(AR)设备可以提供近乎无限的虚拟视觉空间，但其中空交互的精确性和舒适性存在挑战。
  3. 混合用户界面（例如通过AR扩展智能手机的屏幕）是否能够平衡智能手机触控交互的便捷性与AR提供的显示空间，还需要进一步研究。

• 研究重要性: 探究如何优化智能手机和AR头戴设备的结合，将有助于提升用户在多任务操作中的效率、舒适性和空间记忆能力，为未来的用户界面设计提供关键指导。

• 研究动机与相关工作:

  1. 现有研究表明，更大的显示空间对空间记忆、认知负担和用户体验有积极作用，但没有研究明确探讨在混合用户界面中虚拟屏幕尺寸的最优点。
  2. 过去的研究也表明，在多显示环境中用户需要频繁切换视线，而视线划分可能影响用户的表现。
  3. 虽然扩展屏幕技术已有尝试（如投影设备、多设备交互），但AR扩展屏幕结构的独特性值得探索。

解决方案

• 提出的方法或解决方案: 作者提出了一种混合用户界面，将智能手机与AR头戴设备结合，在智能手机上附加虚拟扩展显示（VESAD）。通过增加虚拟屏幕尺寸，尝试优化用户体验、空间记忆及任务负担。

• 创新之处:

  1. 提出了四种不同屏幕尺寸条件（无扩展、平板大小扩展、中型桌面显示器大小扩展和电视大小扩展）。
  2. 系统性研究虚拟扩展屏幕尺寸对用户空间记忆、认知负担及主观体验的影响，首次尝试验证“最佳显示尺寸”的假设。

• 实施步骤和关键技术:

  1. 设计实验任务：包含导航阶段和物体位置回忆阶段。任务模拟2D网格地图的静态导航。
  2. 提供四种条件对比：无虚拟扩展(N0-AR)、小屏幕虚拟扩展(SMALL-AR)、中型扩展(MEDIUM-AR)和大型扩展(LARGE-AR)。
  3. 使用视频透视增强现实（video see-through AR）技术，避免光学透视可能带来的视差问题。
  4. 通过Unity实现显示模型，并记录导航路径、任务完成时间、眼动追踪及头部运动数据等。
  5. 每位参与者需在24个任务中按顺序执行实验，并完成主观体验问卷调查和半结构化访谈。

研究成果

• 具体成果:

  1. 空间记忆: 中型扩展屏幕(MEDIUM-AR)在任务完成时间、路径导航和位置回忆准确性上显著优于其他条件。数据显示中型屏幕是改善空间记忆的“甜蜜点”。
  2. 任务负担:
     • 大型扩展屏(LARGE-AR)尽管略有表现提升，但带来了显著更多的头部旋转负担。
     • 小型扩展屏(SMALL-AR)的空间记忆表现甚至低于无扩展屏幕（NO-AR），可能与视觉注意力分散相关。
  3. 用户体验:
     • MEDIUM-AR 和 LARGE-AR 条件显著提升了用户的主观体验评分，包括吸引力、清晰性和效率。
     • MEDIUM-AR平均分最高，反映了更为自然的用户熟悉度和舒适性。

• 与现有解决方案相比的优势:

  1. 提供了首个针对混合用户界面虚拟扩展显示的系统性实验研究数据。
  2. 明确了不同屏幕尺寸对人类认知的具体影响，为设计最佳增强显示尺寸提供了科学依据。

• 实验或评估结果: 实验发现：适度增大的虚拟扩展屏幕（类似桌面显示器）可以显著降低任务完成时间、减少认知负担并提升体验，但过大的扩展（类似电视显示器）由于头部旋转需求加大反而影响总体表现。

• 局限性与未来方向:

  1. 对LARGE-AR的实验场景较为保守，未来可研究更大显示空间的潜在收益。
  2. 本研究固定了输入模式，未探索其他智能设备组合（如智能手表或动态手持模式）。
  3. 使用视频透视显示，真人场景的实际交互影响需进一步验证。

  未来研究方向:

  • 探索虚拟扩展屏幕的最优顶点尺寸（“最佳点”）。
  • 比较屏幕在弯曲布局（如CAVE系统）下对空间记忆和任务负担的影响。
  • 考察在不同现实和虚拟环境间视觉注意力切换的效应。
  • 研究用户与屏幕外虚拟界面的交互，探索小型扩展屏幕的潜在用例和改进方法。