虚拟现实中的课堂数字转型

文献标题

数字化转型的虚拟现实教室

文献信息

• 主题领域: 人机交互和教育技术
• 关键词: 沉浸式虚拟现实, 眼动追踪, 教育, 感知, 虚拟化身, 学习环境

研究背景与问题

• 发现的问题或挑战:
  • COVID-19 大流行期间，许多大学和学校转向在线教学，但在线和远程学习缺少与教师和同伴的社交互动可能导致学生动力不足。
  • 尽管虚拟现实（VR）技术在教育领域已经有一定应用，但对其对学习者的具体影响尚未深入研究。
• 重要性:
  • VR 有潜力提供更接近真实课堂环境的沉浸式学习体验，有利于改善学习者的社交互动和关注度。
  • 研究能够挖掘出如何优化 VR 环境以提高教育效果。
• 研究动机与相关工作:
  • 随着消费级头戴显示器（HMD）和计算机图形技术的进步，VR 可以在合理成本下为课堂提供沉浸式教学体验。
  • 通过眼动追踪等方式分析学生的视觉行为，可能为设计更具互动性和响应性的学习环境提供洞见。

解决方案

• 方法或解决方案:
  • 设计了一个模拟真实教室的沉浸式 VR 环境，并研究了三个设计因素对学习者的影响：学习者座位位置、虚拟化身风格（卡通 vs. 现实）、虚拟学习者的举手行为。
  • 通过眼动追踪数据（如注视时间、扫视行为及瞳孔直径变化）分析学习者的视觉互动和注意力分布。
• 创新之处:
  • 首次分析了不同 VR 教室配置对学生实时视觉行为的影响。
  • 引入虚拟化身表现风格（现实化与卡通化）的对比研究。
  • 提出了基于举手行为评估的虚拟同伴学习者表现模型。
• 实施步骤与关键技术:
  1. 使用 HTC Vive Pro Eye 和 Unreal 游戏引擎构建 VR 教室环境。
  2. 设置有前排和后排两种座位位置，使用两种虚拟化身（卡通和现实）风格。
  3. 在虚拟教室中模拟持续 15 分钟的讲座，并控制虚拟学习者举手行为的比例（20%、35%、65%、80%）。
  4. 使用内置的 Tobii 眼动追踪设备收集学生的眼动数据。
  5. 通过 I-VT 方法对眼动数据进行分类并量化关键指标，如注视持续时间和瞳孔直径。

研究成果

• 具体成果:
  • 座位位置:
    • 前排学生的扫视持续时间和幅度更大，但后排学生的注视时间较长，反映后排学生可能面临更多信息提取困难。
  • 虚拟化身风格:
    • 使用卡通化身时，学生的注视时间较长，表明卡通化身更具吸引力。但现实化身更能提高学生的认知负荷和专注度。
  • 虚拟举手行为:
    • 当虚拟同伴的举手比例较高（如 80%）时，学生的认知负荷显著增加，表明更高程度的虚拟参与可能会提升学生的注意力。
• 相较于现有解决方案的优势:
  • 比以往工作更深入地分析了学生在 VR 教室中的实时眼动数据。
  • 针对数字化课堂的设计提出了具体建议，如座位优化和化身风格选择。
• 实验或评估结果:
  • 使用方差分析（ANOVA）和 Tukey-Kramer 事后分析，对不同条件下的眼动特征进行了显著性测试。
  • 自我报告数据显示，学生普遍感受到较高的沉浸感和真实性。
• 局限性与未来方向:
  • 没有研究学生的语音或手势互动对课堂效果的影响。
  • 尚未直接评估学生的学习成绩，而仅通过注意力代替衡量。
  • 未来可以探索更具互动性的平台设计，以及更精细的学习行为分析方法，例如短时间窗口下的扫描模式。

总结

本文通过精确的眼动追踪分析，揭示了虚拟教室设计的关键因素对学生注意力和行为的影响，为 VR 技术在教育领域的应用提供了重要启示。未来可以进一步结合学习成果和学生行为，优化沉浸式 VR 教室的设计。