MR.Brick：设计一个混合现实教育游戏系统，以促进儿童的远程社交与协作技能

文献标题

MR.Brick: Designing A Remote Mixed-reality Educational Game System for Promoting Children’s Social & Collaborative Skills

文献信息

• 主题领域: 混合现实技术、儿童教育、远程合作设计
• 关键词: 混合现实, 有形用户界面, 远程协作, 儿童, 教育游戏, 社交与合作技能

研究背景与问题

• 发现问题与挑战:

  • COVID-19 疫情导致的社交隔离严重影响了儿童的社交能力和合作能力的发展。
  • 当前远程协作系统主要针对儿童与成人的互动，而少有专门设计支持儿童之间远程协作的工具。
  • 存在的儿童协作系统要么过于复杂，要么未能充分考虑远程合作带来的挑战。
  • 儿童在远程协作时，遇到认知和情绪方面的限制，导致社交互动更加困难。

• 问题的重要性:

  • 缺乏支持儿童远程协作的系统不仅影响其当前的认知和情感发展，还对他们的长期社交与学术表现造成威胁。
  • 帮助儿童克服因隔离带来的负面影响有助于增强其心理健康、学习能力和社会适应性。

• 研究动机与相关工作:

  • 充分利用混合现实（MR）和有形用户界面（TUI）的潜力以提升儿童协作和社交互动。
  • 寻找适合儿童发展特性的交互设计和教育工具，缩小现有系统的不足。

解决方案

• 提出的解决方法/设计:

  • 引入了一种名为 MR.Brick 的混合现实教育游戏系统，该系统结合了 MR 技术和有形交互技术，旨在帮助儿童发展远程合作技能。
  • 基于认知科学、发展心理学和认知负荷理论设计了相关游戏规则和交互机制。
  • 提出了六大设计指南，包括任务空间共享、非语言交互增强、基于输入模式的无意识操作、角色分配与协作、适应性支持，以及儿童友好的互动优化。

• 创新之处:

  • 使用 MR 和 TUI 技术为儿童提供一种更加直观和身临其境的远程合作体验。
  • 设计了基于“乐高疗法”的合作机制，通过在游戏中分配明确的角色（如“供应商”和“建造者”）迫使儿童进行信息分享与协作。
  • 为儿童的认知和动手能力量身定制优化了系统的界面和交互，同时兼顾了游戏的易用性和挑战性。

• 实施步骤与关键技术:

  1. 在空间共享方面，通过使用具有 AR 识别图案的物理板和工具提供实时的协作空间。
  2. 提供视频聊天功能以弥补远程协作中非语言线索的缺失。
  3. 使用基于 Vuforia 的 AR 识别技术和 Unity3D 实现精确的物理与虚拟交互。
  4. 开发游戏内指导角色（如 Mr. Brick）以提供实时反馈和操作指导。

研究成果

• 具体成果:

  • 与传统的视频游戏相比，MR.Brick 为儿童提供了更为积极的情感参与、行为参与和语言交流表现（如更频繁的讨论、情感表达等）。
  • MR.Brick 的设计显著提高了在合作任务中的完成效率和准确率。
  • 在多项社会与合作技能的测试中（如团队动态、贡献度、问题解决能力），参与者在使用 MR 游戏后的评分较实验前有显著改善。

• 与现有解决方案的优势:

  • 相较传统视频游戏，MR.Brick 更能模拟现实搭建场景，通过引入有形工具降低了儿童的认知负担。
  • 游戏通过强制角色交替和信息共享，成功增强了儿童之间的团队合作。

• 实验评估结果:

  • 游戏任务完成效率（382.83秒 vs 382.13秒）和准确率（65.49% vs 61.75%）略优于传统视频游戏。
  • 儿童报告更倾向于未来频繁玩 MR 游戏，其社交技能评分在实验后显著提高。
  • 在行为/情绪和继续使用意愿方面，MR.Brick 的得分整体更高。

• 局限性与未来方向:

  • 当前实验仅研究了短期的游戏效果，未来需开展更长期的实验以验证系统对儿童发展社交合作能力的持续影响。
  • 技术层面上，目前系统依赖较多设备（如多台摄像头），未来研究需简化硬件配置以提升可用性。
  • 可以进一步设计自由搭建模式以激发儿童创造力，并开发移动端版本以提高普及性。
  • 针对 3D 操作界面的优化是未来的研究重点，尤其是帮助儿童更好地理解空间关系。

总结

MR.Brick 提供了一种新颖的混合现实教育工具，有助于提升儿童在远程合作中的表现。该研究不仅贡献了新的互动系统，还为儿童远程互动设计提供了系统性的建议。同时，也表明混合现实和有形用户界面在教育领域具有广泛的应用潜力。