MathKingdom: 通过语音引导游戏在家教授儿童数学语言

文献标题

MathKingdom: Teaching Children Mathematical Language Through Speaking at Home via a Voice-Guided Game

文献信息

• 主题领域: 儿童数学语言教育，家庭学习技术交互
• 关键词: 数学语言, 儿童, 语音代理, 游戏化学习, 家庭教育, 数学能力, 交互设计, 身体互动, 父母参与, 科技驱动学习

研究背景与问题

作者发现了哪些问题或挑战？

1. 家庭环境中数学语言的使用频率和质量较低。
2. 学龄前儿童常常是被动接收数学活动，而缺乏对话练习的机会。
3. 家庭中的数学语言活动单一，缺乏多样性、指导性和系统性。
4. 孩子在数学活动中的注意力和参与度较低，需求一种更具吸引力的教育模式。

为什么这个问题很重要？

数学能力是儿童发展的重要组成部分，不仅影响其学科表现（如STEM领域），还关乎健康与个人福祉。数学能力的差异在学龄前阶段开始显现，而语言技能（特别是数学语言）被证实是数学能力发展的关键。

研究动机与相关工作

• 早期数学教育关注在自然学习情境中的效果，如游戏活动。但现有技术更多关注于丰富学习体验或提升特定数学技能，鲜有专注数学语言的技术支持。
• 语音代理已展示其在儿童早期教育中减少参与障碍以及促进活动流畅的潜力。然而，目前尚无专门设计用于家庭环境中数学语言学习的技术。

解决方案

作者提出了哪些方法或解决方案？

作者开发了一个基于语音代理的互动游戏——MathKingdom，以指导4-7岁的儿童通过数学对话学习数学语言。主要内容包括：

1. 用于唤醒、变换、装饰和自由表达游戏化的头像。
2. 提供丰富数学语言（如测量、序列、图案等概念）的学习和实践机会。
3. 配备卡通化语音代理，作为引导与陪伴者，支持数学语言交流。

该解决方案的创新之处是什么？

1. 家庭环境适配：专门设计用于家长和儿童共同参与的数学语言学习场景。
2. 多模态交互：结合语音与身体互动。儿童可通过语言操控游戏，又能通过动作影响游戏角色，提高自我参与度。
3. 游戏化学习：将数学语言学习融入变装、讲故事等游戏过程，提升儿童兴趣。
4. 家长支持建议：针对家长如何与儿童有效互动提供具体指导。

实施步骤是什么？使用了哪些关键技术？

1. 游戏流程设计：
   • 第一阶段“唤醒”：儿童识别几何形状并回答基础数学问题。
   • 第二阶段“变换”：用数学语言的单句描绘几何特征以改变游戏角色特性。
   • 第三阶段“装饰”：用数学语言的连贯句描绘装饰设计，包括对序列与图案的描述。
   • 第四阶段“故事讲述”：自由表达，以数学语言描述个性化角色。
2. 语音代理设计：
   • 提供问题、反馈和数学语言示例的卡通化语音引导。
   • 通过腾讯和百度的语音转换技术实现语音互动。
3. 技术支持：
   • Unity开发平台，结合MMPose实现即时时态估算。
   • UDP传递子体动作数据以支持实时映射。
   • 腾讯和百度云技术支持的语音合成与识别。

研究成果

取得了哪些具体成果？

1. 提高儿童参与度：孩子们表现出对游戏的高度兴趣与积极性，特别是在游戏角色互动上。
2. 数学语言能力提升：实验后儿童在数学语言的流利度和准确度上均有显著提升。几何领域的语言提升幅度尤为明显。
3. 数学能力提高：通过对比实验前后的测试结果，儿童的数学能力在数值与几何领域均有显著改进。
4. 促进亲子互动：观察到在游戏过程中家长和孩子能够流畅地进行数学语言交流，部分家长能在过程中提升自己的数学指导能力。

与现有解决方案相比，它有哪些优势？

• 提供了一种创新性家庭数学语言教育解决方案，结合游戏化、语音交互和身体互动。
• 游戏设计方式使儿童成为活动的积极主导者，提升学习动机并促进自发对话。

实验或评估结果是什么？

• 在6天内通过三次实验，使用前后数学语言测试和标准数学评估量表（REMA-SF）验证了系统的教育有效性。
• 兴趣指标如Smileyometer数据（M=3.94）表明游戏设计高度吸引儿童注意力。
• 数学语言和数学能力的评分均显示显著改进。

局限性与未来方向

1. 游戏分级不足：游戏内容在重复使用时可能较简单，对高水平儿童吸引力不足。
2. 故事讲述内容单薄：自由表达部分内容重复性较高，需提供更丰富上下文。
3. 语音引导优化：过长的语音指令可能降低儿童的耐心，需调整语音互动设计。
4. 长期影响观察：未来需要探索这种学习技术对家庭数学互动和语言学习的长期影响。

改进建议：

• 添加更复杂的游戏内容以适应高能力儿童。
• 提供模块化可选内容，例如自由设置任务和对话难度。
• 优化语音流，减少冗长，并根据儿童实际能力智能设定内容。