TapTap项目：一项纵向研究，通过振动信号探索教师与盲人或低视力音乐学习者之间的非语言沟通

研究背景与问题

• 作者发现了哪些问题或挑战？
  盲人或低视力（BLV）音乐学习者在音乐学习和表演中无法访问教师的非语言交流（如手势和面部表情），这一问题限制了实时沟通的效果。此外，目前的解决方案往往依赖听觉替代，但这可能分散学生对音乐本身的注意力。
  现有的可穿戴触觉设备研究主要侧重于同步和传递节奏信息，对这些设备在长期学习环境中如何被学生和教师使用以优化沟通缺乏深入研究。

• 为什么这个问题很重要？
  非语言交流对于音乐表演和教学至关重要。BLV音乐学习者的学习效果和自信心可能因无法获得相关信息而受到影响。通过改善这些学习者的沟通手段，可以显著提升他们的音乐体验和教育机会。

• 研究动机与相关工作
  现有研究已经探索了触觉反馈在同步和信息传递等领域的潜力，但缺乏对生活化、长期学习场景中触觉设备如何实际被使用的探讨。作者希望通过这一研究填补此类交互和信息传递的长期学习场景研究空白。

解决方案

• 作者提出了哪些方法或解决方案？
  提出了一种名为“TapTap”的可穿戴触觉设备，用于盲人或低视力学生和教师之间的震动信号交流。
  本研究通过设计一个双向交流系统，允许教师通过脚跟轻敲触发震动信号，同时学生也可以发送反馈信号。重点在于探索振动信号的意义，以及如何通过这些信号进行有效的音乐沟通。

• 该解决方案的创新之处是什么？

  1. 采用双向振动交互，为学生赋予更多主动权，增加师生之间的互动。
  2. 结合长期观察和反馈优化设备设计，使其更符合个人化使用需求。
  3. 系统支持实时发送多样化振动信号，用于传递节奏、力度、动态和艺术表达等复杂信息。

• 实施步骤是什么？使用了哪些关键技术？

  1. 设计与制造设备： 基于Micro:bit微控制器，设备允许用户通过脚跟敲击产生振动信号，振动强度可调。
  2. 用户研究： 开展为期10周的纵向研究，招募5名音乐教师和7名BLV学生，观察和收集丰富的教学交互数据。
  3. 迭代改进： 根据用户反馈调整硬件功能（如添加可调节的振动强度）、优化使用体验。
  4. 数据分析： 使用布劳恩和克拉克的主题分析法深入挖掘使用中涌现出的行为模式和经验反馈。

研究成果

• 取得了哪些具体成果？

  1. 振动信号的意义构建： 学生和教师能够通过讨论和直觉从振动信号中推导出意义（如节奏、力度和动态等）。
  2. “触觉隐喻”形成： 使用长短、强弱振动信号模拟复杂音乐概念（如节奏感、力度变化）。
  3. 提升学习体验： 设备明显改善了学生音乐学习的流畅性、注意力和对音乐动态的感知。

• 与现有解决方案相比，它有哪些优势？
  相对其他仅支持单向信息传递的设备，TapTap支持双向交互，且其振动强度可个性化调节，为音乐教学过程提供了更大的灵活性和多样性。
  它克服了触觉教学中可能的文化或身体接触的不适，使师生间的互动更自然。

• 实验或评估结果是什么？

  1. 时间敏感信息： 振动信号有效传递了节奏、速度和动态，帮助学生更直观理解音乐信息。
  2. 减少教师负担： 教师在教学中更少依赖语言解释，从而节省时间并提高教学效率。
  3. 学习者反馈积极： 包括硬件舒适性、信号直观性和互动趣味性在内，使用者逐步适应并接受了这种新型学习方式。

• 局限性与未来方向

  1. 局限性： 当前研究以西方古典音乐为背景，且样本规模较小，结论不一定适用于其他音乐流派或更大群体。
  2. 未来方向：
     • 研究更复杂的振动信号模式（如重复和渐强模式），以传递更详细的音乐信息。
     • 探索设备在不同音乐流派（如爵士或印度古典音乐）中的应用潜力。
     • 在团体表演或即兴音乐中测试设备的可用性，为扩展至多用户系统提供设计指南。
     • 开发与现有智能设备（如智能手表或手机）无缝集成的新型触觉交互系统。
     • 优化硬件设计以解决当前安装复杂和穿戴不适的问题。

通过长期研究和实践评估，本文展示了触觉技术在支持BLV音乐学习方面的巨大潜力，并为未来的可穿戴触觉设备设计提供了具体方向。