为失聪和听力障碍个体设计生成式AI辅助音乐心理治疗工具

文献标题

Designing a Generative AI-Assisted Music Psychotherapy Tool for Deaf and Hard-of-Hearing Individuals

出版信息

• 主题领域: 面向聋人及听力障碍（DHH）个体的包容性音乐心理治疗中的生成式人工智能应用。
• 关键词: 生成式人工智能（Generative AI）、音乐心理治疗、聋人及听力障碍（DHH）、歌曲创作、对话代理（CAs）、情感表达、音乐治疗、包容性、多模态界面、治疗设计。

背景与问题

• 问题/挑战: 传统音乐心理治疗由于其以听觉为中心的特点，对DHH个体几乎无法访问。现有针对DHH群体的干预措施主要集中于听觉感知，而非情感健康，导致缺乏包容性治疗工具。
• 重要性: 解决这一问题可以为DHH个体提供通过音乐进行情感表达、治愈和自我认知的机会，从而促进心理健康和社会包容。
• 动机与相关研究: 先前研究强调了DHH个体与音乐的多感官互动，以及生成式人工智能（GenAI）在创造性和治疗环境中的潜力。然而，目前缺乏将GenAI整合到音乐心理治疗中以使其对DHH个体可访问且具有情感意义的干预研究。

解决方案

• 提出的方法: 一个结合对话代理（CAs）、音乐生成AI和音乐可视化的生成式人工智能辅助音乐心理治疗工具，旨在为DHH个体实现协作式歌曲创作。
• 创新点:
  1. 与音乐治疗师共同设计，针对DHH用户的感官和情感需求量身定制工具。
  2. 包含三种对话策略：支持性共情、示例响应选项和基于视觉的隐喻。
  3. 提供结构化的四阶段治疗过程：建立治疗联系、创作歌词、创作音乐和歌曲讨论。
  4. 集成多模态反馈和音乐可视化以增强可访问性和情感参与。
• 过程与关键技术:
  1. 与六位音乐治疗师进行访谈，识别DHH音乐心理治疗中的挑战。
  2. 举办了一场与四位治疗师的共同设计工作坊，以制定设计原则和治疗流程。
  3. 开发了一个基于React的网络工具，包含用于歌曲创作的CA界面和音乐可视化界面。
  4. 实现了一个基于状态步骤的提示框架，引导用户完成歌曲创作和情感反思。

结果

• 具体发现:
  • 参与者平均使用工具时间为40.15分钟，具有较高的自我披露（M=6.02/7）和对歌曲创作的满意度（M=5.86/7）。
  • CA的共情响应、基于视觉的隐喻和示例选项促进了情感开放。
  • 观察到情感转变，参与者报告了宣泄、情感重构和自我意识的增强。
• 相较基线的优势:
  • 使DHH个体能够独立参与歌曲创作和情感表达，克服传统听觉治疗的障碍。
  • 提供了一个无评判的、基于文本的互动空间，增加了舒适感和信任感。
• 实验/评估:
  • 对23名认同为DHH的韩国CI用户进行了使用研究。
  • 通过系统日志、问卷和后续访谈评估了情感开放、创造性参与和可用性。
  • 观察到治疗效果，如情感释放、客观化和反思性对话。
• 局限性与未来工作:
  • 仅限于使用文本交流的韩国CI用户，推广至其他DHH群体的普适性尚不确定。
  • 生成音乐中的情感不匹配问题凸显了GenAI模型可控性改进的需求。
  • 单次会话评估；需要纵向研究以评估持续的治疗效果。
  • 未来迭代应让DHH用户参与共同设计过程，并扩展到多样化的文化和语言背景。

总结

本研究提出了一种与音乐治疗师共同设计的生成式人工智能辅助音乐心理治疗工具，旨在支持DHH个体的情感表达和治愈。该工具结合对话代理、音乐生成AI和音乐可视化，实现协作式歌曲创作，满足DHH用户的感官和情感需求。对23名参与者的使用研究显示了较高的满意度、情感开放性和治疗潜力，用户体验到情感转变和自我反思。尽管前景广阔，该工具仍需进一步开发以增强模型可控性，涵盖多样化的DHH群体，并验证长期治疗效果。此项工作为包容性人工智能设计做出了贡献，并扩展了可访问心理健康技术的可能性。