EmoEden:将生成式人工智能应用于高功能自闭症儿童的情感学习

大语言模型(LLM)的人机协作认知障碍与神经多样性(自闭症、ADHD、阅读困难)增强与替代通信(AAC)特殊教育教师辅助技术专家

文献标题

EmoEden: Applying Generative Artificial Intelligence to Emotional Learning for Children with High-Function Autism

文献信息

  • 主题领域: 高功能自闭症儿童的情感学习与人工智能辅助
  • 关键词: 高功能自闭症, 情感学习, 生成式人工智能, 聊天机器人, 个性化训练, 视觉化表达

研究背景与问题

  • 作者发现了哪些问题或挑战?
    高功能自闭症(HFA)的儿童虽然智力正常,但在情感识别和表达方面存在显著障碍。这种能力的缺乏会导致社会交往困难,并可能被他人误解为冷漠。现行的情感干预方法依赖人工治疗师,资源需求大,且受制于地理和经济条件,同时缺乏个性化和灵活性。以往聊天机器人在情感学习支持方面展示过潜力,但常因缺乏上下文适应能力和内容的多样性,效果不理想。

  • 为什么这个问题很重要?
    高功能自闭症儿童渴望融入学校和社会生活,但情感学习的障碍让他们难以建立良好关系。通过个性化且可访问的技术支持,可以显著改善他们的社交能力和生活质量。

  • 研究动机与相关工作
    生成式人工智能(Generative AI)近年来在文本生成和视觉内容生成方面取得突破,可快速创建高质量的个性化内容。这为为高功能自闭症儿童设计个性化情感学习工具提供了可能性。同时,已有的研究表明,聊天机器人、社会故事干预和视觉辅助技术在相关领域有成效,但仍存在突破空间。

解决方案

  • 作者提出了哪些方法或解决方案?
    作者开发了一个名为EmoEden的AI辅助工具,通过生成式人工智能将情感学习融入高功能自闭症儿童的日常互动中。EmoEden结合大型语言模型(LLMs)和文本到图像生成技术,为儿童提供个性化的情景对话、表情识别任务,以及扩展性语言表达支持。

  • 该解决方案的创新之处是什么?

    • 个性化设计:根据每个儿童的兴趣和情感状态生成针对性的对话场景和视觉元素。
    • 视觉与听觉结合:同时具备基于文本和视觉情景生成的能力,便于自闭症儿童理解和接收信息。
    • 动态调整:通过用户的表现调整训练难度。
    • 自动化生成:使用LLMs自动生成会话内容,并通过情感扩展器帮助儿童丰富语言表达。
  • 实施步骤是什么?使用了哪些关键技术?

    1. 制定设计策略:包含情境化学习、视觉听觉表达、持续反馈和奖励、高亮度色彩搭配等。
    2. 系统架构:建立一个基于GPT-4的对话生成器、情感扩展器和反馈生成器,同时采用MidJourney生成视觉情景。
    3. 个性化设置:通过记录和分析儿童的语言习惯和偏好,动态生成对话内容。
    4. 功能整合:将情感任务嵌入到虚拟对话的四个阶段:初始化设置、交互会话、总结表述和能力评估。

研究成果

  • 取得了哪些具体成果?

    • 参与度与完成率:参与者表现出高完成率(平均达52.5次对话)和积极参与度,尤其表现为儿童自主探索功能和模仿角色行为。
    • 情感识别与表达能力提升:情感识别能力在十天训练后显著提高(总准确率增加58%),情感表达更加丰富(情感词数量显著增加),且更贴合上下文。
    • 持续效应:情感提升效果在训练结束后仍保留。比如,儿童在日常生活中更敏感地关注他人的情绪,且更愿意表达自己的情感。
  • 与现有解决方案相比,它有哪些优势?

    • 解决传统训练中个性化不足问题:通过生成式AI动态生成内容。
    • 减轻人力资源压力:工具可在家庭中广泛应用,减少对治疗师的依赖。
    • 提高儿童的参与力与学习效果:利用视觉化场景和连续对话激发兴趣。
  • 实验或评估结果是什么?

    • 连续使用10天后,所有参与者的情感识别和表达能力均有改善。实验分析显示情感词丰富度和上下文相关性显著提高。
    • 访谈发现工具在无治疗师参与的家庭训练中亦能获得良好反馈。
  • 局限性与未来方向

    • 局限性:视觉元素非实时生成、个性化参数不足;家长和专家的观点可能带有偏见,高功能自闭症儿童未直接参与设计过程。
    • 未来方向:
      • 实时文本到图像生成:提升视觉交互体验。
      • 添加记忆功能:让系统持续追踪儿童的长期变化。
      • 融入实体设备:让工具具备触觉或实体互动能力,例如智能玩具或音箱。
      • 包括自闭症儿童为设计伙伴:充分利用生成式AI,为儿童提供表达设计意见的辅助。

总结

EmoEden通过生成式人工智能的高度个性化和互动能力,为高功能自闭症儿童的情感学习提供了一个有力工具。实验表明,该工具不仅能够显著改善儿童的情感识别与表达能力,还能降低家长的培训压力,同时增强亲子互动。研究还揭示了生成式AI在特殊教育中的潜力和挑战,为未来开发更多支持工具提供了设计指导。

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/papers/chi/146914/2024

广告推荐

学习 AI 编程到 CodeNow

open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3613904.3642899
一眼看懂

论文快照

fact_check
dataset
来源
CHI
calendar_month
年份
2024
emoji_events
奖项
未标记奖项
group
作者
8 位作者
sell
研究子方向
大语言模型(LLM)的人机协作、认知障碍与神经多样性(自闭症、ADHD、阅读困难)、增强与替代通信(AAC)
work
职业/产业
特殊教育教师、辅助技术专家
article
内容状态
已索引正文
hub
相关论文
3 篇相关论文