Metamorpheus：通过隐喻性视觉叙事进行互动、情感和创意的梦境叙述

文献标题

Metamorpheus: Interactive, Affective, and Creative Dream Narration Through Metaphorical Visual Storytelling

文献信息

• 主题领域: 人机交互，情感计算，体验设计
• 关键词: 情感计算, 创造性叙述, 梦境, 人机交互, 体验中心设计, 视觉隐喻, 心理健康, 创意表达

研究背景与问题

• 发现的问题或挑战:

  • 人类情感通常由生活经历塑造，通过这些经历构建个性化意义。但在日常生活中如何支持该过程，以及如何借助技术如生成式AI促进情绪和思想的自我反思，仍未得到充分探索。
  • 虽然艺术表达已被用于心理治疗领域以促进心理健康，但普通人无需艺术背景的情感表达工具缺乏。
  • 梦境作为一种生动反映生活经验的形式，其在促成自我发现和情感健康的作用尚未被充分技术利用。

• 问题重要性:

  • 将情感经历付诸语言表达有助于心理健康和情绪恢复。
  • 捕捉梦境经历不仅能推动用户理解自我，还能为心理健康提供重要干预手段。
  • 提供一种未诉诸专业艺术技能的途径，普通用户也可以通过技术表达和记录自己的情感经历。

• 研究动机与相关工作:

  • 借鉴第三波人机交互（HCI）关注个体生活经验的转向，以及情感计算从情绪识别过渡到意义建构的动向。
  • 包括创意日记（bullet journaling）、艺术表达等研究已证明帮助用户反思和创建个性化意义的潜力。
  • 梦境因其独特的戏剧性和情感连结，作为帮助人们发现自我和理解自身情绪的素材，具有很大的研究价值。

解决方案

• 提出的解决方案:

  • Metamorpheus是一种情感界面，旨在通过创造性视觉叙事帮助用户回忆和反思梦境中的情感体验。
  • 系统基于梦境的情感变化创建隐喻图像和文本描述，并允许用户通过界面自定义视觉布局。

• 创新之处:

  • 借助生成式AI（ChatGPT和Stable Diffusion），支持用户制作视觉隐喻和文本叙述，促进情绪表达。
  • 创建可互动的用户界面，结合故事线可视化和情感驱动的色彩过滤，引导用户构建个性化意义。
  • 在梦境叙述中应用隐喻创作以帮助捕捉难以形容的情感并提高用户的参与感。

• 实施步骤及关键技术:

  • 文本泡图设计区分字面和隐喻场景，帮助用户识别情感强度。
  • 使用ChatGPT生成隐喻文案，同时结合Stable Diffusion生成文本到图片的视觉隐喻。
  • 用户可以在界面中操作图片，调整情感事件的大小与排列，并通过色彩滤镜个性化界面。

研究成果

• 具体成果:

  • Metamorpheus增强了用户对梦境的细节回忆，使他们能够以更深刻的方式反思。
  • 用户认为生成的视觉和文本隐喻既准确又有创意，帮助表达复杂的情感。
  • 系统的交互流程使用户能够体验梦境中的情感回忆，并自我表达个人意义。

• 与现有解决方案的比较与优势:

  • 与情绪识别的统计模型不同，Metamorpheus增强了用户的自主性，使用户在情感表达中更具创造性和掌控力。
  • 系统首次结合生成式AI支持用户对于梦境中难以言喻的复杂情感进行具象化表达。

• 实验或评估结果:

  • 通过对12名参与者的实验，发现该系统改进了梦境回忆、情感安抚以及分享的动机。
  • 随机生成的隐喻图像或文本描述成为用户构建意义的素材。
  • 用户体验被描述为重新经历梦境情感的过程，带来类似于“心理治疗”的正面作用，但不具情绪负担。

• 局限性与未来方向:

  • 用户大多为非英语母语者，其对生成式AI的感知可能局限于语言能力。
  • 系统评估依赖用户对体验的语言表达，而梦境体验通常较为难以描述。
  • 对于拥有艺术或设计背景的专业用户，当前系统的引导与自由度可能需进一步适配。

总结与讨论

Metamorpheus是一种创新型情感界面，能够通过人机共创的方式促进用户对梦境的情感和经历进行叙述，实验结果验证了其在促进用户自我反思和分享方面的潜力。未来可以扩展类似的系统至个人信息追踪或包括社会分享场景的领域，探索生成式AI在更广阔范围内的情感关联与意义建构效用。