突破徽章：通过可穿戴的AAC智能徽章和显示器增强交流

文献标题

Breaking Badge: Augmenting Communication with Wearable AAC Smartbadges and Displays

文献信息

• 主题领域: 助听技术与增强/替代性沟通(AAC)技术设计
• 关键词: AAC, 替代与增强沟通, 无障碍技术, 穿戴式设备, 智能徽章, 隐形残疾

研究背景与问题

• 作者发现了哪些问题或挑战？

  1. 当前的增强和替代性沟通(AAC)技术往往无法增强用户现有的沟通优势，反而限制了用户的直觉式沟通路径，如自然声音、非语言交流（如手势、表情）等。
  2. AAC设备常常被指责沟通速度缓慢、自主性受限、学习需求高，且设备笨重的设计形式可能导致社会羞耻并促使设备弃用。
  3. 很多人生活在复杂的沟通需求背景下（如中风后导致的失语症），并且通常面临极具压力的公共场合沟通场景。

• 为什么这个问题很重要？ 人群中复杂沟通需求（如失语症）的比例随着年龄增长和全球人口老龄化趋势而上升。更好地设计支持性技术对提高这些人群的日常生活质量尤为重要。

• 研究动机与相关工作 作者参考了一些先前研究，如基于失语症患者的需求设计的TalkAbout应用，及早期对隐形残疾支持性技术（如徽章）的探索。他们认为目前的AAC设备无法有效满足复杂的沟通需求，并借鉴低技术AAC的研究呼吁开发流线型、更个性化和可穿戴的解决方案。

解决方案

方法/解决方案

作者设计并评估了两种穿戴式AAC设备原型：

1. InkTalker智能徽章:
   • 使用低功耗电子墨水(eInk)屏幕，支持展示定制化消息，用于揭示隐形残疾并作为对话辅助工具。
   • 支持多功能场景：请求帮助、失语症信息、兴趣展示等。
   • 可穿戴形式灵活：可佩戴在衬衫口袋、挂绳或背包上。
2. WalkieTalkie应用:
   • iOS移动应用程序，用以将智能手机转变为功能丰富的公共显示屏。
   • 支持用户自定义徽章、多模态交互、图像分类(如照片辅助沟通)、搜索工具等功能。
   • 多种佩戴选项，包括挂绳、腰带或透明手机包。

创新之处

• 低学习成本的设计：两种设备均注重简化用户操作，减轻认知负担。
• 支持多模态沟通：不仅专注于语音生成，还通过支持手势和非语言交流来增强用户现有的沟通能力。
• 社会文化敏感性：设备尺寸小、轻便，可隐藏或融合用户日常使用的其他低技术设备，减少社会羞耻感。

实施步骤

1. 合作与需求调查:
   • 与19名失语症患者开展深入的需求研究，包括沟通困难场景标记、创意原型设计。
   • 利用无障碍的共创设计方法，如SWIM场景设计站和低保真概念建模。
2. 设备原型开发:
   • 基于Raspberry Pi Pico-W硬件研发InkTalker，利用eInk屏幕实现低功耗通信。
   • 开发WalkieTalkie应用，充分利用智能手机硬件进行沟通增强。
3. 实验与评价:
   • 通过焦点组和经验原型测试，分析两种设备的实际使用表现与用户体验反馈。

研究成果

具体成果

1. 技术效果:

   • 两种设备被证明可有效在高压沟通场景中协助用户与他人交流，且对防止沟通中断起到了“保护网”作用。
   • 设备支持用户的多模态沟通能力（如语言、手势、非语言交流等），显著提升用户的独立性和交流自信。

2. 用户评价:

   • 用户对可穿戴智能徽章的低能耗、模块化设计和定制化内容表示积极评价。
   • WalkieTalkie应用被认为对于搜索协助、图像分类以及符号辅助有巨大潜力。

优势

• 与传统AAC设备相比，InkTalker和WalkieTalkie具有更轻便、更便携和更低学习需求的特点。
• 不干扰用户直觉沟通路径，鼓励自然交流，同时增强用户的社会文化适应能力。
• 可灵活定制设备内容，支持用户不同语境和身体状况下的个性化需求。

实验或评估结果

• 焦点组中，大多数用户强烈同意两种设备适合用于支持他们的沟通需求。
• 尽管存在少量需要改进的地方，如按钮设计过小、图像分类准确性等问题，整体反馈表明设备在辅助沟通中表现出良好实用性。

局限性与未来方向

• 局限性:

  • 研究样本相对较小，主要局限于失语症患者，对其他复杂沟通需求群体的适用性需进一步验证。
  • 缺乏中长期的真实场景高压沟通环境中的设备部署数据。

• 未来方向:

  • 通过真实世界使用场景测试进一步优化设备设计，并探索更广泛配置。
  • 考虑采用新型技术解决如少数群体代表性不足以及跨文化适应性的难题。