"我们视觉交流" : 用户生成的图标，用于改善聋哑人和听力正常者之间的视频中介混合群体交流

文献标题

“We Speak Visually”: User-Generated Icons for Better Video-Mediated Mixed-Group Communications Between Deaf and Hearing Participants

文献信息

• 主题领域: 人机交互与无障碍设计
• 关键词: 聋人与重听者, 可访问性, 视频会议, 用户生成图标, 混合群体沟通, 手语, 非语言交流, 参与式设计, 表情符号, 文化差异

研究背景与问题

• 发现的问题或挑战:

  1. 视频会议平台主要以听觉用户为设计中心，对重听或无法听觉的用户（DHH，Deaf and Hard of Hearing）支持不足。
  2. 聋人和听觉用户的沟通方式之间存在显著的语言和文化差异，难以在混合群体中实现包容性沟通。
  3. 虽然DHH用户通过实时字幕等功能部分得到了支持，但依赖于文字和听觉的传统视频会议很难满足其交流需求，特别是在快速、不正式的会议环境中。
  4. 非语言信号的丢失（如肢体语言和面部表情）以及视频质量较低的问题进一步加剧了DHH用户在视频会议中的认知负担和沟通障碍。

• 问题的重要性:
  随着COVID-19疫情推动远程工作模式常态化，包容各类障碍用户的远程沟通技术已成为社会公平与职场多样性的关键议题。缺乏充分支持的混合群体沟通可能导致DHH用户在职场的孤立与低效率。

• 研究动机与相关工作:
  过去的研究表明，图标和表情符号在数字沟通中对传递情感和意图非常有效，但在如何用于改善混合群体（DHH与听觉用户）沟通方面研究有限。本研究通过参与式设计探索用户生成图标如何缓解语言鸿沟。

解决方案

• 提出的方法或解决方案:
  作者提出通过用户生成的图标来弥合DHH用户与听觉用户之间的沟通障碍。结合参与式设计和焦点小组访谈（FGI）的方法，研究在视频会议中通过图标提高表达和理解的效率与准确性。

• 解决方案的创新之处:

  1. 引入基于用户生成图标的非语言视觉工具，尝试建立被DHH和听觉用户共同使用的“语言”。
  2. 通过参与式设计揭示用户隐性需求，将图标设计作为优化视频会议中混合群体沟通的核心部分。
  3. 综合DHH的文化特点（如手语、非手动信号）和现有视频会议平台的限制，提出未来ICON系统的新设计方向。

• 实施步骤与关键技术:

  1. 通过焦点小组访谈了解混合群体的沟通困难及需求。
  2. 设计两部分实验：用户生成图标和基于图标的实时会议模拟观察。
  3. 根据用户提供的反馈，将用户生成的图标分类并总结其使用模式与功能，包括反应、参与、说明、状态指示、以及请求帮助等五大类别。

研究成果

• 具体成果:

  1. 图标被证实可降低语言理解门槛，有助于DHH用户和听觉用户之间的快速沟通。
  2. 在加入图标后，DHH用户的参与感增强，混合群体沟通更加平等且活跃。
  3. 用户生成图标以反应性、状态指示、直接说明等多种功能支持交流，不仅传达信息，还提升了交流氛围的和谐。

• 与现有解决方案的优势:
  相较于单纯依赖自动字幕或手语翻译，用户生成的图标能更直观地传达用户意图，避免冗长复杂的文字或标志语言解释，并且适用于多种实时会议环境。

• 实验或评估结果:

  1. 图标改善了混合群体的交流效率、互动质量和情感表达。
  2. 图标显示出跨文化和群体使用的潜能，用户普遍认为其有助于建立共识和减少误解。

• 局限性与未来方向:

  1. 当前研究的群体规模较小，且听觉参与者已接受过一定程度上的Deaf文化培训，不一定能代表广泛的职场情景。
  2. 图标在较长内容的表达上存在局限，且寻找图标时容易分散注意力。
  3. 图标的实际使用可能受限于会议的主题（例：严肃主题时或对陌生人群体中可能较少使用）。

  未来研究方向：

  • 针对更多样化的用户群体（如不同程度听力损失者）扩大样本研究范围。
  • 将实验扩展至教育、家庭互动等更广泛的使用场景。
  • 开发动态图标和结合文本与手势的多模态系统，从而增强其实时性和表达能力。