Cocomix：利用评论提高非视觉网络漫画的可访问性

文献标题

Cocomix: Utilizing Comments to Improve Non-Visual Webtoon Accessibility

文献信息

• 主题领域: 无障碍设计、数字漫画（Webtoon）、人机交互
• 关键词: 无障碍设计, 数字漫画, Webtoon, 图像描述, 评论数据, 低视力用户
• 会议: CHI Conference on Human Factors in Computing Systems (CHI '22)
• 出版时间与地点: 2022年4月29日-5月5日, 新奥尔良

研究背景与问题

• 研究问题:

  • Webtoon作为一种流行的数字漫画形式，其视觉导向特性使得视力障碍者（BLV，Blind or Low Vision users）难以获得同等的用户体验。
  • 当前的传统图像描述方法在Webtoon中容易导致信息过载、描述冗余、失去情节衔接，以及缺乏用户对描述细节和阅读节奏的控制。
  • 现有评论数据虽然能提供情节的高亮和背景信息，但如何利用评论数据来增强Webtoon描述无明确研究。

• 研究的重要性:

  • Webtoon的全球用户基础庞大，但视力障碍用户群体被主流文化内容所排斥，体验障碍亟待解决。
  • 结合读者贡献的评论数据，为BLV用户提供更高效的Webtoon无障碍阅读工具，可以提升文化融入感和内容体验。

• 研究动机与相关工作:

  • 前期研究表明，读者评论具有高上下文相关性，可作为补充知识来源。
  • 无障碍设计中已有对图像和多媒体内容的研究，而Webtoon的独特格式（垂直滚动以及社交交互）需要新的无障碍设计思路。

解决方案

• 方法与解决方案:

  • 提出了一种交互式Webtoon阅读工具Cocomix，通过评论驱动描述生成和交互设计来增强BLV用户体验。
  • 突出两个核心功能：
    1. 基于评论的自适应描述: 动态调整每个Webtoon面板的描述级别，重点面板提供详细描述，非重点面板提供简要描述。
    2. 面板锚定评论: 提取与特定面板相关的评论，让用户可按需探索不同情节的评论内容。

• 创新点:

  1. 首次尝试使用读者评论数据作为面板描述的重要性评分依据。
  2. 提供细粒度的交互控制（用户可双击触发详细描述，或滑动查看评论）。
  3. 通过自动化的计算管道实现评论提取、面板关键性评分和评论关联。

• 实现步骤与关键技术:

  1. 描述设计标准: 提出一套专为Webtoon描述设计的标准，精简冗余信息、分组面板以减少重复描述。
  2. 数据处理: 使用自然语言处理技术，如名词分词、语法校正、上下文匹配等，以提取高质量且语义清晰的评论。
  3. 自动化管道:
     • 面板关键性评分：根据评论频率对每个面板评分，设置重点面板的动态描述细节。
     • 评论提取：基于内容相关性和语法特征筛选描述性评论。
     • 评论关联与呈现：基于语义相似性和命名实体匹配，将提取的评论锚定到相应面板。

研究成果

• 具体成果:

  1. 开发了Cocomix原型系统，实现了动态描述调整和评论锚定功能。
  2. 对1000条Webtoon评论进行了定性分析，构建了注释的分类学（如描述性与非描述性评论），为系统功能优化提供数据支持。
  3. 提出并验证了一套为Webtoon开发的无障碍描述新规范。

• 优势:

  1. 用户对于阅读节奏和信息细节有更大控制权。
  2. 较现有描述方法，提供更高效、简洁的Webtoon音频描述。
  3. 利用评论丰富描述情节，提升用户对内容的理解深度和参与感。

• 实验与评估:

  • 通过用户研究和系统验证对系统功能、技术可行性及用户体验进行了评估，包括以下两部分：
    1. 管道评估: 测试评论提取及面板锚定评论的准确性，结果显示系统提取的描述性评论比点赞最多的评论更加相关和有用。
    2. 用户研究: 对12名视力障碍参与者的试用测试表明，Cocomix较基准系统更易用，且评论驱动的交互功能有助于理解Webtoon内容。

• 局限性与未来方向:

  1. 评论策略的依赖性：对于新发布或评论量较少的Webtoon，效果可能有限。
  2. 描述生成的自动化：现阶段仍需人工创建描述内容，未来可探索自动化生成技术。
  3. 不同用户需求：需进一步优化以满足多样的无障碍用户需求（如基于认知负荷、阅读偏好）。