点赞、评论与字幕：社交媒体视频字幕研究十年综述（2015–2025）

文献标题

Like, Comment & Caption: A Decade of Social Media Video Caption Research (2015–2025)

出版信息

• 主题领域: 社交媒体视频字幕系统与实践的系统性综述。
• 关键词: 社交媒体视频字幕, 无障碍性, 参与式字幕, 聋人和听力障碍者 (DHH), 神经多样性观众, 创作者经济, 平台设计, 非语音信息, 自动字幕, 用户生成字幕。

背景与问题

• 问题/挑战: 社交媒体视频字幕系统缺乏系统性、设计导向的综合分析，导致干预措施忽视了平台限制和无障碍需求。
• 重要性: 字幕对于社交媒体平台上的无障碍性、参与度和可见性至关重要，尤其是对聋人、神经多样性用户和多语言用户。
• 动机与相关工作: 先前研究已探讨电视、流媒体和视频会议中的字幕，但社交媒体平台因其参与性、算法驱动性和创作者导向性而带来了独特的挑战。现有研究较为分散，集中于特定平台、社区或技术方面，缺乏全面的综合分析。

解决方案

• 提出的方法: 本文引入了**参与式字幕（Participatory Captioning）**框架，强调观众、创作者和平台共同制作字幕的过程。
• 创新点:
  1. 系统性回顾了2015年至2025年间36篇涉及HCI、无障碍性、媒体研究、教育和语言学习领域的论文。
  2. 确定了社交媒体视频字幕（SMVC）的四个关键主题：字幕类型、观众视角、创作者视角以及技术系统/数据集。
  3. 提出了参与式字幕作为SMVC设计和研究的协作框架。
  4. 提出了改进SMVC系统的设计启示和未来研究方向。
• 流程与关键技术:
  • 采用两阶段搜索策略，在Google Scholar和顶级HCI会议中进行系统性综述。
  • 对论文的维度进行编码，包括利益相关者角色、社区类型、数据收集方法和贡献。
  • 将研究结果综合为主题，并提出参与式字幕系统的设计机会。

结果

• 具体发现:
  • 自2019年以来，SMVC研究显著增长，越来越多地关注多平台和多社区的研究。
  • 确定了四种SMVC类型：自动字幕、用户生成字幕、非语音信息字幕以及手语字幕。
  • 持续的挑战包括字幕准确性、同步性、非语音信息覆盖以及对手语的支持不足。
  • 观众重视字幕的无障碍性、学习和文化连接功能，但面临字幕缺失和定制化限制等障碍。
  • 创作者因无障碍性、品牌推广和参与度而受到激励，但面临字幕制作过程劳动强度大和工具不足的问题。
• 相较基线的优势:
  • 突出了当前SMVC系统中的不足，例如缺乏参与式反馈机制和文化背景化的字幕实践。
  • 提出了参与式字幕作为解决这些不足的创新框架，通过让观众和创作者参与字幕的共同制作来改进系统。
• 实验/评估:
  • 使用定性编码和主题分析方法回顾了36篇同行评审论文。
  • 确定了平台和社区多样性、方法学方法以及SMVC研究中的关键挑战的趋势。
• 局限性与未来工作:
  • 仅限于英语研究，可能遗漏了非英语语境中的见解。
  • 主要集中于Google Scholar和HCI领域，可能排除了更广泛的跨学科研究。
  • 未来研究应扩展到代表性不足的社区、非西方平台以及多模态人工智能等新兴技术。

总结

本文系统性回顾了过去十年关于社交媒体视频字幕系统的研究，识别了关键主题、挑战和机遇。文章提出了参与式字幕框架，强调观众、创作者和平台共同制作字幕，以解决无障碍性和参与度的不足。研究结果表明，需要改进工具、反馈系统和文化包容性实践。未来研究应扩展到多样化的社区、平台和技术，确保SMVC系统能够满足所有用户的需求。