WatchWithMe：基于LLM的交互式引导观看评论视频

DOI

视频是观众追随感兴趣主题的热门方式。在产品和技术评论等领域，视频通常以紧凑的方式呈现深入视角，促使观众寻求额外解释。我们提出了WatchWithMe，这是一种在视频播放期间为观众提供上下文引导观看的方法。借助大型语言模型的力量，WatchWithMe从视频转录中生成引导材料，就像创建阅读指南一样，包括摘要、高亮和提示。WatchWithMe根据评论视频中的口语内容呈现相关信息。观众在我们基于文本的对话UI中浏览和提问，我们自动将视频观看上下文扩展到模型以获得上下文响应。我们使用公共视频评估了WatchWithMe，并收集了20名参与者的反馈。发现表明，我们的方法鼓励观众寻求与视频主题相关的观点或确认。