使用词具体性从文本文章生成音频视觉幻灯片

视频

DOI

我们提出了一种系统，该系统通过利用单词具体性（衡量一个单词或短语与某些可感知概念的关联强度）的概念，自动将文本文章转换为视听幻灯片。在一项形成性研究中，我们了解到人们不仅更喜欢这样的视听幻灯片，而且发现内容比文本文章或附有图片的文本文章更容易理解。我们使用单词具体性来选择搜索词并找到与文本相关的图片。然后，根据文章中具体单词的分布和语法结构，我们将选定的图片与通过文本转语音获得的音频叙述进行时间对齐，以生成视听幻灯片。在用户评估中，我们发现基于具体性的算法选择的图片与文本高度相关。我们的幻灯片质量与使用标准视频编辑工具手动制作的幻灯片相当，人们强烈偏好我们的幻灯片，而不是使用简单的关键词搜索方法生成的幻灯片。