Lotus: 基于抽象和提取摘要从长视频创作短视频

DOI

短视频在TikTok和Instagram等平台上很受欢迎，因为它们能快速吸引观众注意力。许多创作者将长视频改编成短视频，但创作者报告说，从长视频中规划、提取和安排片段具有挑战性。目前，创作者制作由现有长视频片段组成的提取式短视频，或通过为画面添加新录制的旁白制作抽象式短视频。提取式视频保持音频和画面之间的原始联系，而抽象式视频在较短时间内选择内容方面提供了灵活性。我们提出了Lotus，一个结合两种方法以平衡保持原始内容与内容灵活性的系统。Lotus首先通过生成短视频脚本及其对应的语音来创建抽象式短视频，然后将长视频片段与生成的旁白匹配。创作者可以使用自动化方法或Lotus的编辑界面添加提取式片段。Lotus的界面可进一步优化短视频。我们将Lotus生成的短视频与使用提取式基线方法生成的短视频进行了比较。在我们的用户研究中，我们将使用Lotus创建短视频与参与者现有的实践进行了比较。