VideoCraft：一种支持空间层编辑的混合现实增强概念视频生成工作流

DOI

概念视频是创作者将数字元素融入真实世界影像以探索和展示空间设计想法的有力工具。尽管当前的视频生成模型简化了传统劳动密集型的创作流程，但它们缺乏将新对象无缝插入原始空间并进行精确空间调整的支持。我们提出了 VideoCraft，这是一种用于概念视频创建的混合现实增强视频生成工作流。通过形成性研究，我们发现在工作流中简单集成混合现实和视频生成模型存在关键局限，尤其是在风格和几何的局部编辑方面。因此，我们在工作流中引入了空间层编辑机制，支持通过层整形、特征和状态进行直观的空间操作。我们通过受控用户研究和专家访谈评估了 VideoCraft，证明了其在增强空间精度和创意控制方面的有效性。