ImaginationVellum：带空间提示、生成笔触和构思历史的生成式AI构思画布

DOI

我们介绍了ImaginationVellum，一个用于早期视觉构思和概念草图生成的多模态空间画布。该系统支持一种独特的人-AI协作风格，即画布就是提示词。这意味着ImaginationVellum将整个2D画布作为主动提示空间，其中空间排列、邻近性和多元内容元素——墨迹、文本、图像和中间结果——的组合引导生成视觉结果。作为技术探索，ImaginationVellum贡献了一套基于空间的直接操作工具，用于迭代视觉构思。特别是，我们引入了生成笔触——自由形态的笔触，在多个潜在语义或风格维度上空间调节生成和提示词参数。这些技术通过概念收敛、分化、重新组合、混合和混合实现设计空间的快速遍历。我们详细介绍了系统架构、设计原理、用于局部控制的空间依赖意图标签、空间提示方法以及沿空间梯度变化输出的方法。时间和起源的可视化回放使构思轨迹可操作，将设计过程本身转化为支持行动中反思和设计决策重新访问的产物。我们报告了关于用户如何使用空间提示构建、引导和重新访问想法的初步研究见解，并讨论了空间依赖内容生成中的权衡。