MemoVis：基于生成式人工智能的3D设计反馈伴侣参考图创建工具

异步反馈是3D设计流程中的关键环节。常见的反馈方式是结合文本评论与伴侣参考图像，以帮助阐明文本要点。理想的反馈提供者应具备3D和图像编辑技能来创建有效表达想法的参考图像，但他们通常缺乏这些技能，只能借助草图或网络图片，而这些往往与当前的3D设计不匹配。为此，我们开发了MemoVis，一个基于反馈评论利用生成式人工智能驱动创建参考图像的文本编辑器界面。首先，我们提出了一个基于视觉语言基础模型的实时视角建议功能，帮助反馈提供者将评论与相机视角锚定。其次给定相机视角，我们引入了三种基于预训练2D生成模型的图像修改器，将文本评论转换为该视角下3D场景的更新版本。我们对14名反馈提供者进行了被试内研究，验证了MemoVis的有效性。另外8名具有3D设计经验的参与者对伴侣图像的质量和明确性进行了评估。