CHI '26通讯作者荣誉提名生成式AI（文本、图像、音乐、视频） +2
交互增强指令：建模人-GenAI协作中提示与交互的协同作用
文本提示是人类与生成式AI（GenAI）通信最常见的方式。虽然方便，但传达细粒度和指代性意图具有挑战性。一个有前景的解决方案是将文本提示与精确的GUI交互相结合，如拖拽和点击。然而，缺少正式模型来捕捉提示与交互之间的协同设计，阻碍了它们的比较和创新。为填补这一空白，通过迭代和演绎过程，我们开发了交互增强指令（IAI）模型，这是一个紧凑的实体-关系图，形式化了交互与文本提示的组合如何增强人类-GenAI通信。利用该模型，我们从先前工具中提炼出12个 recurring和可组合的原子交互范式，验证了我们模型促进系统性设计特征化和比较的能力。四个使用场景进一步展示了我们模型在应用、改进和创新这些范式方面的实用性。这些结果说明IAI模型在…