Texterial:一种基于文本即材料的LLM中介写作交互范式Shen 等人提出 Texterial 文本即材料交互范式,让用户像塑造黏土或培育植物一样与LLM协作写作,显著提升创意写作体验。2026JSJocelyn J Shen et al.微软AI 辅助创意写作AI辅助写作与文本生成创意协作与反馈系统CHI
ImaginationVellum:带空间提示、生成笔触和构思历史的生成式AI构思画布Marquardt等人开发ImaginationVellum生成式AI构思画布,将整个2D画布作为主动提示空间,通过空间排列和生成笔触实现设计空间的快速遍历与概念混合。2025NMNicolai Marquardt et al.微软生成式AI(文本、图像、音乐、视频)创意协作与反馈系统UIST
意图标记:探索微提示交互以支持细粒度的人类与生成式AI协同创作工作流程Gmeiner 等人设计IntentTagger系统,探索基于意图标签的粒度微提示交互,用户研究表明灵活表达意图和元意图提取能有效支持人与生成式AI的共同创作工作流程。2025FGFrederic Gmeiner et al.卡内基梅隆大学生成式AI(文本、图像、音乐、视频)AI 辅助创意写作创意协作与反馈系统CHI
AI仪器:将提示作为工具来抽象和反映图形界面命令作为通用工具Riche 等人提出 AI 工具概念,将提示体现为可操作界面对象,通过意图反思机制解决图像生成中的模糊意图与非线性迭代难题。2025NRNathalie Riche et al.微软生成式AI(文本、图像、音乐、视频)大语言模型(LLM)的人机协作CHI
BlendScape: 通过生成式AI实现视频会议环境的终端用户定制Rajaram等人开发了BlendScape系统,利用生成式AI为视频会议用户提供环境定制功能,通过多模态交互将用户背景融合到统一协作环境中。2024SRShwetha Rajaram et al.密歇根大学生成式AI(文本、图像、音乐、视频)远程工作工具与体验UIST
SpaceBlender:通过生成式3D场景融合创建富上下文协作空间Numan 等人提出 SpaceBlender 管道,利用深度估计、网格对齐和扩散模型将用户物理环境转化为富上下文VR协作空间,20人 paired 实验显示可增强协作沉浸感。2024NNNels Numan et al.Parkview HealthVR 中的社交与协作混合现实工作空间生成式AI(文本、图像、音乐、视频)UIST
探索长途航班混合现实工作输入模态的设计空间Mo 等人创建四个设计探针探索长途航班混合现实工作,通过24人参与视频研究和访谈,提出资源受限环境下直观、无摩擦输入模态的设计空间。2024WMWen Mo et al.伦敦大学学院混合现实工作空间知识工作者工具与工作流DIS
SharedNeRF:利用 photorealistic 和视点依赖渲染实现实时和远程协作Sakashita 等人提出 SharedNeRF 系统,利用头戴式摄像头捕捉环境并通过 NeRF 渲染高保真体积空间,实现远程协作的花卉布置任务。2024MSMose Sakashita et al.康奈尔大学混合现实工作空间远程操控与遥呈现(Telepresence)CHI
像素化交互:在触觉显示器上探索用于图形原语的像素艺术Bhatnagar 等人探索像素艺术在触觉点阵显示器上的应用,让8名视障触觉读者验证了像素图形原语的可理解性,为低分辨率触觉显示设计提供了具体指南。2023TBTigmanshu Bhatnagar et al.伦敦大学学院视觉障碍者技术(屏幕阅读器、触觉图形、盲文)数据物理化(Data Physicalization)DIS
风格闪烁:通过手工设计样式作为第一类对象探索结构化信息的数字墨水绘制Romat 等人提出 Style Blink 系统,将手工绘制样式封装为可重用的第一类对象,支持交互式墨水工具和自定义布局,13 名用户反馈显示样式适应在个人草图实践中具有潜力2022HRHugo Romat et al.法国国家科学研究中心平面设计与排版工具代码创作与计算艺术CHI
AirConstellations:通过多个空间感知骨架实现空中设备组装的跨设备交互Marquardt等人提出AirConstellations系统,支持2-5个7自由度空间感知骨架在空气中自稳定组装,实现多设备灵活布局与上下文敏感的跨设备交互,适用于视频会议和协作办公场景。2021NMNicolai Marquardt et al.微软抬头显示(HUD)与驾驶辅助系统(ADAS)知识管理与团队意识普适计算(Ubiquitous Computing)UIST