基于 Ply 的生成式触发-动作编程Aveni 等人开发 Ply 系统,通过层抽象、边界可视化和可调参数实现生成式触发-动作编程,允许用户自然语言指定复杂行为并逐步测试,首次使用研究验证其可行性。2025TATimothy J. Aveni et al.加利福尼亚大学大语言模型(LLM)的人机协作AI 辅助决策与自动化系统UIST
用 DocWrangler 引导语义数据处理Shankar 等人开发 DocWrangler 语义数据处理环境,通过就地笔记、提示精炼和操作分解三个功能解决LLM管道构建难题,公开部署超1500会话验证有效性。2025SSShreya Shankar et al.加利福尼亚大学大语言模型(LLM)的人机协作可解释人工智能(XAI)计算方法在HCI中的应用UIST
Dreamcrafter:通过灵活的生成输入和输出对3D辐射场进行沉浸式编辑Vachha 等人推出 Dreamcrafter VR 编辑系统,通过模块化架构集成生成式 AI,结合自然语言与直接操作实现沉浸式 3D 辐射场实时编辑。2025CVCyrus Vachha et al.加利福尼亚大学沉浸感与临场感研究生成式AI(文本、图像、音乐、视频)3D 建模与动画CHI
启发式发现:使用Dreamsheets为AI艺术创作进行灵活的意义构建Almeda 等人设计 DreamSheets 系统,通过 LLM 辅助提示构建和电子表格界面支持 TTI 设计空间探索,两项研究揭示模板化语义轴与可配置探索单元等策略。2024SAShm Garanganao Almeda et al.加利福尼亚大学生成式AI(文本、图像、音乐、视频)AI 辅助创意写作平面设计与排版工具CHI
Rambler:通过LLM辅助的概要操作支持写作的语音功能Lin 等人研发Rambler系统,通过LLM驱动的概要提取和宏修订功能支持语音写作,12名参与者比较研究显示其在迭代修订和用户内容控制方面优于语音文本编辑器加ChatGPT基线2024SLSusan Lin et al.加利福尼亚大学语音用户界面(VUI)设计生成式AI(文本、图像、音乐、视频)大语言模型(LLM)的人机协作CHI
矢量图形的交互式灵活风格转移Warner等人开发VST矢量图形风格转移工具,支持设计师调整跨设计元素对应关系和自定义样式属性,实现交互式灵活的风格转移。2023JWJeremy Warner et al.加利福尼亚大学平面设计与排版工具可定制与个性化物件UIST
驯服人工智能猫:从提示GPT-3设计聊天机器人中汲取的教训Zamfirescu-Pereira 等人尝试仅用提示设计聊天机器人,发现GPT-3/4实现80%用户体验目标容易,剩余20%故障需整体处理,且缺乏说“我不知道”的机制,导致对话失控。2023JZJ.D. Zamfirescu-Pereira et al.加利福尼亚大学伯克利分校对话式聊天机器人大语言模型(LLM)的人机协作DIS
为什么约翰尼不能提示:非AI专家如何尝试(并失败)设计LLM提示Zamfirescu-Pereira等人研究非AI专家的提示工程,发现其机会主义探索方式受限,教学期望和过度概括倾向阻碍有效提示设计。2023JZJ.D. Zamfirescu-Pereira et al.加利福尼亚大学伯克利分校大语言模型(LLM)的人机协作AI 辅助决策与自动化系统CHI
用于库比较的概念标注示例Yan 等人开发ParaLib交互界面,通过并排呈现多个概念标注的代码示例帮助程序员比较库,20人用户研究表明该方法能促进更一致、合适的库选择和更全面的相似性总结。2022LYLitao Yan et al.哈佛大学知识工作者工具与工作流原型设计与用户测试UIST
使用视觉建模和显著性分析预测和解释移动UI的可点击性Schoop 等人提出基于深度神经网络的移动UI可点击性预测系统,利用潜在空间检索相似案例,并通过 XRAI 算法生成热图解释预测结果,辅助 UI 设计迭代。2022ESEldon Schoop et al.加利福尼亚大学可解释人工智能(XAI)AI 辅助决策与自动化系统CHI
编织原理图与代码:硬件描述语言的交互式视觉编辑Lin等人提出硬件描述语言IDE的交互式图形编辑方法,通过从单个图形编辑操作生成等效HDL,保留代码作为主要设计输入,保留HDL全部功能并支持高级用户使用。2021RLRichard Lin et al.加利福尼亚大学交互式数据可视化桌面3D打印与个人制造电路制作与硬件原型UIST
UMLAUT:使用程序结构和模型行为调试深度学习程序Schoop 等人设计 Umlaut 系统,基于专家调试启发式方法检查 DL 程序结构和模型行为,15 人评估中参与者发现并修复的 DL 程序错误显著增多。2021ESEldon Schoop et al.加利福尼亚大学可解释人工智能(XAI)AI 辅助决策与自动化系统CHI
TransceiVR: 弥合外部用户与VR用户之间的不对称通信Kumaravel 等人开发 TransceiVR 系统,通过VR平台API实现外部用户与VR用户之间的不对称通信,支持场景探索、深度标注和共享显示,显著提升了远程协作的效率与成功率。2020BKBalasaravanan Thoravi Kumaravel et al.加利福尼亚大学VR 中的社交与协作混合现实工作空间UIST
多态块:统一电路板设计的高层规格与低层控制Lin等人提出多态块硬件描述语言方法,通过抽象类型块和电子建模统一从系统架构到组件选择的多层次抽象,支持物理正确性验证。2020RLRichard Lin et al.加利福尼亚大学电路制作与硬件原型UIST
从链接代码、代码片段和输出组成灵活组织的逐步教程Head 等人针对编程教程创作痛点设计Torii工具,支持链接代码、代码片段与输出保持一致,访谈12名作者并分析200个教程验证其有效性。2020AHAndrew Head et al.加利福尼亚大学编程教育与计算思维原型设计与用户测试CHI
LabelAR:用于快速计算机视觉图像采集的空间引导界面Laielli 等人提出 LabelAR 系统,利用 AR 摄像头空间追踪引导用户多角度移动采集图像,并自动生成 2D 边框标注,显著提升模型训练效率。2019MLMichael Laielli et al.加利福尼亚大学AR 导航与情境感知生成式AI(文本、图像、音乐、视频)UIST
Heimdall:用于调试微控制器项目的远程控制检查工作台Karchemsky 等人推出 Heimdall 远程电子工作台,结合驱动检查相机与增强面包板,实现微控制器项目远程视觉检查、测量和信号注入调试。2019MKMitchell Karchemsky et al.加利福尼亚大学桌面3D打印与个人制造电路制作与硬件原型知识工作者工具与工作流CHI
Loki:利用双向混合现实远程呈现技术促进物理任务的远程教学Kumaravel 等人提出 Loki 双向混合现实远程呈现系统,整合视频、音频与空间捕捉技术,支持远程物理任务的实时演示、标注与性能回放。2019BKBalasaravanan Thoravi Kumaravel et al.加利福尼亚大学混合现实工作空间协作学习与同伴教学远程操控与遥呈现(Telepresence)UIST
超越原理图捕获:为更好的电子设计工具提供有意义的抽象Lin 等人通过对15位电子设计师的访谈,揭示当前PCB设计工具在低抽象级别运行、缺乏架构阶段支持的问题,并提出高层次抽象概念以减少繁琐工作。2019RLRichard Lin et al.加利福尼亚大学电路制作与硬件原型可定制与个性化物件CHI
从现有代码中交互式提取示例Head 等人设计 CodeScoop 工具,通过选择性包含控制结构与执行跟踪帮助程序员从现有代码提取可执行示例,受试者提取效率显著提升。2018AHAndrew Head et al.加利福尼亚大学开源协作与代码审查计算方法在HCI中的应用CHI