基于 Ply 的生成式触发-动作编程Aveni 等人开发 Ply 系统,通过层抽象、边界可视化和可调参数实现生成式触发-动作编程,允许用户自然语言指定复杂行为并逐步测试,首次使用研究验证其可行性。2025TATimothy J. Aveni et al.大语言模型(LLM)的人机协作AI 辅助决策与自动化系统UIST
用 DocWrangler 引导语义数据处理Shankar 等人开发 DocWrangler 语义数据处理环境,通过就地笔记、提示精炼和操作分解三个功能解决LLM管道构建难题,公开部署超1500会话验证有效性。2025SSShreya Shankar et al.大语言模型(LLM)的人机协作可解释人工智能(XAI)计算方法在HCI中的应用UIST
Dreamcrafter:通过灵活的生成输入和输出对3D辐射场进行沉浸式编辑Vachha 等人推出 Dreamcrafter VR 编辑系统,通过模块化架构集成生成式 AI,结合自然语言与直接操作实现沉浸式 3D 辐射场实时编辑。2025CVCyrus Vachha et al.University of California, Berkeley, EECS沉浸感与临场感研究生成式AI(文本、图像、音乐、视频)3D 建模与动画CHI
Rambler:通过LLM辅助的概要操作支持写作的语音功能Lin 等人研发Rambler系统,通过LLM驱动的概要提取和宏修订功能支持语音写作,12名参与者比较研究显示其在迭代修订和用户内容控制方面优于语音文本编辑器加ChatGPT基线2024SLSusan Lin et al.UC Berkeley语音用户界面(VUI)设计生成式AI(文本、图像、音乐、视频)大语言模型(LLM)的人机协作CHI
为什么约翰尼不能提示:非AI专家如何尝试(并失败)设计LLM提示Zamfirescu-Pereira等人研究非AI专家的提示工程,发现其机会主义探索方式受限,教学期望和过度概括倾向阻碍有效提示设计。2023JZJ.D. Zamfirescu-Pereira et al.Berkeley大语言模型(LLM)的人机协作AI 辅助决策与自动化系统CHI
用于库比较的概念标注示例Yan 等人开发ParaLib交互界面,通过并排呈现多个概念标注的代码示例帮助程序员比较库,20人用户研究表明该方法能促进更一致、合适的库选择和更全面的相似性总结。2022LYLitao Yan et al.知识工作者工具与工作流原型设计与用户测试UIST
使用视觉建模和显著性分析预测和解释移动UI的可点击性Schoop 等人提出基于深度神经网络的移动UI可点击性预测系统,利用潜在空间检索相似案例,并通过 XRAI 算法生成热图解释预测结果,辅助 UI 设计迭代。2022ESEldon Schoop et al.University of California, Berkeley可解释人工智能(XAI)AI 辅助决策与自动化系统CHI
UMLAUT:使用程序结构和模型行为调试深度学习程序Schoop 等人设计 Umlaut 系统,基于专家调试启发式方法检查 DL 程序结构和模型行为,15 人评估中参与者发现并修复的 DL 程序错误显著增多。2021ESEldon Schoop et al.University of California, Berkeley可解释人工智能(XAI)AI 辅助决策与自动化系统CHI
TransceiVR: 弥合外部用户与VR用户之间的不对称通信Kumaravel 等人开发 TransceiVR 系统,通过VR平台API实现外部用户与VR用户之间的不对称通信,支持场景探索、深度标注和共享显示,显著提升了远程协作的效率与成功率。2020BKBalasaravanan Thoravi Kumaravel et al.VR 中的社交与协作混合现实工作空间UIST
多态块:统一电路板设计的高层规格与低层控制Lin等人提出多态块硬件描述语言方法,通过抽象类型块和电子建模统一从系统架构到组件选择的多层次抽象,支持物理正确性验证。2020RLRichard Lin et al.电路制作与硬件原型UIST
从链接代码、代码片段和输出组成灵活组织的逐步教程Head 等人针对编程教程创作痛点设计Torii工具,支持链接代码、代码片段与输出保持一致,访谈12名作者并分析200个教程验证其有效性。2020AHAndrew Head et al.University of California, Berkeley编程教育与计算思维原型设计与用户测试CHI
Heimdall:用于调试微控制器项目的远程控制检查工作台Karchemsky 等人推出 Heimdall 远程电子工作台,结合驱动检查相机与增强面包板,实现微控制器项目远程视觉检查、测量和信号注入调试。2019MKMitchell Karchemsky et al.University of California, Berkeley桌面3D打印与个人制造电路制作与硬件原型知识工作者工具与工作流CHI
超越原理图捕获:为更好的电子设计工具提供有意义的抽象Lin 等人通过对15位电子设计师的访谈,揭示当前PCB设计工具在低抽象级别运行、缺乏架构阶段支持的问题,并提出高层次抽象概念以减少繁琐工作。2019RLRichard Lin et al.University of California, Berkeley电路制作与硬件原型可定制与个性化物件CHI
HindSight: 通过实时360度视频中检测到的对象声化来增强空间意识Schoop 等人提出 HindSight 可穿戴系统,利用深度神经网络在实时360度视频中检测对象并通过骨传导耳机声音化,使骑车人对视野外接近车辆的感知安全性提升。2018ESEldon Schoop et al.Berkeley视觉障碍者技术(屏幕阅读器、触觉图形、盲文)生物传感器与生理监测CHI
WiFröst:弥合网络嵌入式系统调试的信息鸿沟McGrath 等人提出 WiFröst 网络嵌入式系统调试方法,通过设备到API到路由器到服务器的端到端仪器化,自动收集数据并可视化显示,基于执行轨迹分析高亮潜在问题。2018WMWilliam McGrath et al.物联网设备隐私环境感知与上下文计算电路制作与硬件原型UIST