硒石:利用大型语言模型生成的综合概述在线构建意义框架Liu 等人构建Selenite系统,利用LLM作为推理机器自动生成选项和标准概述,显著加速信息处理并提升意义构建体验。2024MLMichael Xieyang Liu et al.Carnegie Mellon University大语言模型(LLM)的人机协作可解释人工智能(XAI)AI 辅助决策与自动化系统CHI
元管理器:一个收集和探索代码元信息的工具Horvath 等人开发了 Meta-Manager 系统,通过 VS Code 扩展自动追踪代码更改和来源(AI 生成或在线资源),帮助开发者回答关于代码历史和设计意图的问题。2024AHAmber Horvath et al.Carnegie Mellon University交互式数据可视化计算方法在HCI中的应用CHI
通过日志分析理解文档使用情况:四个云服务的案例研究Nam 等人分析四个云服务超10万用户文档浏览日志,发现访问模式与用户特征及API采用行为相关,为文档设计优化提供数据支撑。2024DNDaye Nam et al.Carnegie Mellon University知识工作者工具与工作流原型设计与用户测试CHI
FrameKit: 使用关键帧创作自适应用户界面的工具Wu 等人开发了FrameKit工具,通过关键帧插值和编程示例技术,简化自适应用户界面的创作流程,前端开发者经简短培训即可掌握。2024JWJason Wu et al.大语言模型(LLM)的人机协作原型设计与用户测试IUI
ONYX:通过多模式交互任务学习辅助用户教授自然语言接口Ruoff等人提出ONYX代理,结合自然语言编程与演示编程交互式学习新NL输入,使用户教授准确率达93.3%。2023MRMarcel Ruoff et al.Karlsruhe Institute of Technology (KIT)语音用户界面(VUI)设计大语言模型(LLM)的人机协作可解释人工智能(XAI)CHI
Wigglite:低成本信息收集与分类Liu等人提出wiggling交互技术,通过指针快速摆动或手机上下滑动手势,帮助用户轻量级收集整理信息并编码心理情境,操作成本降低58%,速度提升24%。2022MLMichael Xieyang Liu et al.原型设计与用户测试UIST
利用注释促进代码理解Horvath 等人开发 Catseye 代码注释工具,允许开发者在不修改源码的情况下做轻量级笔记,保留代码上下文并支持版本跟踪,帮助参与者修复更多缺陷。2022AHAmber Horvath et al.知识工作者工具与工作流计算方法在HCI中的应用UIST
结晶体:降低开发者收集和组织决策信息的成本Liu 等人开发 Crystalline 系统,利用自然语言处理和被动行为信号自动收集整理网络信息,使开发者创建比较表格速度提升约 20%,操作成本降低 60%2022MLMichael Xieyang Liu et al.Carnegie Mellon University大语言模型(LLM)的人机协作交互式数据可视化计算方法在HCI中的应用CHI
理解程序员如何在文档中使用注解Horvath 等人开发 Adamite 注释工具,支持开发者在 API 文档中创建上下文相关注释,使任务完成效率提升 67%2022AHAmber Horvath et al.Carnegie Mellon University, Carnegie Mellon University编程教育与计算思维知识工作者工具与工作流CHI
"重用还是不重用?":一个评估总结知识的框架和系统Liu 等人提出 Strata 系统,通过捕获决策者行为并可视化信号,帮助开发者评估编程知识的重用适当性,显著提升决策准确性、深度和速度。2021MLMichael Xieyang Liu et al.Algorithms and Decision MakingCSCW
Tabs.do:任务中心化的浏览器标签管理Chang 等人开发 Tabs.do Chrome 扩展,利用机器学习自动将标签页智能分组为任务束,帮助用户减轻标签过载并高效切换任务上下文。2021JCJoseph Chee Chang et al.知识工作者工具与工作流通知与中断管理UIST
Screen2Vec: GUI屏幕和GUI组件的语义嵌入Li 等人提出 Screen2Vec 自监督技术,生成GUI屏幕和组件语义嵌入,无需手动标注即可编码文本内容、视觉设计和交互特征,通过下游任务验证了表示相似性和可组合性。2021TLToby Jia-Jun Li et al.Carnegie Mellon University可解释人工智能(XAI)原型设计与用户测试计算方法在HCI中的应用CHI
面向任务导向对话中会话破裂的多模态修复Li 等人提出SOVITE多模态对话修复系统,通过GUI截图展示系统理解状态,支持用户引用第三方应用界面进行意图消歧和直接操作修复。2020TLToby Jia-Jun Li et al.语音用户界面(VUI)设计对话式聊天机器人UIST
基于GUI的编程演示系统中保护隐私的脚本共享技术Li等人提出基于GUI编程演示脚本的隐私保护方法,通过信息条目唯一性识别并混淆个人信息,支持跨任务领域应用,实现本地恢复混淆字段以确保共享脚本可理解性。2020TLToby Jia-Jun Li et al.Privacy and SecurityCSCW
Unakite:利用 Web 支持开发者的决策制定Liu 等人开发 Unakite 原型系统帮助开发者收集和组织权衡信息,评估显示该工具可将信息收集成本降低 45%,比较表使理解速度提高约 3 倍。2019MLMichael Xieyang Liu et al.可解释人工智能(XAI)AI 辅助决策与自动化系统计算方法在HCI中的应用UIST
PUMICE:一种从自然语言和演示中学习概念与条件语句的多模态智能体Li 等人提出 PUMICE 多模态智能体,通过结合自然语言编程与编程演示,让用户以高级描述任务并通过对话和演示递归解决歧义,实验室研究验证了其可用性。2019TLToby Jia-Jun Li et al.对话式聊天机器人大语言模型(LLM)的人机协作UIST
笔记本中的故事:使用文学编程工具进行探索性数据科学Kery 等人访谈21位数据科学家研究文学编程中的代码行为,发现版本控制导致可读性下降,为未来工具提出设计指导。2018MKMary Beth Kery et al.Carnegie Mellon University交互式数据可视化计算方法在HCI中的应用CHI