ImaginationVellum:带空间提示、生成笔触和构思历史的生成式AI构思画布Marquardt等人开发ImaginationVellum生成式AI构思画布,将整个2D画布作为主动提示空间,通过空间排列和生成笔触实现设计空间的快速遍历与概念混合。2025NMNicolai Marquardt et al.生成式AI(文本、图像、音乐、视频)创意协作与反馈系统UIST
意图标记:探索微提示交互以支持细粒度的人类与生成式AI协同创作工作流程Gmeiner 等人设计IntentTagger系统,探索基于意图标签的粒度微提示交互,用户研究表明灵活表达意图和元意图提取能有效支持人与生成式AI的共同创作工作流程。2025FGFrederic Gmeiner et al.Carnegie Mellon University, Human-Computer Interaction Institute; Microsoft Research生成式AI(文本、图像、音乐、视频)AI 辅助创意写作创意协作与反馈系统CHI
AI仪器:将提示作为工具来抽象和反映图形界面命令作为通用工具Riche 等人提出 AI 工具概念,将提示体现为可操作界面对象,通过意图反思机制解决图像生成中的模糊意图与非线性迭代难题。2025NRNathalie Riche et al.Microsoft Research生成式AI(文本、图像、音乐、视频)大语言模型(LLM)的人机协作CHI
大或小,全在你的头脑中:使用手指重新定位的视觉-触觉大小变化错觉Kim 等人开发固定尺寸VR控制器结合手指重新定位和视觉上下文,创建动态尺寸变化错觉,用户可感知比设备小44.2%到大160.4%的虚拟对象。2024MKMyung Jin Kim et al.KAIST力反馈与伪重力感形变界面与软机器人材料全身交互与体感输入CHI
超越音频:面向作为交互与传感场所的耳机设计空间Panda 等人探索耳机作为通用输入设备的潜力,结合惯性运动、电容触摸和深度相机等传感模式,为可穿戴交互设计提供理论框架。2023PPPayod Panda et al.触觉可穿戴设备全身交互与体感输入环境感知与上下文计算DIS
Escapement:一种通过传感器介导的时间抽象进行视频交互原型设计的工具Nicholas等人提出Escapement视频原型设计工具,通过传感器介导的时间抽象概念,支持跨设备、双向远程交互快速原型设计,适用于多设备与远程工作场景。2023MNMolly Jane Nicholas et al.UC Berkeley远程操控与遥呈现(Telepresence)原型设计与用户测试CHI
AdHocProx:使用双超宽带无线电感应移动的、自组网协作设备配置Li 等人提出AdHocProx系统,融合双超宽带无线电和电容握持传感器,以95%准确率识别临时设备配置,实现移动设备自组网协作。2023RLRichard Li et al.University of Washington环境感知与上下文计算普适计算(Ubiquitous Computing)CHI
FlowAR:在线健身视频的不同增强现实可视化如何支持家庭瑜伽练习的流畅体验Jo 等人提出FlowAR系统,将瑜伽视频教程显示为AR覆盖层,解决用户视线移动导致的平衡破坏和动作中断问题,提升家庭练习流畅性。2023HJHye-Young Jo et al.KAISTAR 导航与情境感知健身追踪与运动监测CHI
SpinOcchio:使用动态握持控制器在VR中理解皮肤滑动的触觉视觉一致性Kim等人开发SpinOcchio手持触觉控制器渲染皮肤滑动,通过实验发现视觉线索主导VR中的触觉感知,为逼真VR体验提供新思路2022MKMyung Jin Kim et al.KAIST触觉可穿戴设备脑机接口(BCI)与神经反馈CHI
理解多设备使用模式:物理设备配置和碎片化工作流程Yuan 等人调查97人跨设备使用实践,识别任务划分、设备整合等5种使用模式,揭示分散工作流程的优势与挑战。2022YYYe Yuan et al.Microsoft Research, University of Minnesota远程工作工具与体验分布式团队协作通知与中断管理CHI
AirConstellations:通过多个空间感知骨架实现空中设备组装的跨设备交互Marquardt等人提出AirConstellations系统,支持2-5个7自由度空间感知骨架在空气中自稳定组装,实现多设备灵活布局与上下文敏感的跨设备交互,适用于视频会议和协作办公场景。2021NMNicolai Marquardt et al.抬头显示(HUD)与驾驶辅助系统(ADAS)知识管理与团队意识普适计算(Ubiquitous Computing)UIST
GamesBond:通过握持变形实现物理连接物体的双手动触觉错觉,用于沉浸式VRRyu 等人提出 GamesBond 控制器系统,通过动态手柄变形与虚拟连接显示,无需物理连杆即可在 VR 中创造双手握持单一对象的触觉错觉,显著提升交互沉浸感。2021NRNeung Ryu et al.KAIST车内触觉、声音、多模态反馈形变界面与软机器人材料全身交互与体感输入CHI
SurfaceFleet:探索不受设备、应用、用户和时间限制的分布式交互Brudy等人开发SurfaceFleet系统,采用弹性分布式编程技术实现跨设备应用交互,通过半透明Applets和虚拟化云端数据同步,支持异步履行交互承诺。2020FBFrederik Brudy et al.分布式团队协作知识工作者工具与工作流UIST
数字绘画板的倾斜响应技术Romat 等人探索数字绘画板的倾斜响应技术,根据显示角度动态调整交互模式,实现阅读注释、公共个人空间等场景的自适应转换。2020HRHugo Romat et al.知识工作者工具与工作流通知与中断管理UIST
感知姿势感知的平板电脑笔+触摸交互Zhang 等人提出结合电容屏、惯性运动和电场传感器的姿态感知技术,实现笔+触摸交互对身体和握持姿态的细粒度自适应。2019YZYang Zhang et al.Microsoft Research & Carnegie Mellon University手部手势识别人体姿态与行为识别CHI
DataToon:使用笔+触控交互绘制动态网络漫画Kim 等人开发DataToon数据漫画工具,结合笔和触控交互,支持快速生成可视化面板并定位布局,用户研究证实参与者能快速学会制作数据漫画。2019NKNam Wook Kim et al.Microsoft Research & Harvard University交互式数据可视化数据故事讲述(Data Storytelling)代码创作与计算艺术CHI