听觉化身对话代理:空间化和情境音频提示对存在感和社交感知的影响Cheng 等人发现空间化语音和情境 Foley 音频可增强对话代理的共同存在感,但会降低用户对代理注意力和社交属性的感知。2026YCYi Fei Cheng et al.Carnegie Mellon University可穿戴、音频与新型交互设备CHI
模拟人类视听搜索行为Cho 等人提出 Sensonaut 计算模型,将视听搜索建模为资源理性决策问题,验证表明该模型能复现人类搜索时间和努力的自适应缩放及典型错误,为降低视听界面搜索成本提供指导。2026HCHyunsung Cho et al.Aalto University优化交互系统CHI
一具身体,两颗心灵:远程超能力肢体遥操作中的VR视角切换Zhou 等人提出VR遥操作中三种视角切换方案:离体视角提升导航效率减少错误,嵌入式锚定视角支持具身感,为超能力机械肢操作提供视角选择指南。2026HZHongyu Zhou et al.The University of Sydney人机交互(机器人)CHI
在环境信息环境中感知显眼性Cheng 等人通过传感器融合视线与参与度数据推断 AR 通知的显眼性,分类准确率达 AUC = 0.81,表明环境感知可自动检测用户注意力2025YCTingyu Cheng et al.Carnegie Mellon University, Human-Computer Interaction InstituteAR 导航与情境感知环境感知与上下文计算CHI
MiniMates:适用于有限物理空间中的AR远程会议的微型头像Kiuchi等人提出MiniMates微型头像方案,用于有限物理空间AR远程会议,经24人验证可提升共在感并支持多对话管理。2025AKAkihiro Kiuchi et al.The University of TokyoVR 中的社交与协作混合现实工作空间环境感知与上下文计算CHI
持久助手:通过意图定位和多模态反馈实现无缝日常AI交互Cho等人提出基于情境意图指定、具身输入与多模态反馈的持久助手框架,结合眼动追踪、捏合手势和触觉反馈实现无缝日常AI交互。2025HCHyunsung Cho et al.Meta Inc., Reality Labs Research; Carnegie Mellon University, Human-Computer Interaction Institute车内触觉、声音、多模态反馈语音用户界面(VUI)设计智能语音助手(Alexa、Siri 等)CHI
面向音乐感知的虚拟助手Wang 等人提出音乐感知虚拟助手,将语音通知修改为与用户音乐和声演唱的形式,在用户研究中验证其能降低侵入性并提升聆听体验。2024AWAlexander Wang et al.语音用户界面(VUI)设计智能语音助手(Alexa、Siri 等)音乐创作与声音设计工具UIST
Auptimize:扩展现实中空间音频提示的优化放置Cho 等人提出Auptimize方法,利用口技效应将声源与视觉元素解耦并重新放置,减少XR环境中空间音频的定位错误和前后混淆问题。2024HCHyunsung Cho et al.VR 中的社交与协作沉浸感与临场感研究UIST
SonoHaptics:基于注视的XR对象选择的音频触觉光标Cho 等人提出SonoHaptics音频触觉光标,通过跨模态映射将对象视觉特征转为声音触觉反馈,实现无显示智能眼镜环境下的准确对象选择。2024HCHyunsung Cho et al.中空超声波触觉(Mid-air Haptics)眼动追踪与注视交互VR 中的社交与协作UIST
预测虚拟现实中动态虚拟元素的显眼程度Li等人提出基于LSTM的VR虚拟元素注意度预测方法,通过视觉显著性分布分析在2.56秒内预测用户注意变化,助力自适应界面设计。2024ZLZhipeng Li et al.Carnegie Mellon University, Department of Computer Science and Technology, Tsinghua University沉浸感与临场感研究大语言模型(LLM)的人机协作CHI
MineXR: 挖掘个性化的扩展现实界面Cho等人提出MineXR设计挖掘平台,通过智能手机截图创建XR界面元素,从31名参与者收集178个应用程序的695个XR小部件,为XR界面设计提供个性化数据支持。2024HCHyunsung Cho et al.Carnegie Mellon University混合现实工作空间沉浸感与临场感研究交互式数据可视化CHI
MARingBA:音乐自适应铃声用于混合音频通知投递Wang 等人提出 MARingBA 音乐自适应铃声方法,通过节奏、音调匹配和音色修改将铃声融入背景音乐,支持低中高紧急程度音频通知创作。2024AWAlexander Wang et al.Carnegie Mellon University创意协作与反馈系统通知与中断管理CHI
RealityReplay:利用混合现实原地检测和回放时间变化Cho 等人提出 RealityReplay 混合现实系统,结合语义分割和显著性预测跟踪运动事件,通过原地可视化帮助用户回顾错过的时序变化。2023HCHyunsung Cho et al.AR 导航与情境感知混合现实工作空间沉浸感与临场感研究UbiComp
参数化触觉:基于几何的多功能触觉反馈设备Han 等人提出参数化触觉方法,将驱动机制与触觉几何集成到可 3D 打印的模块化贴片中,实现可定制多功能触觉反馈设备。2023VHViolet Yinuo Han et al.触觉可穿戴设备形变界面与软机器人材料UIST
HandAvatar:通过手部实现非人形虚拟化身Jiang 等人提出 HandAvatar,通过共同优化控制精度、结构相似性和舒适度自动生成手到非人形虚拟形象映射,实现更精准控制与更低体力消耗。2023YJYu Jiang et al.Tsinghua University手部手势识别混合现实工作空间XR 中的身份认同与化身(Avatar)CHI
走向理解降维现实Cheng 等人通过两项研究比较降损现实与中介现实效果,制定创建通用降损现实环境的指南,提升用户在相关场景的体验舒适度2022YCYifei Cheng et al.Swarthmore College混合现实工作空间沉浸感与临场感研究环境感知与上下文计算CHI
SemanticAdapt:利用虚实语义连接的混合现实布局优化适配Cheng等人提出SemanticAdapt方法,将MR布局适配问题形式化为组合优化,利用虚实语义关联和任务效用等因素自动放置虚拟界面元素,将手动适配次数减少33%。2021YCYifei Cheng et al.AR 导航与情境感知混合现实工作空间环境感知与上下文计算UIST