EI-Lite:用于微手势识别与捏力估计的电阻抗传感Zhu 等人研发 EI-Lite 腕戴式电阻抗传感设备,实现微手势96.33%识别准确率及捏力0.3071 MSE估计精度,可应用于AR/VR游戏与辅助技术。2025JZJunyi Zhu et al.麻省理工学院振动反馈与皮肤刺激足部与手腕交互UIST
XR 文本输入宝库(TEXT):收集和分析 XR 中的文本输入技术Bhatia 等人创建含176种XR文本输入技术的数据库,分析技术设计趋势与交互属性的影响,开发交互式在线工具 TEXT 促进技术比较。2025ABArpit Bhatia et al.哥本哈根大学VR 中的社交与协作沉浸感与临场感研究CHI
在线-EYE:用于XR的多模态隐式眼动追踪校准HOU 等人提出 Online-EYE 多模态眼动追踪隐式校准方法,利用UI交互和机器学习实现连续后台校准,效果接近显式校准2025BHBaosheng James HOU et al.兰开斯特大学眼动追踪与注视交互沉浸感与临场感研究CHI
XR-Objects:增强物体智能与扩展现实Dogan等人提出增强物体智能(AOI)概念与XR-Objects系统,利用实时对象分割与多模态大语言模型,使现实物体无需预注册即可作为数字功能门户,实现物理与数字环境的无缝交互。2024MDMustafa Doga Dogan et al.奥多比VR 中的社交与协作生成式AI(文本、图像、音乐、视频)环境感知与上下文计算UIST
MobilePoser:移动消费设备中基于IMU的实时全身姿态估计与3D人体位移追踪Xu等人提出MobilePoser系统,利用移动设备内置IMU进行实时全身姿态和全局位移估计,通过多阶段深度神经网络结合物理优化器,在消费级设备上实现精确的3D人体动作捕捉。2024VXVasco Xu et al.芝加哥大学人体姿态与行为识别智能手表与健身手环生物传感器与生理监测UIST
EITPose:用于连续手部姿态估计的可穿戴和实用的电气阻抗断层扫描Kyu等人提出EITPose可穿戴手势估计方法,利用8电极阻抗分布实现连续3D追踪,在22人实验中达11.06mm精度,功耗仅0.3瓦且无摄像头2024AKAlexander Kyu et al.卡内基梅隆大学触觉可穿戴设备手部手势识别足部与手腕交互CHI
LemurDx:利用无约束被动传感客观测量儿童多动症,无需家长输入Arakawa 等人开发LemurDx利用智能手表被动传感客观测量儿童多动症,在无需家长额外输入的情况下达到82-85%准确率,为临床诊断提供可解释的风险评分。2023RARIKU ARAKAWA et al.卡内基梅隆大学认知障碍与神经多样性(自闭症、ADHD、阅读困难)生物传感器与生理监测UbiComp
IMUPoser:使用手机、手表和耳塞中的IMU进行全身姿态估计Mollyn等人提出IMUPoser系统,利用手机、手表、耳塞等消费设备IMU数据重建全身姿态,10人数据集验证稀疏设备数据下的姿态估计效果。2023VMVimal Mollyn et al.卡内基梅隆大学人体姿态与行为识别生物传感器与生理监测CHI
TriboTouch:用于低延迟触摸屏的微图案表面Shultz 等人提出 TriboTouch 微图案表面技术,通过摩擦引发的声学振动检测滑动速度,将触屏延迟从80毫秒降至28毫秒2022CSCraig Shultz et al.卡内基梅隆大学中空超声波触觉(Mid-air Haptics)振动反馈与皮肤刺激CHI
ControllerPose:使用VR控制器相机进行内向外身体捕捉Ahuja 等人提出 ControllerPose,利用 VR 控制器内置摄像头进行内向外身体捕捉,通过多视图融合和反向动力学控制虚拟化身,支持腿部交互如平衡游戏和足球。2022KAKaran Ahuja et al.西北大学全身交互与体感输入人体姿态与行为识别CHI
TouchPose:从电容图像预测手部姿势、深度估计与触摸分类Ahuja 等人提出 TouchPose 系统,从电容图像重建 3D 手部骨骼、预测深度与触摸分类,构建首个含深度图的大规模电容图像数据集并开发通用交互应用。2021KAKaran Ahuja et al.西北大学手部手势识别人体姿态与行为识别UIST
随身姿态:使用智能手机传感器融合和逆运动学近似用户姿态Ahuja等人研发Pose-on-the-Go系统,融合智能手机多传感器与逆运动学实现全身姿态估计,经Vicon系统验证可提升移动交互体验。2021KAKaran Ahuja et al.西北大学全身交互与体感输入人体姿态与行为识别CHI
PrivacyMic:利用不可听频率进行保护隐私的日常活动识别Iravantchi 等人设计 PrivacyMic 设备捕捉不可听频率进行活动识别,准确率超 95 能完全过滤语音内容,实现保护隐私的日常识别。2021YIYasha Iravantchi et al.密歇根大学数据隐私感知与决策物联网设备隐私环境感知与上下文计算CHI
无仪器的眼动追踪的教室数字孪生Ahuja 等人开发基于计算机视觉的3D课堂数字孪生系统,无需仪器即可进行6自由度头部注视估计用于教学分析2021KAKaran Ahuja et al.西北大学眼动追踪与注视交互混合现实工作空间CHI
Vid2Doppler: 从视频中合成多普勒雷达数据以训练保护隐私的活动识别Ahuja 等人提出 Vid2Doppler 软件管道,将活动视频转换为多普勒雷达数据,解决雷达数据集稀缺问题并保护隐私。2021KAKaran Ahuja et al.西北大学人体姿态与行为识别脑机接口(BCI)与神经反馈数据隐私感知与决策CHI
面向智能设备生态系统的直观语音交互之声向估计(DoV)Ahuja等人提出声向估计(DoV)方法,使智能设备能够推断用户语音方向,实现语音命令的可寻址性,提升分布式语音交互的直观性。2020KAKaran Ahuja et al.西北大学语音用户界面(VUI)设计环境感知与上下文计算智能家居交互设计UIST
MeCap:用于低成本VR/AR头显的全身数字化技术Ahuja 等人提出 MeCap 系统,仅需低于5美元的半球面镜和手机摄像头,为低成本VR头显提供实时3D身体姿态、手部姿势和面部表情捕捉能力。2019KAKaran Ahuja et al.西北大学全身交互与体感输入人体姿态与行为识别AR 导航与情境感知UIST
LightAnchors:利用点光源实现空间锚定增强现实界面Ahuja 等人提出 LightAnchors 系统,利用LED等点光源的高速闪烁编码二进制数据,实现无需硬件改动的iOS设备上AR界面的空间锚定。2019KAKaran Ahuja et al.西北大学AR 导航与情境感知环境感知与上下文计算UIST
Ubicoustics:即插即用的声学活动识别Laput 等人提出Ubicoustics声学活动识别系统,利用专业音效库数据增强调整音频模型,使配备麦克风的设备实现与人类相当的实时活动识别准确率。2018GLGierad Laput et al.卡内基梅隆大学环境感知与上下文计算普适计算(Ubiquitous Computing)UIST