LemurDx:利用无约束被动传感客观测量儿童多动症,无需家长输入Arakawa 等人开发LemurDx利用智能手表被动传感客观测量儿童多动症,在无需家长额外输入的情况下达到82-85%准确率,为临床诊断提供可解释的风险评分。2023RARIKU ARAKAWA et al.认知障碍与神经多样性(自闭症、ADHD、阅读困难)生物传感器与生理监测UbiComp
IMUPoser:使用手机、手表和耳塞中的IMU进行全身姿态估计Mollyn等人提出IMUPoser系统,利用手机、手表、耳塞等消费设备IMU数据重建全身姿态,10人数据集验证稀疏设备数据下的姿态估计效果。2023VMVimal Mollyn et al.Carnegie Mellon University人体姿态与行为识别生物传感器与生理监测CHI
TriboTouch:用于低延迟触摸屏的微图案表面Shultz 等人提出 TriboTouch 微图案表面技术,通过摩擦引发的声学振动检测滑动速度,将触屏延迟从80毫秒降至28毫秒2022CSCraig Shultz et al.Carnegie Mellon University中空超声波触觉(Mid-air Haptics)振动反馈与皮肤刺激CHI
ControllerPose:使用VR控制器相机进行内向外身体捕捉Ahuja 等人提出 ControllerPose,利用 VR 控制器内置摄像头进行内向外身体捕捉,通过多视图融合和反向动力学控制虚拟化身,支持腿部交互如平衡游戏和足球。2022KAKaran Ahuja et al.Carnegie Mellon University全身交互与体感输入人体姿态与行为识别CHI
TouchPose:从电容图像预测手部姿势、深度估计与触摸分类Ahuja 等人提出 TouchPose 系统,从电容图像重建 3D 手部骨骼、预测深度与触摸分类,构建首个含深度图的大规模电容图像数据集并开发通用交互应用。2021KAKaran Ahuja et al.手部手势识别人体姿态与行为识别UIST
随身姿态:使用智能手机传感器融合和逆运动学近似用户姿态Ahuja等人研发Pose-on-the-Go系统,融合智能手机多传感器与逆运动学实现全身姿态估计,经Vicon系统验证可提升移动交互体验。2021KAKaran Ahuja et al.Carnegie Mellon University全身交互与体感输入人体姿态与行为识别CHI
PrivacyMic:利用不可听频率进行保护隐私的日常活动识别Iravantchi 等人设计 PrivacyMic 设备捕捉不可听频率进行活动识别,准确率超 95 能完全过滤语音内容,实现保护隐私的日常识别。2021YIYasha Iravantchi et al.University of Michigan数据隐私感知与决策物联网设备隐私环境感知与上下文计算CHI
无仪器的眼动追踪的教室数字孪生Ahuja 等人开发基于计算机视觉的3D课堂数字孪生系统,无需仪器即可进行6自由度头部注视估计用于教学分析2021KAKaran Ahuja et al.Carnegie Mellon University眼动追踪与注视交互混合现实工作空间CHI
Vid2Doppler: 从视频中合成多普勒雷达数据以训练保护隐私的活动识别Ahuja 等人提出 Vid2Doppler 软件管道,将活动视频转换为多普勒雷达数据,解决雷达数据集稀缺问题并保护隐私。2021KAKaran Ahuja et al.Carnegie Mellon University人体姿态与行为识别脑机接口(BCI)与神经反馈数据隐私感知与决策CHI
面向智能设备生态系统的直观语音交互之声向估计(DoV)Ahuja等人提出声向估计(DoV)方法,使智能设备能够推断用户语音方向,实现语音命令的可寻址性,提升分布式语音交互的直观性。2020KAKaran Ahuja et al.语音用户界面(VUI)设计环境感知与上下文计算智能家居交互设计UIST
MeCap:用于低成本VR/AR头显的全身数字化技术Ahuja 等人提出 MeCap 系统,仅需低于5美元的半球面镜和手机摄像头,为低成本VR头显提供实时3D身体姿态、手部姿势和面部表情捕捉能力。2019KAKaran Ahuja et al.全身交互与体感输入人体姿态与行为识别AR 导航与情境感知UIST
LightAnchors:利用点光源实现空间锚定增强现实界面Ahuja 等人提出 LightAnchors 系统,利用LED等点光源的高速闪烁编码二进制数据,实现无需硬件改动的iOS设备上AR界面的空间锚定。2019KAKaran Ahuja et al.AR 导航与情境感知环境感知与上下文计算UIST
Ubicoustics:即插即用的声学活动识别Laput 等人提出Ubicoustics声学活动识别系统,利用专业音效库数据增强调整音频模型,使配备麦克风的设备实现与人类相当的实时活动识别准确率。2018GLGierad Laput et al.环境感知与上下文计算普适计算(Ubiquitous Computing)UIST