ConverSearch:支持专家使用多模态场景搜索工具分析对话视频中的人类行为无摘要信息2026RARiku Arakawa et al.Carnegie Mellon UniversityAI 增强的工作:研究与教育IUI
Evidotes:整合科学证据与逸事以支持同伴健康帖引发的不确定性Bali 等人开发 Evidotes 系统,通过三种用户可选视角整合科学证据与个人逸事,17名慢性病患者研究显示信息满意度从3.2提升至4.6,情感成本从3.4降至1.9。2026SBShreya Bali et al.Carnegie Mellon University身体活动与行为改变技术CHI
HiFiGaze:利用屏幕内容知识提高眼动追踪精度Kim 等人提出 HiFiGaze 方法,利用设备屏幕内容信息分割用户眼中的屏幕反射来提高视线估计精度,平均追踪误差降低约18%。2026TKTaejun Kim et al.Carnegie Mellon University凝视作为输入CHI
CalmReminder:一款基于手表实时运动传感辅助多动症儿童家长参与的设计探究Arakawa 等人设计 CalmReminder 手表系统,通过实时运动传感检测多动症儿童平静时刻并向父母发送即时提示,四周部署研究表明父母将系统灵活应用于表扬、正念和活动规划等多元教养实践。2026RARiku Arakawa et al.Carnegie Mellon University正念、呼吸与生物反馈技术CHI
IMUCoCo:实现人体姿态估计与活动识别中灵活的IMU身体放置Zhou 等人提出 IMUCoCo 框架,将身体表面任意位置IMU信号映射到统一特征空间,实现灵活IMU放置进行姿态估计和活动识别,支持典型和非典型传感器位置。2025HZHaozhe Zhou et al.人体姿态与行为识别UIST
通过演示学习和混合主动对话实现可扩展的情境感知任务助手Arakawa 等人提出 PrISM 框架,通过单次演示学习传感器表示并结合对话式情境适应机制,使日常任务的步骤跟踪准确性提升,减少错误响应,为可扩展的情境感知任务助手提供新方案。2025RARiku Arakawa et al.语音用户界面(VUI)设计环境感知与上下文计算普适计算(Ubiquitous Computing)UIST
UbiLearn:使用智能手表支持英语作为外语学习者回顾对话Arakawa 等人开发 UbiLearn 智能手表系统,通过手势识别支持 EFL 学习者在对话中即时注释,结合语音和 NLP 技术生成个性化学习材料,提升学习满意度。2025RARiku Arakawa et al.智能语音助手(Alexa、Siri 等)协作学习与同伴教学环境感知与上下文计算MobileHCI
PrISM-Observer:帮助用户执行日常程序的智能干预代理Arakawa 等人开发 PrISM-Observer 智能手表干预系统,通过多模态感知实时预测用户行为并在最佳时机主动干预,帮助认知障碍用户完成烹饪等日常任务。2024RARiku Arakawa et al.健身追踪与运动监测老年护理与认知症照护环境感知与上下文计算UIST
教练副驾:大型语言模型驱动的聊天机器人与人类教练的混合形式有效支持领导力成长的自我反思Arakawa 等人提出结合大型语言模型聊天机器人与人类教练的混合辅导系统,通过设计研讨会和用户研究验证其在支持领导力成长自我反思中的可行性与有效性,为人机协作辅导提供新框架。2024RARiku Arakawa et al.对话式聊天机器人大语言模型(LLM)的人机协作CUI
MI-Poser:使用磁性和惯性传感器融合结合金属干扰缓解的人体姿态跟踪Arakawa等人提出MI-Poser系统,利用AR眼镜结合电磁场与IMU传感器融合,在缓解金属干扰的同时实现上半身姿态跟踪,平均关节位置误差仅6.6cm。2023RARiku Arakawa et al.人体姿态与行为识别UbiComp
LemurDx:利用无约束被动传感客观测量儿童多动症,无需家长输入Arakawa 等人开发LemurDx利用智能手表被动传感客观测量儿童多动症,在无需家长额外输入的情况下达到82-85%准确率,为临床诊断提供可解释的风险评分。2023RARIKU ARAKAWA et al.认知障碍与神经多样性(自闭症、ADHD、阅读困难)生物传感器与生理监测UbiComp
PrISM-Tracker:利用可穿戴传感器和状态转换信息进行多模态过程追踪的框架,支持用户驱动的错误和不确定性处理Arakawa 等人提出PrISM-Tracker框架,利用图表示和Viterbi算法增强可穿戴传感器动作识别,并通过用户交互模块处理模型不确定性,在拿铁制作和伤口护理实验中验证了有效性。2023RARiku Arakawa et al.人体姿态与行为识别生物传感器与生理监测UbiComp
uKnit:一种用于手势交互和被动感应的电气阻抗断层扫描的位置感知可重构机器针织可穿戴设备Yu等人研发uKnit可穿戴设备,融合机器针织与电阻抗断层扫描技术,在5类穿戴位置检测达88%/78%准确率,实现手势识别、呼吸监测与坐姿检测功能。2023TYTianhong Catherine Yu et al.Carnegie Mellon University电肌肉刺激(EMS)控制触觉可穿戴设备人体姿态与行为识别CHI
CatAlyst:使用大型生成模型防止任务拖延的领域可扩展干预Arakawa 等人开发 CatAlyst 系统,利用大型生成模型生成工作延续作为上下文感知干预,在写作和幻灯片编辑任务中有效帮助工人恢复任务并降低认知负荷。2023RARiku Arakawa et al.Carnegie Mellon University大语言模型(LLM)的人机协作通知与中断管理职场福祉与工作压力CHI
IMUPoser:使用手机、手表和耳塞中的IMU进行全身姿态估计Mollyn等人提出IMUPoser系统,利用手机、手表、耳塞等消费设备IMU数据重建全身姿态,10人数据集验证稀疏设备数据下的姿态估计效果。2023VMVimal Mollyn et al.Carnegie Mellon University人体姿态与行为识别生物传感器与生理监测CHI
BeParrot:通过重述转录不清晰语音的高效接口Arakawa 等人设计 BeParrot 接口,通过参数调整和发音反馈功能让新手用户无需大量培训即可通过重述技术高效转录不清晰语音,效率提升32.2%。2022RARiku Arakawa et al.智能语音助手(Alexa、Siri 等)对话式聊天机器人IUI
VocabEncounter:通过将计算机生成的外语词汇用法呈现到用户的日常生活中,利用NMT进行词汇学习Arakawa 等人设计 VococabEncounter 系统,利用 NMT 技术将外语词汇实时嵌入用户阅读材料,通过众包验证生成质量,实现日常活动中的词汇学习。2022RARiku Arakawa et al.Carnegie Mellon University生成式AI(文本、图像、音乐、视频)大语言模型(LLM)的人机协作编程教育与计算思维CHI