为3D对象的直接和间接操作预塑手部行为Mikkelsen 等人研究3D对接任务中的手部预塑行为,发现直接技术引发有效手部姿势,而间接技术虽高效但缺乏感官反馈,需补偿性操作,控制器可扩展运动范围。2026TMThorbjørn Mikkelsen et al.奥胡斯大学手部手势识别全身交互与体感输入3D 建模与动画CHI
设计计算机对身体控制权的重大挑战Mueller 等人通过专家研讨会提出计算机控制人体的四大挑战,涵盖技术、设计、用户与伦理维度,呼吁将身体控制作为人机交互的核心体验与伦理问题加以研究。2026FMFlorian Floyd Mueller et al.莫纳什大学电肌肉刺激(EMS)控制脑机接口(BCI)与神经反馈同理心与情感设计CHI
ForcePinch:用于 XR 中追踪速度控制的力响应式空间交互方法Zhang 等人提出 ForcePinch 力响应式交互方法,通过改变捏合力度调节指针追踪速度,实现 1D/2D/3D 任务中快速与精确移动的平滑切换。2025CZChenyang Zhang et al.佐治亚理工学院车内触觉、声音、多模态反馈力反馈与伪重力感沉浸感与临场感研究UIST
HandOver:实现鼠标与手部追踪结合的 3D 对象精确选择与操作Tütüncü 等人提出 HandOver XR 交互技术,融合鼠标精确瞄准与手部追踪操作,在 3D 对接任务中降低错误率并改善用户舒适度,实现输入模态优势互补。2025ETEsen K. Tütüncü et al.巴塞罗那大学手部手势识别全身交互与体感输入混合现实工作空间UIST
Reality Proxy:通过抽象表示实现MR中真实物体的流体交互Liu 等人提出 Reality Proxy 系统,通过AI增强的虚拟代理抽象表示物理实体,实现MR中浏览、属性过滤、嵌套导航等新型交互,突破物理约束限制。2025XLXiaoan Liu et al.纽约大学混合现实工作空间生成式AI(文本、图像、音乐、视频)大语言模型(LLM)的人机协作UIST
RestfulRaycast:探索人体工程学绑定与关节放大以实现XR中精确的手射线选择Mao 等人提出JAR关节放大射线投射技术,通过组合手臂多关节方向减少XR交互中的手臂疲劳,同时保持较高选择精度与吞吐量。2025HMHongyu Mao et al.谷歌手部手势识别全身交互与体感输入DIS
XR 文本输入宝库(TEXT):收集和分析 XR 中的文本输入技术Bhatia 等人创建含176种XR文本输入技术的数据库,分析技术设计趋势与交互属性的影响,开发交互式在线工具 TEXT 促进技术比较。2025ABArpit Bhatia et al.哥本哈根大学VR 中的社交与协作沉浸感与临场感研究CHI
在线-EYE:用于XR的多模态隐式眼动追踪校准HOU 等人提出 Online-EYE 多模态眼动追踪隐式校准方法,利用UI交互和机器学习实现连续后台校准,效果接近显式校准2025BHBaosheng James HOU et al.兰开斯特大学眼动追踪与注视交互沉浸感与临场感研究CHI
PinchCatcher:启用凝视+捏合的多选功能Kim 等人提出PinchCatcher多选系统,对比四种确认方法,证明SemiSwipe和SemiDwell可有效降低XR环境下多选任务完成时间和错误率。2025JKJinwook Kim et al.韩国科学技术院手部手势识别眼动追踪与注视交互混合现实工作空间CHI
Hands-on, Hands-off: 注视辅助双手3D交互Lystbæk 等人提出注视辅助双手3D交互模式,通过Gaze+Pinch实现非惯用手、惯用手或双手的间接控制,使3D建模操作更灵活低 effort。2024MLMathias N. Lystbæk et al.奥胡斯大学手部手势识别眼动追踪与注视交互混合现实工作空间UIST
XR-Objects:增强物体智能与扩展现实Dogan等人提出增强物体智能(AOI)概念与XR-Objects系统,利用实时对象分割与多模态大语言模型,使现实物体无需预注册即可作为数字功能门户,实现物理与数字环境的无缝交互。2024MDMustafa Doga Dogan et al.奥多比VR 中的社交与协作生成式AI(文本、图像、音乐、视频)环境感知与上下文计算UIST