FingerMapper:将手指动作映射到虚拟手臂上,以在受限空间中实现安全的虚拟现实交互
手部手势识别全身交互与体感输入
文献标题
FingerMapper: Mapping Finger Motions onto Virtual Arms to Enable Safe Virtual Reality Interaction in Confined Spaces
文献信息
- 主题领域: 虚拟现实与人机交互
- 关键词: FingerMapper, VR交互, 虚拟现实, 约束空间, 身体重映射
- 发表时间及会议: 2023年4月,CHI ’23会议
研究背景与问题
- 发现的问题或挑战: 当前的虚拟现实(VR)交互通常需要全身动作以增强沉浸感,但在受限空间(如公共交通工具内)中进行全身动作显得不切实际,可能导致身体疲劳以及与周围环境发生碰撞。
- 问题的重要性: VR设备越来越移动化(例如Oculus Quest),能够在更多环境中使用,但需要解决在有限空间中对运动空间的限制和用户体验的安全问题。
- 研究动机与相关工作: 尽管已有研究探索如何减少身体疲劳或路径长度,但这些技术常需较大的实际空间,无法适应受限空间的场景。同时,“超现实”交互概念提出了将用户运动映射到虚拟世界更大动作的可能性。
解决方案
- 提出的方法或解决方案: 作者设计了FingerMapper,一种将小尺度的手指运动映射到虚拟手臂和虚拟手上,以支持在受限空间中的VR互动。
- 创新点:
- 将手指动作映射为虚拟大动作,使得用户在有限空间中能通过小动作完成模拟的全身互动。
- 两种映射方法——Attach和Direct,分别基于手指位置投影映射和身体重新关联概念。
- 引入空间扩展技术,动态调整虚拟手臂长度以增强用户控制感。
- 针对不同交互场景提供了三个应用示例(FingerGrabber, FingerSaber, FingerClimber)。
- 实施步骤与关键技术:
- 设计两种映射方法:Attach通过手指延伸投影计算路径;Direct根据关节姿态重新关联动作。
- 融合Go-Go Technique,用于增强手臂运动的空间扩展。
- 提供适配于Oculus Quest系统的手部追踪,实现FingerMapper实时响应。
研究成果
- 具体成果:
- 实验表明FingerMapper能够有效减少物理运动和用户身体疲劳,同时保持相似程度的精确度。
- 在受限空间(如汽车座椅)测试中,FingerMapper显著减少了用户与环境碰撞的次数,用户的安全感显著提升。
- Three示例应用展示了FingerMapper在不同交互场景中的可用性。
- 优势:
- 与手部追踪相比,FingerMapper减少了运动量和碰撞,同时对用户安全感有积极影响。
- 虽然与射线投影相比任务时间略长,但FingerMapper支持更好的物体操控功能和自体拥有感。
- 实验或评估结果:
- Study 1: 在目标选择任务中,FingerMapper显著减少物理空间互动(约为手部追踪的67.8%),同时保持较高的用户沉浸感和存在感。
- Study 2: 在汽车乘客座椅环境中测试表明,FingerMapper显著减少了碰撞,同时用户对其安全性和偏爱度更高。
- 局限性与未来方向:
- 映射引入的虚拟手臂位移导致较低的自体拥有感(VBO),未来可以通过增加触觉反馈来改善。
- 当前研究集中于受控实验环境,未来可扩展至公共场所进行社交影响和适用性研究。
- 当前的映射主要支持基础功能,未来可探索对复杂动作的映射优化。
总结
FingerMapper提供了一种创新的方式,将小范围手指运动映射到虚拟手臂以应对受限空间中全身运动的难题,显著提高了用户的安全感和使用体验,同时降低了身体疲劳。该技术适合于需要进行虚拟互动的受限空间场景,具有广泛的实际应用潜力。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 在虚拟现实中,将小范围的手指运动映射到虚拟手臂上如何影响用户的互动体验和安全性?分类: XR具身交互与身体映射同类问题arrow_forward
- FingerMapper系统在不同狭小空间场景中能否有效减少身体碰撞和用户疲劳?分类: XR具身交互与身体映射同类问题arrow_forward
- 有哪些手指映射方法能动态增强虚拟手臂的控制和空间延伸能力?分类: XR具身交互与身体映射同类问题arrow_forward
lightbulb
现实痛点
1- 用户在狭小空间中使用VR设备时容易因全身运动发生碰撞或疲劳。分类: XR具身交互与身体映射同类问题arrow_forward
- 100%
运动相关性:通过匹配其运动来选择对象
CHI '18· 手部手势识别 +1
- 100%
为桌面多尺度导航设计一致的手势集
CHI '18· 手部手势识别 +1
- 100%
方向对单笔触触摸手势的影响
CHI '19· 手部手势识别 +1
- 100%
成人和儿童与交互式球面显示器进行手势交互的心理模型
CHI '20· 手部手势识别 +1
- 100%
瞄准空中运动的动力学
CHI '20· 手部手势识别 +1
- 100%
情感具象化:揭示单手手势的表达潜力
CHI '24· 手部手势识别 +1
- 100%
STMG:一种支持基于拇指的VR/AR输入的机器学习微手势识别系统
CHI '24· 手部手势识别 +1
- 100%
T2IRay:基于拇指到食指的间接指向设计,用于连续和稳健的AR/VR输入
CHI '25· 手部手势识别 +1
- 100%
BodyTouch:研究 HMD 的眼触、无需视觉的本体触觉和近身触觉交互
UbiComp '24· 手部手势识别 +1
- 100%
使用精密握持姿势变化的单手笔+触摸输入
UIST '18· 手部手势识别 +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3544548.3580736
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2023
emoji_events
奖项
未标记奖项
group
作者
4 位作者
sell
研究子方向
手部手势识别、全身交互与体感输入
work
职业/产业
—
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文