GamesBond:通过握持变形实现物理连接物体的双手动触觉错觉,用于沉浸式VR
荣誉提名作者
文献标题
GamesBond: Bimanual Haptic Illusion of Physically Connected Objects for Immersive VR Using Grip Deformation
文献信息
- 主题领域: 虚拟现实互动技术,双手触觉控制器开发
- 关键词: 虚拟现实, 双手互动, 触觉反馈, 形状变形, 游戏沉浸感
研究背景与问题
-
发现的问题或挑战: 虚拟现实(VR)中的触觉控制器通常关注单手互动或机械锁定双手控制器。但是,机械锁定的控制器难以快速模拟动态物体,且对于自由移动支持有限。另外,现有技术难以让两手之间的触觉互动有动态的逼真效果,例如模拟跳绳或柔性物体。
-
重要性: 提升VR互动中的触觉真实感和沉浸感可以显著增强用户体验。开发能够动态变化且具有双手触觉反馈的设备是设计下一代VR控制器的重要途径。
-
研究动机与相关工作: 作者们受到此前有关双手触觉控制器以及形状改变控制器的研究启发,例如SPR1NG(利用弹簧模拟柔性物体)和Haptic Links(通过机械连接生成触觉约束)。此外,相关工作探讨了通过驱动控制器内部的形状变形来模拟不同的触觉效果,比如动态惯量和模拟对象运动。然而,这些研究中的设备要么未完全专注于双手互动,要么在动态物体模拟上存在局限。
解决方案
-
提出的解决方案: 作者提出了一款名为GamesBond的双手4自由度(4-DoF)控制器,使用握持处的变形技术来模拟两手间被连接的虚拟物体。这种设备通过改变控制器的弯曲、旋转和伸缩等变形,创造触觉幻觉。
-
创新之处:
- 无物理连接:控制器之间没有机械锁定,但仍可生成物理连接的触觉幻觉。
- 动态渲染:使用实时计算和反馈来支持动态物体,如跳绳。
- 双手互动:利用控制器变形产生的皮肤运动差异,增强双手协调感。
-
实施步骤与关键技术:
- 机械设计:
- 控制器分为两个段:顶段可以弯曲、扭转和伸缩。
- 使用内置伺服电机通过拉索驱动弯曲,并通过旋转与推拉机制实现扭转与伸缩。
- 软件实现:
- 通过Unity3D实时计算控制器的位置和变形,并以200Hz的刷新率进行渲染。
- 使用虚拟绑定物体的三种模拟(刚性、柔性、动态)展示不同效果。
- 用户体验优化:
- 将视觉反馈与物理反馈结合,用户通过VR头显和触觉变形产生沉浸感。
- 机械设计:
研究成果
-
具体成果:
- 技术评估:
- 控制器在位置准确度方面表现良好,弯曲误差平均为0.31°,伸缩误差平均为0.08mm。
- 控制器的响应时间在300ms以内,并能承受较大的用户握持力。
- 用户评估:
- 12名参与者测试表明,带有触觉反馈的VR体验在真实性、沉浸感和娱乐性三方面均显著优于仅视觉反馈。
- 用户对设备能够模拟刚性、柔性和动态物体的触觉效果表示认可,但指出设备在弯曲范围、扭转速度等方面的改进空间。
- 技术评估:
-
优势: 与现有双手触觉装置相比,GamesBond设备无需物理连接,同时支持动态物体模拟,如跳绳。这种技术对于复杂VR对象的触觉渲染具有较强的潜力。
-
实验或评估结果:
- 用户认为柔性和动态物体的渲染效果最佳,尤其是在体验动态绳索或实时触觉约束的场景中。
- 用户对设备的变形机制给予好评,但认为部分视觉与机械效果可能仍需优化。
-
局限性与未来方向:
- 设备结构问题:弯曲范围有限且存在皮肤夹捏可能性。此外,马达功率限制了动态渲染的频率。
- 设计建议:未来迭代包括多弯曲节点、更强大的马达、更紧密的控制器结构,以及更高刷新率的软件反馈机制。
- 应用扩展:探索更多应用场景,如运动模拟、远程操作或协作互动。
结束语
GamesBond为VR技术中的双手互动设计提供了新方向,通过结合视觉与触觉反馈的方式增强用户体验。未来工作可以进一步优化其硬件设计并拓展应用领域,从而推动触觉控制器向更具沉浸感和适应性发展。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
研究问题
3- 双手交互中,如何在没有机械锁定的情况下实现物理连接的触觉幻象?分类: 视触觉感知、错觉与控制-显示映射同类问题arrow_forward
- 使用握持变形技术,能否动态地模拟跳绳和其他灵活物体的触觉效果?分类: 视触觉感知、错觉与控制-显示映射同类问题arrow_forward
- 在VR环境中,结合视觉和触觉反馈能否显著提升沉浸感和交互体验?分类: 视触觉感知、错觉与控制-显示映射同类问题arrow_forward
现实痛点
1- 现有VR触觉控制器难以真实模拟灵活动态物体。分类: 视触觉感知、错觉与控制-显示映射同类问题arrow_forward
- 67%
iTurk: 通过让用户在虚拟现实中重新配置道具将被动触觉转变为 active haptics
CHI '18· 形变界面与软机器人材料 +1
- 67%
HapTwist:使用低成本可扭曲艺术品在虚拟现实中创建交互式触觉代理
CHI '19· 车内触觉、声音、多模态反馈 +1
- 67%
Elevate:用于大型可变形地形的可行走针阵
CHI '21· 形变界面与软机器人材料 +1
- 67%
操纵额外肢体:在虚拟现实中识别多余多臂的控制策略
CHI '25· 形变界面与软机器人材料 +1
- 67%
TilePoP:用于虚拟现实的瓦片式弹出道具
UIST '19· 形变界面与软机器人材料 +1
- 67%
VR中调整抓取大小:物体辨别阈值的估计
UIST '19· 车内触觉、声音、多模态反馈 +1
- 67%
无需手部装备的增强VR沉浸感的重定向自触觉技术
UIST '21· 形变界面与软机器人材料 +1
- 67%
StringTouch:使用绳索结构调制手指触觉的非遮挡式三自由度触觉界面
UIST '25· 形变界面与软机器人材料 +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)