TelePulse：通过基于生物力学模拟的电肌肉刺激增强虚拟现实中的遥操作体验

研究背景与问题

• 作者发现了哪些问题或挑战？

  1. 当前的远程操控（teleoperation）技术面临用户与远程机器人之间的交互不足问题，尤其是在虚拟现实（VR）中实现力反馈时。
  2. 地面式机械设备提供了可靠的力反馈，但笨重、昂贵且局限于固定位置，限制了用户的移动性和灵活性。
  3. 可穿戴设备（例如，通过振动马达和电刺激实现的触觉反馈）虽然更灵活，但无法提供真实感的三维力反馈。
  4. 电肌刺激（EMS）尽管具备轻量化和低功耗优势，但在复杂的动态环境中无法精确模拟人体多肌肉协同作用。

• 为什么这个问题很重要？

  1. 远程操控技术被广泛应用于外科手术、空间探索和灾害救援等重要领域，提升用户体验及任务完成效率对于这些场景至关重要。
  2. 提供更自然、更准确的触觉反馈有助于减小用户的学习负担，减少操作误差，提高操控任务的成功率。

• 研究动机与相关工作

  1. 现有研究主要集中于地面式力反馈设备和可穿戴振动反馈设备，无法同时提供高质量的力反馈和用户自由度。
  2. 科学技术进步使得利用生物力学模拟结合EMS来解决上述问题成为可能。

解决方案

• 作者提出了哪些方法或解决方案？ TelePulse 是一个结合生物力学模拟和电肌刺激（EMS）技术的新型远程操控系统，旨在为用户提供逼真的触觉反馈。

• 该解决方案的创新之处：

  1. 通过生物力学模拟动态生成基于用户姿态和力数据的关节扭矩估算，从而指导EMS提供个性化的肌肉刺激。
  2. 将生物力学仿真与实时VR环境相结合，以增强远程操控带来的沉浸式用户体验。
  3. 系统采用轻便的EMS设备，实现了高效能和便携性之间的平衡。

• 实施步骤：

  1. 运动捕捉：使用Meta Quest 3设备记录用户的实时运动姿态。
  2. 生物力学模拟：基于用户的几何特性（如身高、体重、关节长度）校正和构建其虚拟骨骼模型。
  3. 关节力计算：使用力-扭矩传感器收集的实时力数据，并通过两种逆动力学模型计算目标扭矩。
  4. EMS刺激个性化：根据肌肉的力-强度关系曲线动态调整刺激强度和刺激位置。
  5. 实时通信：将计算结果通过Wi-Fi传输至EMS硬件，并实时提供肌肉刺激以产生触觉反馈。

• 使用了哪些关键技术？

  1. 生物力学仿真平台OpenSim，用于建模用户的肌肉和关节动态。
  2. 应用四元数进行坐标系转换，确保远程机器和用户之间的力反馈方向一致。
  3. 电肌刺激设备的动态调节，通过数字电位器精确控制输出信号。

研究成果

• 取得了哪些具体成果？

  1. TelePulse 系统在肌肉激活的准确度上显著超过无生物力学模拟的传统EMS（NonBioSim）方法。
  2. 在实验任务中，用户表现出显著更高的任务完成精度和用户存在感。
  3. 连续力任务（如打磨任务）中平均绝对误差（MAE）减少了22%，冲击力任务（如钻孔任务）的准确率提高了30%。

• 与现有解决方案相比，它有哪些优势？

  1. 与仅提供振动触觉反馈的设备相比，TelePulse 提供更丰富的力反馈信息，包括力的方向和强度。
  2. 与传统的线性比例EMS刺激方案相比，TelePulse 的生物力学模拟避免了不必要的肌肉刺激，提高了操作的实际感和舒适性。

• 实验或评估结果是什么？

  1. 在E1 (力导向任务)实验中，TelePulse生成的EMS信号与用户的肌电图（EMG）数据的相似度显著高于非模拟方法。
  2. 在E2实验中，TelePulse系统提升了用户在虚拟任务中的表现，并在连续力和冲击力任务中表现出一致的高精准度。

• 局限性与未来方向：

  1. 人体肌肉建模复杂，现阶段TelePulse仅限于模拟手臂的6种肌肉，未来可扩展至包括肩部和手部肌肉的更复杂系统。
  2. 系统个性化调试耗时较长（约1小时），未来可通过改进计算模型和优化算法缩短调试时间。
  3. EMS 的轻微刺痛感仍然存在，未来可探索磁力肌肉刺激等替代技术来改善用户体验。
  4. 进一步验证与其他可穿戴设备（如振动马达和皮肤拉伸装置）间的对比性能。

通过实际应用和深入实验，TelePulse展现出在复杂远程操控任务中对用户刺激反馈的潜能。可以预见未来其在机器人操控、沉浸式虚拟现实及工业操作场景中的广泛应用。