使用事件相关电位的预测误差负性在虚拟现实中检测视触不匹配

设计沉浸感是虚拟现实中的关键挑战；这一挑战推动了显示技术、渲染技术以及最近的触觉技术的发展。为了增强我们的物理沉浸感，例如，振动手套可以模拟触摸的感觉，而电肌肉刺激（EMS）可以模拟力的感觉。不幸的是，评估触觉设备有效性的既定指标依赖于用户对不具体但标准化的问题的主观解释。<br>在这里，我们探索了一种新方法，使用脑电图（EEG）来检测视觉-触觉整合中的冲突（例如，基于配置不当的碰撞检测产生的不充分触觉反馈）。我们建议分析与虚拟对象互动时的事件相关电位（ERP）。在我们的研究中，参与者在三种条件下触摸虚拟对象，并分别接受无触觉反馈、振动反馈或振动和EMS反馈。为了在不现实的VR互动中引发大脑反应，我们在25%的试验中提前呈现了反馈。<br>我们发现，ERP的早期负性成分（所谓的预测误差）在不匹配试验中更为明显，表明我们成功地使用我们的技术检测到了触觉冲突。我们的结果是使用ERP自动检测VR中的视觉-触觉不匹配的第一步，这些不匹配可能导致用户的沉浸感丧失。