结合脑机接口与眼动追踪的虚拟现实高速文本输入系统

视线交互为头戴式显示器呈现的虚拟现实中的用户提供了一种高效的通信和控制方式。在基于视线的文本输入系统中，眼动追踪和脑机接口（BCI）是两种最常用的方法。本文提出了一种结合稳态视觉诱发电位（SSVEP）和眼动追踪的混合BCI系统用于虚拟现实中的文本输入。VR用户界面使用联合频相调制方法设计了40目标的虚拟键盘。VR头显中的眼动追踪配件用于测量眼睛位置。通过同时记录的SSVEP和眼睛位置数据检测目标相关的视线方向。离线和在线实验表明，所提出的系统可以实现约10词/分钟的信息传输速度，信息传输率（ITR）达到270比特/分钟。结果进一步证明了混合方法相对于单一模态方法在VR应用中的优越性。