BrainCoDe: 基于脑电图的阅读和听力理解检测

视频

DOI

外国语言媒体的广泛可用性是语言学习的丰富资源。然而，每当理解出现问题时，学习者被迫中断媒体消费。我们介绍了BrainCoDe，这是一种通过评估事件相关电位（ERPs）来隐式检测词汇缺口的方法。在一个用户研究（N=16）中，我们通过比较已知单词和未知单词在听和读时的ERP振幅差异来评估BrainCoDe。我们发现在阅读时遇到未知单词时N400振幅有显著差异，在听时遇到未知单词时N100振幅有显著差异。为了评估ERP在实时应用中的可行性，我们训练了一个分类器，该分类器在阅读时以87.13%的准确率检测词汇缺口，在听时以82.64%的准确率检测，正确识别出十个单词中的八个为已知或未知。我们展示了BrainCoDe通过即时翻译或生成个性化学习内容来支持媒体学习的潜力。