将众包工作者作为在线学习者的代理进行评估：基于视频学习情境的研究

众包已成为有效扩展以前仅限少数专家任务的方法。因此，大规模在线学习领域的研究人员开始采用众包工人进行大规模、开放在线学习的研究。我们在此报告了一项众包研究（N=135）的结果，以评估众包工人在讲座观看和测验任务（MOOC 中最常用的学习活动）上的行为与 MOOC 学习者的相似程度。这有助于（i）验证先前研究的假设，即众包工人确实是在线学习者的可靠代理，以及（ii）探讨采用众包工人作为在线学习环境测试手段的潜力。总体而言，我们观察到混合结果——在某些情况下（测验表现和视频观看行为），众包工人的行为与 MOOC 学习者相似，而在其他情况下（与视频内测验的交互），他们的行为似乎存在差异。我们得出结论，未来研究如果使用众包工人执行学习任务应谨慎行事，因为两个人群并非在所有学习相关活动上都表现相似。