交接失棒？理解众包意义建构管道中的错误与瓶颈

众包意义建构已显示出巨大潜力，能够对复杂数据集进行可扩展的分析，从规划行程到设计产品再到破案。然而，由于工作者错误和瓶颈会损害输出质量，大多数众包意义建构方法仍需要专家干预。减轻这些错误和瓶颈将显著减轻专家的负担，但人们对于众包者在意义建构微任务中会犯什么类型的错误以及这些错误如何在意义建构循环中传播知之甚少。本文使用众包意义建构管道解决虚构恐怖主义阴谋进行了系列研究，共有325名众包工作者参与，重点关注错误和瓶颈发生的原因及如何传播。我们对众包错误类型进行了分类，并展示了输入数据的数量和质量如何影响工作者绩效。最后，我们为整合众包系统提出设计建议，并推测管道自上而下路径如何能完善众包分析。