探索多个调查小组中响应的质量、效率和代表性

视频

DOI

在HCI研究中，一种常见的做法是进行调查以了解从小规模定性研究中得出的发现的普遍性。这些调查通常部署在方便样本上，使用低成本平台，如Amazon的Mechanical Turk或Survey Monkey，或者使用各种高端公司提供的更昂贵的市场研究小组。成本可能有很大差异，具体取决于使用的平台，从几百美元到几万美元不等。我们着手了解十个不同的调查平台/小组相对于6,007名受访者的60个不同方面的人口统计和行为问题的地面真实数据的准确性。我们发现，在某些主题上，有几个小组的表现明显优于其他小组，而不同的小组提供了更长且更相关的开放式回答。基于这些数据，我们强调了使用各种调查分发选项在受访者质量和代表性以及可以获取的回答类型方面的优缺点。