V9.05.5Per-piece payment induces speed over quality设计研究

按完成数量计酬会诱导快速而低质的作答

别名: 计件报酬 · 速度—质量权衡 · 按量计酬

概念解释

众包平台的主流计酬方式是计件:每完成一条标注、一次判定、一份问卷,支付固定单价。这个结构把「做得对」从报酬函数里拿掉了——收入只随件数增长,质量只通过事后的质控间接追责。对理性参与者,时间固定时的最优策略是压缩单件耗时:略读说明、跳过难例、模式化作答。计件报酬并不必然产生低质量,但它把平台的质控体系与参与者的收入策略放进同一场军备竞赛——质控检测什么,参与者就在什么上达标,其余维度全部让位给速度。

机制

计件结构里,质量是不可计价的副产品。单件报酬固定意味着质量提升的收益归平台,成本(时间)却由参与者承担,收益与成本错位;市场又是流动的——参与者按「时薪期望」在任务间流动,时薪低的任务被抛弃,于是单价事实上为「每分钟产出」定价,而不是为「正确判定」定价。检测概率补上了后半环:质控覆盖不到的部分等于免费丢弃质量,覆盖到的部分(检验题、抽检、一致度)参与者会精确达标——把准确率维持在被淘汰阈值之上的最低水平,是收入最大化下的最优解。三个因素可以调节这条链:单价水平(时薪有底时,压速度的边际收益下降)、检测密度与后果(被抓住的期望成本)、任务的内在动机(有趣的任务部分脱离纯经济计算——但那是动机条目的主题)。注意这条边界的主语是计件结构,不是「参与者懒」:换一套报酬函数,同一个人的行为随之改变。

怎么研究

  • 范式:报酬结构实验——同一任务随机分配计件 / 计时 / 按质计酬 / 混合(计件底薪 + 质量奖金)条件,测量单件耗时、错误率、时薪期望与留存;平台日志的再分析则用单价自然变动(平台调价)作准实验,估计价格弹性对质量的影响。
  • 变量:自变量为报酬结构、单价水平、质控密度与后果强度;因变量为作答速度(单件耗时分布)、输出质量(金标错误率)、参与者留存与任务弃置率。
  • 在界面研究里的用途:任务发布器的报酬设计参数——单价与预期耗时的联动提示、按质阶梯定价的界面表达;质控与报酬的耦合配置(检测到低质时降单价还是降权限)。
  • 方法论注意点:速度与质量的权衡在实验室任务上可能被低估(实验报酬高、任务短);「按质计酬」条件要小心参与者自选择(只有高能力者留下来,质量提升混入了构成变化);耗时数据要区分「熟练加速」与「偷工加速」——前者单耗下降而质量不降,需要金标分型。

边界

计件不是必然低质:质控密度足够高时(检验题密布、每件比对),计件 + 严控也能稳定出合格结果,代价是质控成本转嫁到单价里。高技能创作型任务上计件本身难以定义(「一件」是什么),报酬结构问题退到动机与公平条目去谈。反向也不成立:计时或固定报酬只是削弱速度激励,换来的是动机稀释与拖延(计时上磨洋工),不是质量的免费午餐。质量与报酬的关系还有一段更基础的边界——过低报酬比无报酬更伤参与,那是动机组的条目,这里只处理计件结构下的速度—质量权衡。

怎么落地

  • 定价时公开「预期时薪」而非仅单价:按标定的单件耗时折算时薪,低于市场线的任务先修耗时(改说明、降难度)再谈单价。
  • 质量阶梯计酬:金标准确率分档给不同单价,把「达标」从二值淘汰变成连续价格信号,参与者的最优策略从「压速度」移向「稳质量」。
  • 检测与后果对齐军备竞赛:检验题密度与淘汰阈值定期变动,防止参与者把「达标线」当成固定目标精确贴线。
  • 难例保护:单件耗时超过分位阈值的条目自动补价或转人工通道,避免速度压力集中杀死难例的质量。
  • 验证:监控单件耗时分布的时间趋势——整体左移(越来越快)而金标错误率不动,是「熟练化」;左移且错误率同步爬升,是偷工加速,需要加密检测或调价。

延伸

  • 同组V9.05.1 多人重复同一任务并比对结果是最基础的质控手段 · V9.05.2 冗余次数与成本成正比,需按任务难度分别设定 · V9.05.3 混入已知答案的检验题可持续估计贡献者的准确率 · V9.05.4 多人一致并不保证正确,共同的误解会一致地出错
  • 相邻V9.06 贡献者的动机与报酬 · V9.04.4 单件任务的耗时与弃置
  • 站内检索piece rate · speed-accuracy tradeoff · payment design

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/V9.05.5