B3.19.2Diminishing Returns设计研究

发现总数随评估者增加呈递减收益,通常三到五人后增量明显变小

别名: 评估者数量 · 边际发现 · 覆盖率

概念解释

增加评估者通常会增加独特问题数,但边际收益递减:第一到第三人的新增发现往往最多,三到五人后曲线趋缓。评估者数量(number of evaluators)应按风险、阶段和可用资源选择,而不是追求“所有人”。

机制

常见问题更容易被多人重合发现,早期评估者迅速覆盖高显著路径;越往后新增者越多发现长尾、低频或依赖特定经验的问题,同时增加汇总和去重成本。复杂企业界面、跨平台产品或安全关键场景的问题空间大,曲线更晚趋缓。

怎么研究

记录每位评估者加入后新增的独特问题数,绘制累计发现曲线;按严重度分层观察高severity问题何时饱和。比较领域、平台和无障碍背景组合的增量。用增量曲线决定是否继续增加评估者或转为用户测试与日志监测。

边界

“三到五人”不是普适数,取决于界面复杂度、任务广度、清单质量和评估者独立性。若发现集合仍高度不重合,五人也可能不足;若目标只是早期粗查,两三人已够。质量不能只看数量,还要看背景与流程。

怎么落地

  • 早期设计用 2-3 人快速独立走查;发布前或高风险路径用 3-5 人以上并覆盖互补背景。
  • 汇总后绘制新增发现曲线;连续两人新增很少时停止增员,转用真实任务测试。
  • 对未覆盖模块、角色和平台补充专项评估。
  • 记录每人的独特发现和重合度,作为下次评估人数与组成的证据。

延伸

  • 同组B3.19.1 单个评估者只能发现全部问题的一小部分,且个体之间差异很大 · B3.19.3 递减收益的估算假设各评估者独立且发现概率相同,实际条件很少满足 · B3.19.4 评估者之间重合度低说明问题空间大,需要更多人而不是说明评估质量差 · B3.19.5 必须先独立评估再汇总,先讨论会抹掉独立性并使人数效应失真
  • 相邻Q2 可用性评估 · Q4 研究方法与评估
  • 站内检索diminishing returns · evaluator number · coverage curve

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/B3.19.2