B3.19.2Diminishing Returns设计研究
发现总数随评估者增加呈递减收益,通常三到五人后增量明显变小
别名: 评估者数量 · 边际发现 · 覆盖率
概念解释
增加评估者通常会增加独特问题数,但边际收益递减:第一到第三人的新增发现往往最多,三到五人后曲线趋缓。评估者数量(number of evaluators)应按风险、阶段和可用资源选择,而不是追求“所有人”。
机制
常见问题更容易被多人重合发现,早期评估者迅速覆盖高显著路径;越往后新增者越多发现长尾、低频或依赖特定经验的问题,同时增加汇总和去重成本。复杂企业界面、跨平台产品或安全关键场景的问题空间大,曲线更晚趋缓。
怎么研究
记录每位评估者加入后新增的独特问题数,绘制累计发现曲线;按严重度分层观察高severity问题何时饱和。比较领域、平台和无障碍背景组合的增量。用增量曲线决定是否继续增加评估者或转为用户测试与日志监测。
边界
“三到五人”不是普适数,取决于界面复杂度、任务广度、清单质量和评估者独立性。若发现集合仍高度不重合,五人也可能不足;若目标只是早期粗查,两三人已够。质量不能只看数量,还要看背景与流程。
怎么落地
- 早期设计用 2-3 人快速独立走查;发布前或高风险路径用 3-5 人以上并覆盖互补背景。
- 汇总后绘制新增发现曲线;连续两人新增很少时停止增员,转用真实任务测试。
- 对未覆盖模块、角色和平台补充专项评估。
- 记录每人的独特发现和重合度,作为下次评估人数与组成的证据。