B3.19.4Overlap Interpretation设计

评估者之间重合度低说明问题空间大,需要更多人而不是说明评估质量差

别名: 低重合度 · 问题空间 · 评估覆盖

概念解释

低重合度本身不是失败信号。它可能表示界面问题分散在多个模块、角色和输入条件,或评估者背景互补,各自看到不同层面。解释重合度(overlap interpretation)时要区分互补发现、误报和任务覆盖差异。

机制

重合度高常见于显著、高频或表浅问题;重合度低可能来自长尾问题、领域专属规则、异步状态和跨页路径。若每人发现都真实且独特,说明当前人数还不足以覆盖问题空间。盲目要求大家“找到相同问题”会鼓励寻找显眼缺陷,忽略重要但隐蔽的故障。

边界

低重合也可能是评估者未按剧本、理解清单不同或报告了偏好而非缺陷。必须先验证事实与严重度,再解释重合。某些安全关键系统需要高重合确认同一缺陷,而不是接受低重合作为复杂性的证据。

怎么落地

  • 汇总会议先验证每个独特发现的证据,再判断互补、重复或误报。
  • 绘制评估者-问题矩阵,找出只有特定背景者覆盖的模块与类别。
  • 低重合且发现真实时,增加对应领域、平台或无障碍评估者。
  • 报告低重合原因:问题空间大、剧本不同、清单歧义或训练不足。

延伸

  • 同组B3.19.1 单个评估者只能发现全部问题的一小部分,且个体之间差异很大 · B3.19.2 发现总数随评估者增加呈递减收益,通常三到五人后增量明显变小 · B3.19.3 递减收益的估算假设各评估者独立且发现概率相同,实际条件很少满足 · B3.19.5 必须先独立评估再汇总,先讨论会抹掉独立性并使人数效应失真
  • 相邻Q2 可用性评估 · Q4 研究方法与评估
  • 站内检索overlap analysis · problem space · coverage gap

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/B3.19.4