Q2.09.2Evaluator effect in heuristic inspection设计研究
单个评估者只能发现少部分问题
别名: 评估者效应 · 个体覆盖 · 检查者差异
概念解释
评估者效应(evaluator effect)指不同检查者在同一界面发现和判定的问题集合差异很大。单人通常只覆盖可发现问题的一部分,但“少部分”没有固定比例;覆盖受专业、任务路径、时间、启发式理解和问题定义影响。
机制
界面状态空间远大于一次检查路径,注意又被熟悉领域吸引。专家可能看见原则违背却忽略新手语言,领域人员理解后果却自然化惯例。更多同质评估者重复同一盲区,背景互补比单纯增加人数更关键。
怎么研究
构建评估者×问题矩阵,检查独特发现、重叠、严重度分歧和新增曲线。随机化起始路径或分配覆盖范围,避免结果只反映导航顺序。与真实任务资料对照时,将未被用户触发和真正误报分开。
边界
单人评估可用于快速早期筛查,不等于无价值。问题总数多不代表能力强,拆分同一根因会虚增数量。多评估者仍不能证明完整覆盖,尤其对罕见状态和长期行为。
怎么落地
- 按领域、无障碍与新手视角选择互补评估者。
- 明确任务和状态覆盖,避免所有人走同一路径。
- 合并时检查独特高后果问题,不只看重叠数量。
- 把剩余盲区交给用户测试、日志或专项风险检查。