Q2.12.2Path diagnostics in tree testing设计研究
结果指出标签与层级问题
别名: 路径诊断 · 标签混淆 · 层级错配
概念解释
树测试的路径资料可定位标签混淆与层级错配(label and hierarchy mismatch):参与者在哪一层首次偏离、在何处回退,以及哪些兄弟节点竞争。结果指出问题位置与候选原因,但不能仅凭失败率确定究竟要改标签、移动内容还是允许多入口。
机制
稳定集中到错误节点通常表示该标签提供更强信息气味;多人在上层分散可能表示父类边界含糊;到达正确父类后失败则更可能在下层。相同路径形态仍可能来自任务概念、领域知识或树结构,需要解释性资料区分。
怎么研究
生成首击矩阵、路径流和回退节点,按任务与细分分析。任务后追问当时如何理解两个竞争标签,但避免让解释反向替代路径事实。一次只改标签或层级进行复测,才能判断改变机制。
边界
成功率聚合会隐藏不同错误路径,样本少时单个路径比例不稳定。内容可合理属于多处时,唯一正确答案会制造失败。最终设计若含搜索、推荐或交叉链接,树测试会低估这些补救路径。
怎么落地
- 标记首次偏离和最常见竞争节点。
- 依据路径形态提出标签、层级或多入口三个不同假设。
- 分别改动并复测,避免同时重写整棵树。
- 在完整原型中验证替代入口和搜索是否真正恢复任务。