Q2.12.3Task wording leakage in tree testing设计研究
任务措辞不得直接使用导航标签
别名: 任务措辞泄露 · 关键词匹配 · 导航标签提示
概念解释
树测试中的任务措辞泄露(task wording leakage)发生在任务直接复述目标导航标签,使参与者通过词面匹配而非理解结构找到答案。任务应描述现实目标、触发情境和所需结果;“不得直接使用”针对不自然泄露,不要求删除用户现实中本来就会看到的关键术语。
机制
相同词根提供强信息气味,夸大直接成功并隐藏标签是否符合用户语言。反过来,为避词而使用生僻同义词也会人为增加难度。测试需要在真实任务语言与不提示答案之间保持语义等价。
怎么研究
由不了解树结构的人根据真实场景撰写任务,再检查与节点的词面重叠。用认知访谈确认参与者理解目标,随机比较自然版本与泄露版本可估计提示效应。记录任务误解并与导航失败分开。
边界
品牌名、法定术语或用户真实查询词可能与导航标签一致,此时保留才能保持情境真实性。完全消除重叠不可能也无必要。任务包含多个目标时,失败可能来自双管要求而非泄露。
怎么落地
- 从用户事件和目标写情景,不从目标节点反向改写。
- 标出共享词根并判断其是否会在真实场景出现。
- 预测试任务理解,删除不必要提示与生造同义词。
- 将任务理解失败从结构指标中单独报告并修订后复测。