X3.03.2False understanding acknowledgement设计研究
假装听懂比明说不懂更有害
别名: 虚假确认 · 假装理解 · conversational grounding failure
概念解释
虚假理解确认(false understanding acknowledgement)是机器人在输入解析失败、指代不明或计划未确定时仍以“好的”“明白了”等方式结束对话,使人相信已建立共同理解。明确说不懂会增加一次修复成本;假装听懂则把错误隐藏到后续物理动作或任务结果中。
机制
对话中的确认承担 grounding:它关闭协商回路并授权下一步。用户收到肯定回应后会停止补充条件、转移注意并把后续责任交给系统。错误直到执行阶段才暴露时,恢复范围更大,且用户难以定位是语音识别、指代、计划还是控制失败。
怎么研究
可在相同识别置信下比较虚假确认、请求重复、候选澄清和明确拒绝,测量错误执行、修复轮次、时间、信任校准与责任归因。任务必须包含真实可混淆输入,不能用明显错误制造结论。还应记录“成功完成但理解错误”的侥幸案例,因为它会强化危险策略。
边界
频繁澄清也会使对话不可用,简单低风险命令可在可撤销范围内采用合理默认。非语言动作的确认同样可能误导。明确“不懂”必须附带可行动的修复信息;只重复道歉会把负担全部推给用户。
怎么落地
- 将确认分成已收到、已解析、已规划与已执行,避免一个“好的”覆盖全部阶段。
- 在关键槽位缺失或候选接近时复述具体理解并请求选择,不要用流畅话术掩盖歧义。
- 用噪声、指代和中途改口测试,统计错误执行、修复总成本及侥幸成功,核对确认是否忠实于内部状态。