最优解释:因果图解释中人类错误的定量模型
当人工智能推理通过因果图向人类解释以进行监督时,人机界面是支持决策行动的性能瓶颈。随着解释变得更加复杂,人类解释能力下降,导致监督无效。本文贡献了一个定量模型来界定人类因果推理的界限,并展示了其在可解释AI解释中的实用性。我们的实证贡献是一项大规模用户研究(n=170),通过测量因果复杂性对人类理解的影响,量化人类理解因果解释的有限理性。我们的重要结果显示,用户是有限因果推理者:虽然他们的决策时间随每个新增因素呈线性增加(每节点0.65秒),但数据表明他们的决策错误呈指数增长。这表明用户可以有效管理的复杂性存在认知界限,并为建立认知优化复杂性的框架奠定了基础。利用这一证据,我们贡献了一个理论框架,形式化了解释复杂性对人类解释错误的影响。基于我们的实证结果,我们引入了一种新方法来系统地修剪因果解释至最优复杂性,在解释保真度损失与解释错误之间进行权衡,为最多4个相关节点和 novice 用户的定向无环图生成针对人类认知界限优化复杂性的解释。我们的工作因此将保真度-可解释性权衡量化为模型复杂性与解释错误之间的直接关系,为设计结构感知、最小化错误的可解释AI接口奠定了基础。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
- 83%
可解释、可问责和可理解系统的趋势与轨迹:一项HCI研究议程
CHI '18· 可解释人工智能(XAI) +2
- 83%
可解释人工智能中的用户特征:个性化中的兔子洞?
CHI '24· 可解释人工智能(XAI) +1
- 83%
我做得比你的AI更好:专业知识与解释
IUI '19· 可解释人工智能(XAI) +1
- 71%
通过设计研究人工智能的可读性
CHI '20· 可解释人工智能(XAI) +2
- 71%
通过交互重建评估生成模型的可解释性
CHI '21· 可解释人工智能(XAI) +2
- 71%
关于认知:人类能力的一种错觉可能会妨碍对AI系统的适当依赖
CHI '23· 可解释人工智能(XAI) +2
- 71%
测量和理解自动化系统的信任校准:一项关于最新技术和未来方向的综述
CHI '23· 可解释人工智能(XAI) +2
- 71%
RELIC:使用自我一致性调查大型语言模型的响应
CHI '24· 可解释人工智能(XAI) +2
- 71%
Comparables XAI:具有反事实轨迹调整的忠实基于示例的人工智能解释
CHI '26· 可解释人工智能(XAI) +2
- 71%
协作强化学习综述:交互方法与设计模式
DIS '21· 大语言模型(LLM)的人机协作 +2
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)