主观概率修正在不确定性表示中的应用

荣誉提名
不确定性可视化HCI 研究员统计学家与数据科学家

文献标题

Subjective Probability Correction for Uncertainty Representations

文献信息

  • 主题领域: 不确定性可视化与主观概率校正
  • 关键词: 不确定性可视化, 主观概率, 感知偏差, 线性 Probit 模型, 选举预测, 决策质量, 概率校正, 人机交互

研究背景与问题

  • 发现的问题或挑战:

    • 人们在不确定性情境下决策时,往往根据自身的主观概率进行行为,而非基于实际的概率。这种内部信念(主观概率)容易出现偏差,影响决策质量。
    • 现有的不确定性可视化方法(例如直方图、CDF、概率密度函数等)虽然提升了可视化表达,但改善决策质量的上限可能有限。
    • 偏差问题在选举预测等社会性任务中尤其显著,例如,选民倾向于将候选人的小概率胜利概率低估,而高概率则被高估,从而形成错误的行为决策。
  • 研究的重要性:

    • 修正主观概率的偏差对于提高人们在不确定环境中决策质量至关重要。
    • 该问题在选举预测等高影响领域具有实际应用价值,有助于改善媒体传播的效果,并减少公众对此类预测的误解。
  • 研究动机与相关工作:

    • 当前研究大多关注通过改进信息表示形式(如可视化类型)来减少主观概率的偏差,但未将重心转向调整实际展示的概率分布以补偿这种偏差。
    • 本研究提出了一种新方案,通过数学模型(线性 Probit 模型)描述主观概率与实际概率之间的关系,从而系统性地校正概率分布。

解决方案

  • 方法或解决方案:

    • 提出了一种以线性 Probit 模型为基础的主观概率校正方法,用于调整展示的分布, 从而使人们的主观概率更接近真概率。
    • 设计了两种校正方法:
      1. 正态校正(Normal Correction): 基于线性 Probit 模型调整正态分布的标准差和均值。
      2. 偏斜正态校正(Skew-Normal Correction): 保持分布的众数不变的同时,校正右尾概率。
  • 解决方案的创新点:

    • 方法上,该研究将主观概率的校正设计为对概率分布的系统调整,而非仅关注可视化呈现方法的改变。
    • 提供了数学封闭形式的调整方法,特别适用于正态分布,同时也阐述了如何将校正方法泛化到其他领域。
    • 两种校正方法的设计使得在多种应用情境(如预测置信度)下能够灵活适用。
  • 实施步骤和关键技术:

    • 首先使用一个基于线性 Probit 模型的数学表达式,将主观概率建模为一个可反向求解的函数。
    • 运用闭合解析公式,对正态分布中的右尾和左尾概率进行调整,将其映射到符合主观概率模型的目标分布。
    • 设计并进行两组实验,分别估计校正参数(截距和斜率)并验证两种校正方法的有效性。

研究成果

  • 具体成果:

    • 在第一组实验中,验证了主观概率与真实概率之间的系统性偏差特征,确认了线性 Probit 模型的适用性。
    • 第二组实验结果表明,两种校正方法均能显著降低主观概率的整体偏差,改善决策质量:
      • 文本条件下的集成绝对误差(IAE)降低了50%(从0.13降低到0.054)。
      • 直方图条件下的改善幅度相对较小,但也达到了30%的降低(从0.092降低到0.064)。
  • 与现有方案相比的优势:

    • 这种基于概率分布修正的方法相比改进可视化形式的传统做法,能够更系统和鲁棒地解决主观概率偏差。
    • 提供了明确的数学模型,使其适配于领域实践成为可能,并为用户决策任务提供理论支持。
  • 实验或评估结果:

    • 两种校正方法相较于未校正的原始分布显著提高了参与者的决策准确性,尤其在文本信息环境下优化效果尤为明显。
    • 两种校正方法对不同表现形式(文本或直方图)均表现出了改进能力,并将主观概率的误差减少到接近最佳可能性。
  • 局限性与未来方向:

    • 校正方法对主观概率偏差的完全矫正仍然存在限制。个体策略多样性以及模型简化的二参数假设可能是剩余偏差的重要原因。
    • 需要进一步探索个性化的校正策略,以适应用户间的决策策略差异和理解偏好。
    • 将该方法泛化到更多的概率分布形式及其复杂决策环境(如多变量分布)是未来的研究重点。

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/papers/chi/96041/2023

广告推荐

学习 AI 编程到 CodeNow

open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3544548.3580998
一眼看懂

论文快照

fact_check
dataset
来源
CHI
calendar_month
年份
2023
emoji_events
奖项
荣誉提名
group
作者
3 位作者
sell
研究子方向
不确定性可视化
work
职业/产业
HCI 研究员、统计学家与数据科学家
article
内容状态
已索引正文
hub
相关论文
8 篇相关论文