重新思考复杂医疗决策中的人工智能协作:一项关于败血症诊断的案例研究
作者
可解释人工智能(XAI)AI 辅助决策与自动化系统医疗与科学数据可视化医生、护士、临床医生放射科与病理科医生大学教授与研究人员AI/ML 研究员与工程师
文献标题
重新思考复杂医疗决策中的人机协作:脓毒症诊断的案例研究
文献信息
- 主题领域: 人机协作,医疗人工智能
- 关键词: 人机协作, 医疗决策支持, 脓毒症诊断, 可解释人工智能, 临床应用, 不确定性可视化, 实验性系统, 时间敏感决策, 高风险决策
研究背景与问题
-
关键问题:
- 当前许多人工智能模型在学术数据集上的表现优异,但在人类专家的工作流程中被弃用且难以部署。
- 当前的AI系统(如脓毒症的Epic Sepsis Module,ESM)设计侧重于支持最终的决策阶段(例如,风险评分),而非处理临床工作流中的更关键的中间阶段,因而不能有效满足临床需求。
- 临床场景(如脓毒症诊断)中充满高风险、高不确定性和时间敏感性,AI系统对这些问题的支持不足,甚至被认为是“挑战者”而非“协作者”。
-
研究动机:
- 脓毒症是一种高风险且快速发展的疾病,早期诊断对患者的生存至关重要。
- 人类专家需要更加直观且可操作的AI支持。
- 针对现有AI系统的用户反馈,强调了需要重新设计,以更好地整合到实际工作流程中。
-
相关工作:
- 当前的XAI(可解释AI)研究主要集中在提高算法的透明性和可解释性,但未充分研究医生对早期诊断中的AI交互需求。
- AI在其他医疗决策支持中的设计缺少对临床不确定性和人类专家需求的关注。
解决方案
-
方法概述:
- 提出一种人类中心化的AI系统命名为“SepsisLab”,重新设计AI从支持“最终决策”转变为支持“中间决策阶段”。
- SepsisLab通过五种设计策略优化人机协作,包括未来预测、结果不确定性可视化、实验性推荐等。
-
设计亮点:
- 提供预测的未来趋势: 不仅预测当前风险,还预测未来数小时内的风险变化和不确定性范围。
- 生成实验性建议: 为临床医生推荐具有最大信息增益的血液检测,以减少诊断不确定性。
- 对不确定性进行可视化: 使用图形展示风险预测随时间变化的不确定性,使预测更直观、可信。
- 构建可交互的反事实模拟: 允许医生调整假设展望未来,即通过假设实验值,查看这些值对风险评分的潜在影响。
- 调整AI角色定位: 把AI从“决策权威”变为支撑医生思维过程和信息分析的“协作者”。
-
实现步骤与技术:
- 使用LSTM深度学习模型实现时间序列预测,基于患者过去数据生成未来预测。
- 基于蒙特卡洛模拟(MCS)来估计风险预测中的不确定性,并支持实验推荐。
- 开发前端可交互用户界面,支持可视化和反事实操作(使用React框架实现)。
研究成果
-
具体成果:
- SepsisLab系统设计原型:
- 实现了对脓毒症诊断动态预测、不确定性范围展示和实验性推荐功能。
- 提供医生从“生成假设-采集数据-测试假设”多个环节直观支持。
- 提升的协作与透明性体验:
- 用户评价显示,新的设计能够显著增强人机团队协作,降低AI对医生“决策权威”的挑战感。
- 系统算法性能评估:
- 在MIMIC-III数据集上的实验显示,通过9.6%的必要实验值增加,推荐方法的预测性能接近完整数据集的结果。
- SepsisLab系统设计原型:
-
优势分析:
- 与现有ESM模块的比较: 避免了ESM模块过于关注单一最终评分的问题,避免误报警、模糊反馈。
- 将AI定位为“协作者”,减少医生不信任或弃用AI工具的风险。
-
局限性与未来方向:
- 用户研究的广度限制: 仅使用6名医生评价系统,未来需要更大规模和多样化的临床试验。
- 实际集成挑战: SepsisLab尚未集成到美国Epic医院实际工作流程中,需更长时间实际评估。
- 改进方向:
- 改善系统交互界面,避免数据或信息过载。
- 拓展到其他复杂医学场景和非医疗高风险决策领域例如急救、军事规划等。
- 增加进一步算法性能优化与更透明的模型解释手段。
总结
SepsisLab重新定义了医疗AI在复杂场景中的协作模式,从“决策提供者”转变为“决策支持者”。其设计理念不仅适用于脓毒症诊断,也为其他领域构建更高效的人机协作模式提供了参考。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 如何改进AI系统以支持医疗诊断过程中的中间决策阶段,而非仅聚焦最终决策?分类: 不确定性传达与校准依赖同类问题arrow_forward
- 在高风险、高不确定性和时间敏感的临床场景中,如何设计人性化的AI工具以增强医生的信任与协作?分类: 不确定性传达与校准依赖同类问题arrow_forward
- 通过哪些可视化和交互策略可以帮助医生更直观地理解AI的预测和不确定性?分类: 不确定性传达与校准依赖同类问题arrow_forward
lightbulb
现实痛点
1- 医生在快速诊断败血症时,现有AI工具难以提供有效帮助。分类: 不确定性传达与校准依赖同类问题arrow_forward
- 86%
增强病理学家的NaviPath:设计和评估一个人工智能协作导航系统
CHI '23· 可解释人工智能(XAI) +2
- 75%
快速辅助视觉搜索:为不完美AI支持数字病理学家
IUI '21· 电动车充电与能效界面 +3
- 71%
Awareness of Ambiguity in Medical Data Analysis AI Assistants
CHI '20· 可解释人工智能(XAI) +1
- 71%
EXMOS:通过多方面解释和数据配置引导解释模型
CHI '24· 可解释人工智能(XAI) +1
- 71%
糖尿病风险预测的循证解释视觉对话界面
CUI '25· 可解释人工智能(XAI) +2
- 63%
准确洞察,可信交互:设计用于诊断预测的基于知识图谱的协作人工智能-人多智能体系统
CHI '25· 脑机接口(BCI)与神经反馈 +2
- 63%
VMS:支持预测模型意义建构与选择的交互式可视化
IUI '24· 可解释人工智能(XAI) +2
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3613904.3642343
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2024
emoji_events
奖项
未标记奖项
group
作者
11 位作者
sell
研究子方向
可解释人工智能(XAI)、AI 辅助决策与自动化系统、医疗与科学数据可视化
work
职业/产业
医生、护士、临床医生、放射科与病理科医生、大学教授与研究人员、AI/ML 研究员与工程师
article
内容状态
已索引正文
hub
相关论文
7 篇相关论文