在时间紧迫的医疗决策中设计值得信赖和协作的AI:一种社会技术视角
作者
可解释人工智能(XAI)AI 辅助决策与自动化系统医生、护士、临床医生精神科医生与心理咨询师
文献标题
Designing AI for Trust and Collaboration in Time-Constrained Medical Decisions: A Sociotechnical Lens
文献信息
- 主题领域: 人工智能在医学决策中的应用,特别是时间受限环境中的信任与协作
- 关键词: 医学决策支持工具、大型抑郁障碍、协作设计、可解释人工智能、临床工作流整合、患者偏好、时间约束、可信任系统、领域知识、随机临床试验
研究背景与问题
-
问题或挑战:
- 大型抑郁障碍(MDD)是一种复杂的疾病,治疗选择困难且缺乏明确的临床指导。
- 现有的基于机器学习的决策支持工具(DST)在临床实践中常常失败,原因包括系统整合差以及用户接受度低。
- 选择抗抑郁药物通常依赖试错法,导致许多患者无法缓解症状。
-
重要性:
- MDD发病率较高,对患者和社会造成了巨大负担。
- 改进工具能够帮助医疗工作者做出更有效的治疗决策,从而提高患者治疗成功率,减少试错的时间和成本。
-
研究动机与相关工作:
- 现阶段的决策支持工具设计往往忽略用户需求,聚焦于模型准确性而非实际应用场景。
- 在复杂的医疗环境中,机器学习工具需要与社会技术系统、临床常规、患者偏好及资源限制相结合。
- 相关研究表明,社会技术视角对于医疗工具的有效整合至关重要。
解决方案
-
提出的解决方案:
- 作者采用迭代的协作设计流程,与临床医生合作开发针对抗抑郁药物治疗决策的决策支持工具原型。
- 工具设计以多用户系统为目标,支持患者和提供者的协作决策,并通过按需解释功能满足临床环境的时间约束需求。
-
创新之处:
- 引入社会技术视角,强调医疗过程中的社会、技术和组织因素。
- 提出与现有临床指南对比的差异化按需解释机制,从而避免过于复杂的每次预测解释。
- 工具设计不仅关注单一用户(医生),还关注患者的参与需求,与医疗团队的协作,以及与现有资源的整合。
-
实施步骤与关键技术:
- 采用半结构化访谈和焦点小组探讨用户需求,并设计原型工具。
- 核心功能包括:基于机器学习模型的药物推荐、治疗预测(如稳定性评分、掉出概率评分)以及患者互动界面。
- 通过收集临床医生的反馈,对初始原型进行重新设计以更好地支持协作决策并满足实际环境需求。
研究成果
-
成果:
- 通过用户研究发现临床医生对DST的期望和需求,包括支持患者协作、与现有医疗流程的整合以及工具的验证。
- 提出了具体设计原则用于改进DST,包括:互动式患者病历调整、清晰的药物比较显示以及按需验证信息的提供。
-
优势:
- 与传统的基于模型性能的工具相比,该设计能更好满足实际临床环境的需求。
- 支持生成可操作的建议,改进治疗效果和患者参与度。
-
实验与评估结果:
- 临床医生认为原型有效简化了治疗决策,并能提供有益的建议。
- 在样例展示中发现,当模型输出与医生的知识或预期不一致时,缺乏差异化解释机制会导致使用工具的信心下降。
-
局限性与未来方向:
- 局限性包括工具设计主要集中于临床医生的视角,尚未充分考虑患者及其他医疗从业人员的参与。
- 未来工作将扩展至患者协作设计以及多用户系统的开发。
- 还需探索适应不同情境(如高风险决策或资源匮乏地区)的设计方法。
通过这项研究,作者提出了在医疗决策中设计和部署人工智能工具的一些新方向,强调社会技术因素的重要性以及患者和医疗团队的协作,这对其他医疗领域的工具设计也有重要借鉴意义。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 在时间受限的医疗决策中,如何设计AI工具以建立信任并支持协作?分类: 医疗AI信任、临床决策支持与医患协作同类问题arrow_forward
- 机器学习驱动的决策支持工具如何更好地整合临床工作流和考虑患者偏好?分类: 医疗AI信任、临床决策支持与医患协作同类问题arrow_forward
- 在抗抑郁药物选择中,哪些设计原则能改进决策支持工具的实用性和接受度?分类: 医疗AI信任、临床决策支持与医患协作同类问题arrow_forward
lightbulb
现实痛点
1- 医生在选择抗抑郁药物时难以高效决策,患者常经历试错过程。分类: 医疗AI信任、临床决策支持与医患协作同类问题arrow_forward
- 100%
设计理论驱动的以用户为中心的可解释人工智能
CHI '19· 可解释人工智能(XAI) +1
- 100%
用户体验AI系统的可追溯性:考察自动化胰岛素输送(AID)系统中的主观信息处理意识
IUI '24· 可解释人工智能(XAI) +1
- 80%
探索和促进在线症状检查器中的诊断透明度和可解释性
CHI '21· 可解释人工智能(XAI) +1
- 80%
基于坚定性的智能体通信在医学影像诊断中的个性化医疗应用:基于坚定性的乳腺筛查-AI
CHI '23· 可解释人工智能(XAI) +2
- 80%
面向以患者为中心的AI事实标签:利用外在信任线索
DIS '25· 可解释人工智能(XAI) +2
- 75%
忽略、信任还是协商:理解临床医生在医疗保健中对基于AI的治疗建议的接受程度
CHI '23· 可解释人工智能(XAI) +1
- 67%
利用交互式可解释人工智能副驾驶增强临床决策:一项针对肾脏病学和产科临床医生的真实世界用户研究
CHI '26· 可解释人工智能(XAI) +3
- 67%
探索AI在临床协作中的未来:肿瘤会诊病例准备研究
CHI '26· 大语言模型(LLM)的人机协作 +3
- 67%
时间压力下AI辅助决策的准确性-时间权衡
IUI '24· 可解释人工智能(XAI) +2
- 67%
调整信任:减轻信任导致的AI辅助不当依赖
IUI '26· 可解释人工智能(XAI) +2
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3411764.3445385
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2021
emoji_events
奖项
未标记奖项
group
作者
9 位作者
sell
研究子方向
可解释人工智能(XAI)、AI 辅助决策与自动化系统
work
职业/产业
医生、护士、临床医生、精神科医生与心理咨询师
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文