人类与日常AI系统交互中的责任归属
荣誉提名AI 伦理、公平与问责算法公平与偏见HCI 研究员认知科学家
研究背景与问题
- 发现的问题或挑战: 作者研究了人类如何在与日常人工智能(AI)系统的互动中归属责任,特别是在人类和AI共同决策的场景下,关注于正、负结果及观察者与执行者视角对责任归属的影响。
- 重要性: 当AI系统的应用日益广泛时,由于其参与决策的复杂性,归责问题变得更加棘手,尤其是在人类和AI的交互时。这种理解能影响用户对AI系统的信任、设计伦理,以及决策后果。
- 研究动机与相关工作: 以往研究主要集中在高风险环境中(如自动驾驶事故或医学错误)或简单的AI和人类单一对比。这些研究揭示了负面事件激发强烈的归责反应,但相关性较少涉及人类和AI协作的多责任归属场景,特别是低风险的日常应用。
解决方案
- 提出的方法或解决方案: 作者使用半虚拟场景,结合心理学归因理论、注意偏差及责赞非对称进行责任归属实验。
- 创新之处: 通过模拟的日常AI系统(定义为无生命危险、无需专业培训的任务辅助AI)展开实验,打破传统关注于高风险场景的局限性,并且研究了正面和负面结果时的归因差异。
- 实施步骤与关键技术:
- 设计包括八个日常任务场景(如时间管理、教育、健身)以及不同视角(第一人称与第三人称)和结果(正面与负面)变量的场景。
- 招募321名参与者,要求他们评估场景结果(好或坏)并量化人类与AI的责任。
- 使用贝叶斯统计模型分析定量数据;采用反思性主题分析处理定性数据解释归责机制。
研究成果
- 具体成果:
- 无论是观察者还是执行者视角,参与者倾向于赋予AI系统更大的责任。
- 正面结果时,责任更可能被共同赋予人类和AI;而负面结果时,责任更多地转向单一主体(但人类和AI之间没有一致性)。
- 参与者认为,AI系统在正面结果中因其洞察力和能力被称赞,但在负面结果中则因其局限性受到批评。
- 优势: 新颖地揭示了日常人工智能责任归属的复杂性,与传统认为的“人类更多地被视为责任者”的研究形成对比,拓宽了在低风险环境下对责任归属的理解。
- 实验或评估结果:
- 定量分析显示,正面结果提高了AI和人类责任得分,而负面结果更倾向于明确归责给单一主体。
- 定性分析表明,参与者倾向于将AI视为“负责任的工具”,而非具备自主性的代理。
- 局限性与未来方向:
- 场景的虚拟特性可能导致参与者的情感未与现实对齐,进一步研究应在真实环境中验证。
- 作者建议未来探讨用户对AI系统长期互动中的归责变化,以及如何设计更具透明性的系统来管理期望与责任。
总结
该研究显著推进了人类与日常AI系统协作中责任归属的理论理解,突出强调了正面与负面结果对归责模式的不同影响,同时强调整体结果为何AI会被认为是“负责任的工具”的原因。这些发现不仅为未来AI系统的设计提供实用指导,也表明日常AI与人类责任认知相比高风险场景存在显著差异。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 在日常任务中,用户如何分配人类和AI对于合作成果的责任?分类: 信任动态、错误时机与长期依赖同类问题arrow_forward
- 正面或负面结果及观察者或执行者视角如何影响责任归因?分类: 信任动态、错误时机与长期依赖同类问题arrow_forward
- 日常非高风险任务中的责任归因机制是否与高风险场景不同?分类: 信任动态、错误时机与长期依赖同类问题arrow_forward
lightbulb
现实痛点
1- 用户在AI协作中难以明确分清责任,降低了对AI的信任。分类: 信任动态、错误时机与长期依赖同类问题arrow_forward
- 80%
影响算法决策中感知公平性的因素:算法结果、开发程序和个人差异
CHI '20· AI 伦理、公平与问责 +1
- 80%
看!它是计算机程序!它是算法!它是人工智能!:术语是否影响人类对算法决策系统的感知和评估
CHI '22· AI 伦理、公平与问责 +2
- 80%
展望和理解内省AI的方向:使用Meta.Aware探索设计空间
CHI '23· AI 伦理、公平与问责 +2
- 80%
Black LLMirror:用户(自我)对大语言模型使用黑人美式英语交互的感知研究
CHI '26· 大语言模型(LLM)的人机协作 +2
- 67%
23种助推方法:人机交互中技术介导助推的回顾
CHI '19· AI 辅助决策与自动化系统 +2
- 67%
解释对人类-AI决策公平性的影响:保护特征与代理特征
IUI '24· 可解释人工智能(XAI) +2
- 60%
衡量交互的“为什么”:用户动机量表(UMI)的开发与验证
CHI '18· 算法公平与偏见 +1
- 60%
走向实践中的公平性:评估公平机器学习工具包的实践者导向标准
CHI '21· AI 伦理、公平与问责 +1
- 60%
陪审团学习:将不同意见整合到机器学习模型中
CHI '22· AI 伦理、公平与问责 +1
- 60%
有能力但不道德?比较AI和人类专家在道德决策中的合作
CHI '22· AI 伦理、公平与问责 +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://dl.acm.org/doi/10.1145/3706598.3713126
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2025
emoji_events
奖项
荣誉提名
group
作者
3 位作者
sell
研究子方向
AI 伦理、公平与问责、算法公平与偏见
work
职业/产业
HCI 研究员、认知科学家
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文