这目前是杂乱无章的:考察AI/ML从业者在负责任的AI价值观共同生产过程中的挑战
AI 伦理、公平与问责算法公平与偏见AI/ML 研究员与工程师HCI 研究员
文献标题
“It is currently hodgepodge”: Examining AI/ML Practitioners’ Challenges during Co-production of Responsible AI Values
文献信息
- 主题领域: 负责任的人工智能 (Responsible AI, RAI) 的价值共创方法及实践中的挑战
- 关键词: Responsible AI, Ethical AI, Value Levers, Co-production, Collaboration, FATE, Explainability, Fairness, Transparency, Accountability
研究背景与问题
-
发现的问题或挑战
- 负责任的人工智能(RAI)已经成为人工智能开发的重要方向,但当前的共创过程充满挑战。
- 不同组织结构(自上而下与自下而上)对RAI价值实施产生了不利影响,尤其是在解决价值冲突时。
- 不同角色的实践者在RAI价值的解释、合作和实施过程中的角色负担不均。
- 特定RAI价值(如公平性或透明性)因其抽象性和缺乏明确的操作化方法而被忽视。
- 许多RAI发展过程依赖随机和非结构化的策略。
-
重要性
- 随着AI技术对社会经济的影响增大,确保其潜在影响的公平性、透明性和责任性是至关重要的。
- UNESCO等全球性组织陆续发布了AI伦理的相关建议,这些倡议对于指导新兴AI技术的使能者和开发者显得尤为关键。
-
研究动机与相关工作
- 研究借鉴了HCI(人机交互)领域以及伦理学领域的RAI研究,重点研究了共创过程中存在的价值紧张及矛盾。
- 目前的相关研究主要集中在特定RAI价值的讨论(如公平性或解释性),或在组织内的局部场景中进行实验性探索。
解决方案
-
作者提出的方法或解决方案
- 使用共创(co-production)框架,以理解RAI价值在组织内外的协同和落实。
- 采用定性研究方法,包括从10个不同组织中采访了23位AI开发实践者,覆盖了设计、产品管理、政策、数据科学等多样化角色。
-
解决方案的创新之处
- 提出了“价值杠杆”(Value Levers)的概念,即通过设计特定活动形式来促进RAI价值协作的策略。
- 引入了“中间向外”(Middle-out)的组织策略,以平衡传统的自上而下(领导层指导)和自下而上(个人倡议)结构中的矛盾。
- 区分并分析了RAI价值的三大共创维度:机构结构、话语讨论和价值表征。
-
实施步骤及关键技术
- 数据收集:采用半结构化访谈,共同探索RAI价值讨论中的挑战及策略。
- 数据分析:通过主题分析法,对收集的数据进行编码和分类,提炼出54个最终代码。
- 以三大调查重点(机构、话语、表征)为框架,提取各层级间的具体挑战和应对措施。
研究成果
-
具体成果
- 发现了RAI价值共创的主要挑战和障碍,包括抽象价值的弱化、结构上的不均衡负担、不清晰的中央支持体系等。
- 总结了应对这些挑战的价值杠杆策略,包括RAI认证、支持性的活动(如角色扮演和场景创建)、促进冲突解决的框架(如讨论中的安全空间)。
- 归纳了当前实践中已有策略的优势和不足。
-
与现有方案的比较
- 此研究细化并深化了现有文献中对RAI价值共创压力和分歧的探讨,提供了更实际和易操作的解决方案。
- 在系统性地研究RAI实践者的真实工作环境和多维互动场景方面更为深入。
-
实验或评估结果
- 总结出了一套经过实践验证的策略,以帮助不同角色的AI实践者更有效地推进RAI价值的讨论与实现。
- 对组织性压力来源和解决方案进行了定量描述,如教育类压力对个体的影响、RAI价值晚期修改对项目进度的挑战等。
-
局限性与未来方向
- 局限性:样本规模较小(23位受访者,覆盖10个组织),同时这项研究中的参与者主要集中在全球北方的技术公司。
- 未来方向:建议在更广泛的行业背景和社会环境下扩展该研究,加入量化数据,以更准确评估RAI价值共创的普适性。
- 提议构建设计工具和教育体系,帮助新兴AI从业者更好实践RAI。
总结
研究清晰地描绘了RAI价值的共创实践,揭示了技术和社会伦理结合中的复杂性。通过深入分析实践者的状态和挑战,该研究为实现真正负责任的AI开发提供了新视角,并提出了具体的提升组织结构、话语促进与代表性成果的方法。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3lightbulb
现实痛点
1- AI从业者在共创负责AI价值时缺乏结构化工具和明确指导。分类: 人机共创与协作交互同类问题arrow_forward
- 100%
走向实践中的公平性:评估公平机器学习工具包的实践者导向标准
CHI '21· AI 伦理、公平与问责 +1
- 100%
陪审团学习:将不同意见整合到机器学习模型中
CHI '22· AI 伦理、公平与问责 +1
- 100%
有能力但不道德?比较AI和人类专家在道德决策中的合作
CHI '22· AI 伦理、公平与问责 +1
- 100%
脱离上下文:调查“人工智能作为服务”的偏见和公平性问题
CHI '23· AI 伦理、公平与问责 +1
- 100%
STILE:探索和调试预训练文本表示中的社会偏见
CHI '24· AI 伦理、公平与问责 +1
- 80%
超越专业知识和角色:一个框架来描述可解释机器学习的利益相关者及其需求
CHI '21· 可解释人工智能(XAI) +2
- 80%
负责任AI工具评估实践的范围研究:迈向有效性评估的步骤
CHI '24· AI 辅助决策与自动化系统 +2
- 80%
用户驱动的价值观对齐:理解用户对AI伴侣中偏见和歧视性陈述的看法及应对策略
CHI '25· 可解释人工智能(XAI) +2
- 67%
Silva: 使用因果关系交互式评估机器学习公平性
CHI '20· AI 伦理、公平与问责 +2
- 67%
共同设计检查表以了解组织在人工智能公平性方面的挑战和机遇
CHI '20· AI 伦理、公平与问责 +2
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3544548.3580903
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2023
emoji_events
奖项
未标记奖项
group
作者
2 位作者
sell
研究子方向
AI 伦理、公平与问责、算法公平与偏见
work
职业/产业
AI/ML 研究员与工程师、HCI 研究员
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文