《谁是合适的无家可归者?》:算法化无家可归者服务提供和机器学习研究中的价值观
AI 伦理、公平与问责算法公平与偏见边缘化群体赋权无家可归者服务机构
文献标题
“Who is the right homeless client?”: Values in Algorithmic Homelessness Service Provision and Machine Learning Research
文献信息
- 主题领域: 研究机器学习算法在无家可归服务中的应用及其伦理、社会问题。
- 关键词: 机器学习 (ML) 值,无家可归,价值崩溃,算法伦理,数据科学,隐私,人机交互,高风险客户,预测模型,资源分配。
研究背景与问题
-
作者发现了哪些问题或挑战?
- 无家可归现象是一个全球性社会问题,目前,机器学习技术正越来越多地被应用于无家可归服务领域。
- 尽管机器学习算法的部署可以优化服务效率,但它对无家可归者隐私、社会影响、伦理问题等带来了隐患。
- 当前许多研究聚焦于算法性能和新颖性,而忽视了算法可能导致的对人性的无视和额外的社会偏见。
-
为什么这个问题很重要?
- 无家可归者是特别脆弱且边缘化的社会群体,对其进行算法化管理需要格外关注潜在风险。
- 一些无家可归服务算法在实践中可能会强化既有的不平等,并引发隐私和伦理问题。
-
研究动机与相关工作
- 作者旨在通过系统化文献综述与批评分析,揭示机器学习算法在无家可归服务中的潜在价值冲突和矛盾。
- 本研究试图填补计算机科学、人机交互(HCI)和科学与技术研究(STS)领域的跨学科研究空白。
解决方案
-
作者提出了哪些方法或解决方案?
- 以批评的视角分析了40篇使用机器学习技术处理无家可归问题的研究论文。
- 展示了机器学习值一些传统定义如何在无家可归背景中重新定义(如效率、隐私、可重现性等的"崩溃"现象)。
- 提出了将人性置于中心的机器学习设计方法,确保技术干预更加注重伦理与人类价值。
-
该解决方案的创新之处是什么?
- 引入“价值崩溃”(values collapse)概念,分析一些算法价值如何在无家可归情境下被削弱或曲解。
- 提供了跨学科范例,将数据科学、人机交互与社会理论结合起来,为未来研究提供框架。
- 批判性地分析了无家可归者如何在不同层次的机器学习抽象(预测、类别、算法)中被简化甚至失去。
-
实施步骤是什么?使用了哪些关键技术?
- 进行了系统化文献综述(Systematic Literature Review, SLR),筛选出40篇相关研究。
- 采用主题分析法(Thematic Analysis)为已定义的和新出现的价值码分类,尤其是分析人类价值如何在算法抽象中被忽视。
- 结合案例研究,分析包括但不限于随机森林、逻辑回归和神经网络在无家可归算法中的应用。
研究成果
-
取得了哪些具体成果?
- 发现了作者编码并突出的机器学习值包括新奇性、性能、局限性等,而同时一些关键价值(如效率、隐私、再现性)受到了忽视或错误解读。
- 确认了在无家可归服务的“算法化”处理中,无家可归者的复杂性及其人性化特征经常被简化或忽视。
- 不同算法(如逻辑回归、神经网络)多以性能指标(如准确性、AUC)为优先,导致了伦理和社会问题未获得充分重视。
-
与现有解决方案相比,它有哪些优势?
- 提供了一个全面的跨学科视角,将传统机器学习研究与社会价值分析紧密结合。
- 更深入地分析了算法对脆弱人群的实际影响,而不只是关注算法性能优化。
-
实验或评估结果是什么?
- 研究发现"新奇性"和"性能"等传统机器学习价值与效率、隐私、(无家可归条件)可重现性等伦理相关价值之间存在冲突。
- 借助交叉编码,揭示了具体算法表现(如逻辑回归的AUC、RF的决策树深度)如何将资源配置偏离人性化方向。
-
局限性与未来方向
- 本研究分析集中于美国和加拿大的文献,未来应扩展至全球其他地区。
- 针对特定无家可归群体(如青年、女性与退伍老兵)的研究需求仍待挖掘。
- 建议在设计算法时更多引入价值敏感设计与参与式设计等方法。
- 文献样本较小,未来研究可以扩大样本,并验证更多未被提及的机器学习值。
输出格式
- 本文贡献在于揭示机器学习在无家可归服务中的伦理与社会挑战,并助力开发以人为中心的解决方案和方法,为数据科学、HCI与STS融合树立了范例。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 在无家可归者服务中,机器学习算法如何影响效率与隐私等价值的平衡?分类: 算法决策问责、可争议性与用户审计同类问题arrow_forward
- 机器学习算法在无家可归者服务中是否会强化社会不平等?分类: 算法决策问责、可争议性与用户审计同类问题arrow_forward
- 如何设计以人为中心的机器学习算法来减少无家可归者服务中的“价值坍塌”现象?分类: 算法决策问责、可争议性与用户审计同类问题arrow_forward
lightbulb
现实痛点
1- 高风险的无家可归者在服务分配中可能被算法忽视或被错误分类。分类: 算法决策问责、可争议性与用户审计同类问题arrow_forward
- 60%
理解前线工作人员和无家可归者对在无家可归服务中使用AI的看法
CHI '23· AI 伦理、公平与问责 +1
- 60%
无家可归研究中以人类为中心的算法回顾
CHI '24· AI 伦理、公平与问责 +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3544548.3581010
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2023
emoji_events
奖项
未标记奖项
group
作者
4 位作者
sell
研究子方向
AI 伦理、公平与问责、算法公平与偏见、边缘化群体赋权
work
职业/产业
无家可归者服务机构
article
内容状态
已索引正文
hub
相关论文
2 篇相关论文