通过泄漏抽象解决人机系统协作设计中的关注点分离问题
大语言模型(LLM)的人机协作可解释人工智能(XAI)AI 辅助决策与自动化系统算法透明度与可审计性UI/UX 设计师数据科学家与分析师AI/ML 研究员与工程师
文献标题
Solving Separation-of-Concerns Problems in Collaborative Design of Human-AI Systems through Leaky Abstractions
文献信息
- 主题领域: 人工智能 (AI) 与用户体验设计 (UX)
- 关键词: 人工智能系统, 用户体验设计, AI应用, 行业实践, 设计流程, 协作, 知识边界, 信息渗漏, 软件开发, 学科跨界
研究背景与问题
-
发现的问题或挑战:
- 在传统软件开发中,“关注点分离 (Separation of Concerns)” (SoC) 是一种有效的系统设计原则,旨在通过清晰定义设计和实现的职责来提高效率。
- 然而,在设计以人为中心的人工智能 (Human-AI, HAI) 系统时,SoC带来的隔离反而阻碍了设计师和工程师之间的有效协作。
- HAI系统涉及人工智能模型的动态特性和较高的不确定性,这使得传统的设计与工程团队协同变得复杂。
- 设计学生对AI技术的认知有限、工程师忽视用户体验的设计需求等问题导致团队无法紧密协作并交付满足人类需求的AI解决方案。
-
重要性:
- 人工智能系统设计中的人机交互、任务自动化、设计的可解释性以及数据隐私是当前研究的关键领域。
- 更有效的跨学科合作有助于培养高质量的AI应用,同时解决模型偏差、用户体验问题,以及保障AI设计的伦理性和社会价值。
-
研究动机与相关工作:
- Turing奖得主和相关领域的研究者指出将AI模型设计与人类数据需求整合的重要性。
- 虽然业内提出了指导性的HAI设计原则,但缺乏具体的协作方式来实现跨学科团队设计。
- 当前研究主要聚焦于设计师和数据科学家单独面临的挑战,而忽略了设计师与工程师间协作的实际流程。
解决方案
-
提出的解决方案:
- 本研究提出使用“信息渗漏 (Leaky Abstractions)”的设计方法,来打破传统软件开发中的关注点分离障碍。
- 通过分享低层次设计细节和实施信息,改进设计师和工程师之间的协作。
- 构造一个跨学科的迭代设计流程,结合延后规范 (Delayed Specification)和持续评估 (Constant Evaluation)。
-
创新之处:
- 提出了“信息渗漏”这一新的设计方法,强调通过跨学科共享设计和工程实施的低层次细节打破知识边界。
- 定义了HAI设计指南的组件模型,将设计过程分解为具体的子模块:用户心理模型、用户界面设计、AI模型设计、数据训练需求等。
- 构建跨学科协作的理论框架,扩展传统的设计交流工具和方法。
-
实施步骤与技术:
- HAI设计指南的分析:
- 收集来自主要行业来源的280条HAI设计指南,并通过关联图分析总结HAI设计的关键组件。
- 行业实践调研:
- 采访21名来自不同企业的行业实践者,探讨他们在HAI设计中的协作方式和遇到的挑战。
- 收集现实案例以确认“信息渗漏”的有效性和实际应用场景。
- 组件模型与设计原型:
- 构造用户与AI的交互模型和组件,设计“灰箱”原型来进行早期测试。
- 通过工程文档、数据集规范、UI标注等方式实现跨角色的协作。
- HAI设计指南的分析:
研究成果
-
具体成果:
- 构建了HAI设计的组件模型,包括用户心理模型(任务模型、期望模型、交互模型)、用户界面设计(输入输出、可解释性、失败与移交等)、AI模型(性能评估、用户学习)以及数据训练需求等四大模块。
- 确定了设计师和工程师协作的关键障碍,即知识盲点和时间表的不协调。
- 提出了通过“信息渗漏”传递低层次细节(如数据标签、模型假设、原型输出)来加强团队协作的实践方法。
-
优势与比较:
- 相较于传统的关注点分离实践,“信息渗漏”解决团队协作中信息不对称问题,鼓励创新和灵活设计。
- 延后的设计规范减少了早期决策导致的代价昂贵的后期改变。
-
实验或评估结果:
- 访谈数据显示,工程师和设计师通过使用“信息渗漏”共享设计原型、数据分析工具以及任务场景,从而显著减少协作中的信息缺失问题。
- 提供实例,如设计师参与数据标签规则制定,工程师分享ML系统性能可视化以优化用户界面设计。
-
局限性与未来方向:
- 由于访谈和展示的有限性,本研究可能无法完全涵盖不同领域、任务和用户群体的多样性。
- 下一步研究应关注如何将“延后规范”结合敏捷开发实践并系统化标准化工具。
- 进一步探索社会技术实践如何支持负责的AI设计,尤其是公平性指标与用户数据隐私问题。
通过以上总结,该研究为人机协作设计提供了新的视野和实践方向,同时揭示了现阶段行业实践中潜在的难点和解决思路。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3lightbulb
现实痛点
1- 设计师和工程师难以高效协作,导致AI系统无法满足人类需求。分类: 人机共创与协作交互同类问题arrow_forward
- 71%
设计思维理解:支持AI赋能的用户体验设计构思的模型透明度信息需求
CHI '23· 大语言模型(LLM)的人机协作 +2
- 71%
我应该相信谁:AI还是我自己?利用人类和AI正确的可能性来促进对AI辅助决策的适当信任
CHI '23· 可解释人工智能(XAI) +1
- 67%
DirectGPT:与大型语言模型进行交互的直接操作界面
CHI '24· 大语言模型(LLM)的人机协作 +3
- 67%
交互式推理:可视化和控制大语言模型中的思维链推理
IUI '26· 大语言模型(LLM)的人机协作 +3
- 63%
通过设计研究人工智能的可读性
CHI '20· 可解释人工智能(XAI) +2
- 63%
从机器中诞生的用户:仿真作为人机循环文本分析中的设计探测
CHI '21· 可解释人工智能(XAI) +3
- 63%
基于模型的强化学习适应用户界面
CHI '21· 大语言模型(LLM)的人机协作 +2
- 63%
RELIC:使用自我一致性调查大型语言模型的响应
CHI '24· 可解释人工智能(XAI) +2
- 63%
分析师如何理解和验证AI辅助的数据分析?
CHI '24· 大语言模型(LLM)的人机协作 +2
- 63%
硒石:利用大型语言模型生成的综合概述在线构建意义框架
CHI '24· 大语言模型(LLM)的人机协作 +2
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://dl.acm.org/doi/abs/10.1145/3491102.3517537
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2022
emoji_events
奖项
未标记奖项
group
作者
4 位作者
sell
研究子方向
大语言模型(LLM)的人机协作、可解释人工智能(XAI)、AI 辅助决策与自动化系统、算法透明度与可审计性
work
职业/产业
UI/UX 设计师、数据科学家与分析师、AI/ML 研究员与工程师
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文