在共享工作空间环境中对人机协作情境自主性的评估
作者
大语言模型(LLM)的人机协作分布式团队协作UI/UX 设计师AI/ML 研究员与工程师
文献标题
评估共享工作空间中情境自主性的影响:人类与人工智能的协作
文献信息
- 主题领域: 人机交互(HCI)、共享工作空间中的人工智能协作
- 关键词: 人工智能与人类交互、共享工作空间、人工智能自主性、人机协作、任务分配、适应性自主性
研究背景与问题
-
问题与挑战:
- 人类与人工智能团队(Human-AI Teams,HATs)在高复杂性任务中的协作方式仍存在很大挑战。
- 过高的AI自主性未必能提升团队表现,不同情境下AI自主性调整可能更有效,但缺乏系统的实证研究支持。
- 大多数相关研究集中在多智能体系统中而非涉及真实人类用户的共享工作空间。
-
重要性:
- 人类与AI的协作在工业自动化、辅助共同办公与智能驾驶等领域具有重大应用潜力。
- 调节AI自主性可能对任务执行效率及用户体验具有重要影响。
-
研究动机与相关工作:
- 现有研究表明,动态调整AI自主性(如基于用户反馈)对具体任务有一定帮助,但未深入探讨动态自主性对共享工作空间下团队合作任务的实证影响。
- 基于理论推导与相关工作,亟需开发更严谨的实验框架研究AI自主性调整的优劣。
解决方案
-
提出的解决方案:
- 设计一个模拟共享工作空间的实验环境,利用合作任务评估AI在固定自主性和情境调整自主性下的表现。
- 提出一套通用的自主性调整标准,并基于理论和小规模实验推导出适用于实验环境的调整规则。
- 衡量AI不同自主性模式下的任务表现和用户满意度。
-
创新之处:
- 首次在真实用户任务中系统研究AI情境自主性对团队表现与用户体验的影响。
- 结合理论的"知识推理模型"(Theory of Mind Models, ToMMs)技术,让AI预测人类行为以调整其自主性。
- 提供了实验设计的统一框架,有助于未来类似研究的复现和扩展。
-
实施步骤与关键技术:
- 构建一个以"办公室联合任务"为背景的合作场景,任务要求AI和人类共同完成文档整理和书籍归类。
- 定义四种自主性模式:无自主性(仅根据指令),低自主性(适度提问),中度自主性(建议并等待确认),高自主性(独立行动并通知)。
- 引入"情境自主性适应"模式,根据实时任务需求动态切换自主性水平(通过五大关键标准,如AI自信度及人类行为预测实现)。
研究成果
-
具体成果:
- 调整自主性AI模式的团队得分(平均为220分,高于所有固定模式条件)。
- 动态调整条件下,用户对AI智能性的评分显著最高,且对合作满意度和团队成员感知最佳。
- 高自主性模式虽然表现好,但用户对其错误(如提供错误标签)的容忍度低。
-
与现有解决方案相比的优势:
- 动态调整自主性弥合了高自主性中AI错误对用户的不良体验。
- AI自动调整减少了用户干预操作次数,用户注意力可以更多集中于自身任务。
-
实验或评估结果:
- 动态调整条件下,任务完成效率最佳,例如文件数量和书籍归类数量优于固定模式。
- 只在动态调整模式下,AI被认为是"智能"的,而不是简单的执行工具。
- 用户主动请求AI更自主的表现仅出现在低固定自主性条件中,而在高自主性和动态调整模式下,用户更希望调整代价(如错误标签)变低。
-
局限性与未来方向:
- 局限性:
- 交互控制设计(如键盘与鼠标切换)增加用户成本,有时会遗漏AI提示。
- 实验任务虽然模拟真实合作场景,但可能无法完全反映更复杂的现实任务。
- AI的预测模型(如用户行为预测)仍然是基于有限规则,尚未集成学习算法。
- 未来方向:
- 引入更加复杂的任务设置,研究高风险错误如何影响团队表现。
- 探索更先进的动态调整方法,例如基于实时学习和预测的高级自主性模型。
- 开发多模态交互方式(如语音反馈)减少用户信息负担并增强任务效率。
- 局限性:
总结
通过研究动态情境自主性AI对共享工作空间团队表现及人类体验的影响,本文验证了动态自主性在HATs中的潜力,特别是其在提高团队效率和提高AI感知智能性方面的显著优越性。这为未来人类与AI协作系统设计奠定了新的基础与方向。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 在共享工作空间中,不同AI自主性模式如何影响团队的任务表现和用户体验?分类: 团队协调、交接与协作分析同类问题arrow_forward
- 动态上下文自主性(根据任务需求实时调整自主性)能否比固定自主性模式更有效地提升团队协作效率?分类: 团队协调、交接与协作分析同类问题arrow_forward
- 应用“心智理论模型”(用于预测人类行为)对动态调整AI自主性有何作用?分类: 团队协调、交接与协作分析同类问题arrow_forward
lightbulb
现实痛点
1- 在复杂任务中,人与AI团队成员协作效率低,尤其是AI错误时。分类: 团队协调、交接与协作分析同类问题arrow_forward
- 75%
单元、生成器与透镜:面向大型语言模型面向对象交互的设计框架
UIST '23· 大语言模型(LLM)的人机协作
- 67%
认知桥:用于跨职能协作的人工智能生成边界对象
CHI '26· 大语言模型(LLM)的人机协作 +2
- 67%
Enable Partial Participation in Remote Meetings
CHI '26· 远程工作工具与体验 +2
- 60%
从HCI研究中映射机器学习进展以揭示设计创新的起点
CHI '18· 大语言模型(LLM)的人机协作
- 60%
素描NLP:一个探索设计语言智能正确事物的案例研究
CHI '19· 大语言模型(LLM)的人机协作 +1
- 60%
IntentTuner:将人类意图整合到文本到图像生成模型微调中的交互框架
CHI '24· 生成式AI(文本、图像、音乐、视频) +1
- 60%
弥合设想的鸿沟:基于提示与大语言模型交互的认知挑战
CHI '24· 大语言模型(LLM)的人机协作 +1
- 60%
机械降神与大型语言模型中的人设:探究AI生成的人设描述的构成
CHI '24· 大语言模型(LLM)的人机协作 +1
- 60%
基于LLM的推荐系统用户体验:以音乐推荐为例
CHI '25· 大语言模型(LLM)的人机协作 +1
- 60%
AI仪器:将提示作为工具来抽象和反映图形界面命令作为通用工具
CHI '25· 生成式AI(文本、图像、音乐、视频) +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3613904.3642564
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2024
emoji_events
奖项
未标记奖项
group
作者
8 位作者
sell
研究子方向
大语言模型(LLM)的人机协作、分布式团队协作
work
职业/产业
UI/UX 设计师、AI/ML 研究员与工程师
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文