人工智能知识:通过人类赋能提升人工智能委托

大语言模型(LLM)的人机协作AI 辅助决策与自动化系统AI/ML 研究员与工程师HCI 研究员

文献标题

AI Knowledge: Improving AI Delegation through Human Enablement

文献信息

  • 主题领域: 人工智能(AI)与人类之间的任务分配与协作
  • 关键词: AI 委派, AI 素养, AI 教育, AI 技能, 认知评价理论

研究背景与问题

  • 问题或挑战: 在随着AI技术发展的人类与AI协作中,任务委派被认为是提高效果的关键。然而,大多数人在没有专门训练的情况下难以有效地进行任务委派。这种低效率可能会妨碍人-AI协作的潜力。
  • 研究重要性: 任务委派能力被证明能够显著提高团体或组织的绩效。例如,高效的任务委派领导者可以带来更好的收入和决策效果。
  • 研究动机: 尽管AI技术本身的设计和改进在增强人-AI协作中取得了明显成绩,但对人类特性(例如知识或技能)的研究仍然不足。理解人类的AI知识如何影响任务委派能够为实践和未来研究提供可靠指导。

解决方案

  • 方法或解决方案:
    • 提出基于认知评价理论的研究模型,将任务评价的“人适配性(human-fit)”与“AI适配性(AI-fit)”作为任务委派决策的核心驱动因素。
    • 分析AI知识如何作为调节因素,使AI委派行为更加符合任务评价。
    • 用基于ImageNet数据集的图像分类实验验证模型,实验设计包括AI知识启发、任务委派和绩效评估。
  • 创新之处:
    • 提出“任务评价”作为任务委派的核心机制,细化人类对于自己和AI适配性的判断如何影响委派决策。
    • 首次揭示AI知识启发不仅能够提高绩效,还可能降低未来使用AI的意愿,提出了对AI知识“非完全积极”影响的观念。
  • 实施步骤:
    • 实验包含四个阶段:预调查问卷、AI知识启发、任务委派阶段和后调查问卷。
    • 实验组通过文字材料学习AI与人类在图像分类任务中的优缺点,并通过总结题目检查学习效果。
    • 两组完成任务委派,并用线性回归与结构方程模型分析数据。

研究成果

  • 具体成果:
    • 发现#1: 任务评价(包括人适配性和AI适配性)能够解释知识启发后的人类任务委派行为。
    • 发现#2: AI知识促进委派行为与任务评价的对齐,从而提升人-AI协作的任务绩效。
    • 发现#3: AI知识降低了AI使用持续意图(AUCI),提出了其负面影响的需要进一步调查。
  • 与现有解决方案的差异或优势: 与仅关注AI技术设计的解决方案相比,该研究引入了对人类特性的分析,为AI应用设计提供了独特的视角。
  • 实验或评估结果:
    • 比较实验组与控制组在任务委派行为、绩效和AUCI上的差异,显著证明AI知识的作用。
    • 提高委派行为使图像分类准确度增加至20%以上。
    • AI知识使使用持续意图降至约0.37(以7分量表计)。
  • 局限性与未来方向:
    • 研究局限于短期效应,未来需要调查AI知识的长期影响。
    • 对AI知识的社会部分与技术部分的分开探讨可以明确哪些具体知识有利或不利。
    • 探索不同启发方法(如游戏化学习)在AI知识教育中的优势,为设计更优培训方案提供依据。

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/papers/chi/95984/2023

广告推荐

学习 AI 编程到 CodeNow

open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3544548.3580794
一眼看懂

论文快照

fact_check
dataset
来源
CHI
calendar_month
年份
2023
emoji_events
奖项
未标记奖项
group
作者
3 位作者
sell
研究子方向
大语言模型(LLM)的人机协作、AI 辅助决策与自动化系统
work
职业/产业
AI/ML 研究员与工程师、HCI 研究员
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文