人类与AI交互中沟通方向性和AI代理差异的影响

大语言模型(LLM)的人机协作AI 辅助决策与自动化系统AI/ML 研究员与工程师HCI 研究员

文献标题

Effects of Communication Directionality and AI Agent Differences in Human-AI Interaction

文献信息

  • 主题领域: 人机交互(Human-AI Interaction)、协作游戏、社会心理学
  • 关键词: 人工智能、人机交互、合作游戏、社会感知、方向性沟通

研究背景与问题

研究背景

  • 随着人工智能(AI)的广泛应用,AI 技术在协作环境中的表现及用户对其的感知备受关注。
  • 社会感知(如智力、好感度及互动信任)对人机协作的成功至关重要。
  • 在部分可观信息的合作游戏(Cooperative Partially Observable Games, CPO)中,沟通方向性(如谁领导沟通)以及 AI 的身份感知可能会影响用户对协作伙伴的体验与评价。

研究问题

作者提出两大研究问题:

  1. 在 AI 驱动的合作游戏中,用户对合作伙伴在不同沟通方向(用户作为信息发送者或接收者)、AI 类型及身份认知(AI 或人)的社会感知有何影响?
  2. 在合作游戏中,沟通方向性、AI 类型及身份感知如何影响协作结果?

重要性

  • 当前研究填补了对多种 AI 行为模式与沟通方向性对用户社会感知及协作表现影响的研究空白。
  • 作者期望通过实验揭示如何优化人机协作场景以提高协作效率与用户满意度。

解决方案

方法与实验设计

  • 实验平台:在线合作字谜游戏 "Guess the Word"。
    • 游戏规则:一名玩家(或 AI)为“提示者”(giver)提供暗示,另一玩家猜出目标单词。
    • 玩家需使用线索和对方进行互动来达成目标。
  • AI 模型:
    • Model A: 利用监督学习技术,基于关联词库和语义网络生成线索。
    • Model B: 基于强化学习(Reinforcement Learning)通过自对弈提升模型表现。
    • Model C: 使用数据驱动方法,借助单词联想词网络生成线索。
  • 实验变量:
    • 用户角色:提示者(“giver”)和猜测者(“guesser”)。
    • AI 类型:三种不同行为特性的 AI 模型。
    • 身份认知:用户被告知对手是 AI 或人类。
  • 数据收集:
    • 199名参与者完成10轮游戏,同时填写关于合作者的社会感知问卷(智力、好感度、亲和力等维度)。

创新点

  1. 多视角研究:
    • 涵盖 AI 角色的行为方式(giver 和 guesser)、不同类型 AI 及用户感知边界条件。
  2. 社交感知与结果分析结合:
    • 考察社会心理学变量(智力、好感度)与实际游戏表现之间的关系。

研究成果

具体成果

  1. 社会感知差异:

    • 用户角色(giver/guesser)及 AI 模型类型显著影响对 AI 智力、好感度与亲和力的评价。
    • 在“guesser”角色中,Model C 被认为更高效、更受欢迎(如更低回合数和更高好感度)。
    • 在 "giver" 情景下,用户觉得“自己领导”提供了更大控制权,使 AI 合作伙伴的智力评价更高。
  2. 身份认知影响:

    • 与认为自己合作的是人类相比,认知对方为 AI 时,用户对 AI 的社会感知略显负面,但该现象随 AI 模型的响应特性而变化。
    • Model C 究其行为表现最贴近用户预期,减少负面偏见。
  3. 协作结果差异:

    • 接触 AI 时协作效率(如使用的回合数)随沟通方向性及模型的调整能力而改变。
    • 当用户认为对手是人类时,他们倾向重复提示或提供复杂线索,这些方法无法被 AI 高效利用,造成效率下降。

与现有解决方案比较

  • 优势:
    • 提供了 AI 行为模式差异对用户感知影响的多维视角。
    • 系统性研究了 AI 在部分可见信息合作情景中的沟通特性优化路径。
  • 劣势/局限性:
    • 场景测试局限于字谜游戏,实际协作环境中的适用性需通过进一步研究验证。

实验限制与未来方向

  1. 现实适用性:
    • 字谜游戏虽然适合作为研究测试床,但其相对简单的任务形式限制了研究结果向复杂现实环境的推广。
  2. 未来方向:
    • 扩展到跨行业领域,如教学、医疗协作。
    • 研究动态社会感知的变化,而非仅静态结论。
    • 综合更多个体差异因素,例如文化背景与认知风格。

总结

本研究揭示了沟通方向性和 AI 行为对用户社会感知和协作效果的深刻影响,同时为优化人机协同和 AI 系统设计提供了启示。

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/papers/chi/47524/2021

广告推荐

学习 AI 编程到 CodeNow

open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3411764.3445256
一眼看懂

论文快照

fact_check
dataset
来源
CHI
calendar_month
年份
2021
emoji_events
奖项
未标记奖项
group
作者
7 位作者
sell
研究子方向
大语言模型(LLM)的人机协作、AI 辅助决策与自动化系统
work
职业/产业
AI/ML 研究员与工程师、HCI 研究员
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文