支配效应：虚拟智能体的言语与非言语线索如何影响VR中的决策

文献标题

The Dominance Effect: How Verbal and Nonverbal Cues of Virtual Agents Influence Decision-Making in VR

出版信息

• 主题领域: 虚拟现实（VR）中具身会话代理（ECAs）的言语和非言语支配性线索对决策和感知的影响。
• 关键词: 虚拟代理，支配性线索，决策，言语交流，非言语交流，具身会话代理，社会临场感，VR交互，用户感知，行为影响。

背景与问题

• 问题/挑战: 现有关于人机交互中支配性线索的研究主要集中在单一模态（言语或非言语）上，缺乏对言语和非言语支配性线索交互作用，尤其是其一致性或不一致性的深入探讨。
• 重要性: 理解支配性线索如何影响决策和感知对于设计高效的ECAs在培训、教育和决策支持等应用中的作用至关重要。
• 动机与相关研究: 先前研究表明，支配性影响着人际交互和人机交互，但从人际交互中得出的结论并不总能推广到ECAs。此外，研究还强调了言语和非言语线索一致性在塑造用户反应中的重要性，但在VR情境中的实证证据有限。

解决方案

• 提出的方法: 采用2×2因子研究设计，探讨言语（支配性 vs. 顺从性）和非言语（支配性 vs. 顺从性）支配性线索对用户在基于VR的路径选择任务中的决策和感知的影响。
• 创新点:
  1. 实证研究言语和非言语支配性线索在ECAs中的独立和联合效应。
  2. 分析言语和非言语线索在一致性和不一致性情况下对用户行为和感知的影响。
  3. 利用VR环境模拟沉浸式、动态的ECA交互。
• 程序和关键技术:
  • 参与者与四种表现不同言语和非言语支配性线索组合的ECAs进行交互。
  • 使用二元路径选择任务测量决策行为。
  • 在每次试验后和实验结束后通过问卷评估对支配性、能力、可信度、温暖度、喜爱度和社会临场感的感知。
  • 统计分析包括ART-ANOVA和事后测试，用于评估支配性线索及其一致性的影响。

结果

• 具体发现:
  • 非言语支配性线索显著影响决策行为（F(1, 114) = 14.14, p <.001），而言语支配性仅表现出边际趋势（F(1, 114) = 3, p =.08）。
  • 言语支配性显著影响对支配性（F(1, 105) = 263.45, p <.001）、能力（F(1, 894) = 123.37, p <.001）和可信度（F(1, 894) = 29.93, p <.001）的感知。
  • 非言语支配性显著影响喜爱度（F(1, 894) = 30.43, p <.001）、社会临场感（F(1, 894) = 39.95, p <.001）和可信度（F(1, 894) = 32.64, p <.001）。
  • 言语和非言语线索的一致性对决策或感知未表现出统计显著性影响。
• 相较基线的优势:
  • 非言语支配性线索对决策行为的影响比言语线索更强且更一致。
  • 言语线索在塑造对支配性和能力的显性感知方面更具影响力。
• 实验/评估:
  • 参与者: 39名个体（21名女性，18名男性，年龄18–28岁）。
  • 设置: 使用Meta Quest 3头显的VR环境；每位参与者完成12次随机代理配对试验。
  • 指标: 二元决策结果、感知测量的李克特量表评分以及实验后对支配性的评估。
• 局限性与未来工作:
  • 缺乏中性支配性条件限制了结果的普适性。
  • 简单的二元决策任务可能无法反映现实世界的复杂性。
  • 短暂的交互时长（每次试验7秒）可能影响了线索处理。
  • 同质化的参与者样本（大学生）限制了文化普适性。
  • 未来研究应探索多步骤决策任务、跨文化比较以及面部表情和静态外貌的作用。

总结

本研究探讨了ECAs的言语和非言语支配性线索如何影响VR中的决策和感知。非言语支配性线索显著影响决策和社会评价（如喜爱度、社会临场感），而言语支配性主要塑造对支配性和能力的显性感知。线索一致性的效果未表现出统计显著性。这些发现表明，言语和非言语支配性线索通过不同的路径起作用，非言语线索隐性影响行为，而言语线索塑造显性判断。研究结果为设计适用于特定交互情境（如培训和决策支持）的ECAs提供了可操作的见解。