人机通信中的跨模式交互：探索气味和声音一致性对用户对社交机器人感知的影响

研究背景与问题

• 问题或挑战: 当前人机交互（HCI）领域的研究主要集中在视觉和听觉线索上，对气味刺激在塑造社交机器人的用户感知中的作用探索有限。此外，关于多模态交互中不同感官线索的一致性是否会增强用户体验，缺乏深入的研究。
• 重要性: 随着社会机器人在多个领域（如医疗、教育、客户服务）中的广泛应用，了解如何通过多感官设计提升用户对机器人的社交亲和感和信任感具有重要意义。
• 研究动机: 气味和声音的交叉模式交互可能为设计更具社交互动性的机器人提供新的方法，通过探索这种多感官交互的潜力，本研究旨在填补当前文献的空白。

解决方案

• 提出的方法: 作者使用气味（愉悦/不愉悦）和声音（友好/不友好）的组合，通过2x2实验设计，评估这些刺激对社交机器人"信任、友好、能力、参与度"四个维度的影响。同时探讨气味与声音一致性是否加强用户体验。
• 创新之处:
  • 首次系统性地研究气味和声音在社交机器人的交叉模式感官交互中的作用。
  • 探讨感官一致性（如友好声音和愉悦气味）对用户感知的调节效应。
  • 从理论上扩展多模态设计的理解，从实践上为机器人设计提供启发。
• 关键技术与步骤:
  1. 设计了一个集成气味扩散与声音播放模块的机器人模型，通过远程控制实现实验条件的切换。
  2. 选择薰衣草作为愉悦气味，化学味（类似氨气）作为不愉悦气味；专业男声演员录制友好与不友好语音。
  3. 使用分布在四个实验条件（愉悦气味+友好声音、不愉悦气味+不友好声音等）的160名参与者，进行机器人交互体验。
  4. 通过问卷和访谈收集用户对信任、友好、能力、参与度的评分及主观感受。

研究成果

• 具体成果:
  • 愉悦气味可显著提高用户对机器人的友好性和参与度感知，但对信任和能力的影响有限。
  • 友好声音显著提高了用户对机器人的信任、友好和参与度，而对能力的影响较小。
  • 愉悦气味与友好声音的感官一致性增强了友好性和参与度的评价，但对信任与能力无显著影响。
• 优势:
  • 提供了气味和声音相结合的多模态设计模型，为设计更加社交化的机器人提供了路径。
  • 深入探讨了感官一致性在增强用户情感认知中的作用。
• 实验或评估结果:
  • 定量分析: 结果通过方差分析显示，愉悦气味和友好语音在独立和交互效应中对于"友好性"和"参与度"表现出强影响力（显著性p < 0.001）。
  • 定性反馈: 实验中参与者普遍对愉悦气味和友好声音的组合做出正面反应，部分人指出不一致的感官反馈可能引发困惑或产生认知失调。
• 局限性与未来方向:
  • 局限性:
    • 互动时长较短，可能未能充分展现气味与声音线索对复杂认知评估（如能力、信任）的影响。
    • 实验未使用无气味条件作为基线控制，未来需要增加以进一步阐释刺激的独立作用。
    • 设计中气味和声音的呈现均为静态，缺乏动态交互的表现力。
  • 未来方向:
    • 探讨动态气味和声音的交互效果，例如机器人情绪变化或任务失败后的适应性行为对用户感知的影响。
    • 扩展到更多情境变量（如医疗场景、教育场景）以验证研究结果的普适性。
    • 结合中性气味和声音条件，更细粒度区分感官输入的独立与组合效应。

总结

通过本研究，气味与声音刺激被证实在改善机器人社交互动方面有潜在价值。尽管感官一致性可以增强一定维度的用户体验，但信任和能力等复杂认知评估仍需更丰富的交互设计支持。这些发现为多感官交互的理论与实践提供了新的启发，也为未来研究指明了方向。