理解用户对众包对话系统响应延迟的感知

视频

DOI

众包对话系统因其潜在用途而受到广泛关注，尽管自动化对话界面仍存在局限性。众包对话系统目前遭受较长响应延迟的困扰，这阻碍了它们作为对话伙伴的潜力。该领域的大部分先前工作集中在证明方法的可行性和提高性能，而评估研究主要关注响应延迟及其减少方法。目前相对较少了解的是众包对话系统中的响应延迟如何影响用户体验。虽然降低响应延迟的重要性在人机交互领域得到广泛认可，但人们对响应质量、响应延迟、对话上下文以及任务复杂性如何影响用户体验，特别是他们如何感知等待响应，关注甚少。我们进行了一项被试间实验（N=478），以检验这四个因素对用户整体等待体验的影响。结果表明：1）当响应延迟超过8秒时，用户对等待体验的评价更为负面；2）在高复杂性任务中，用户低估了经过的时间但经历了更多挫折；3）当机器人回答质量较高时，用户低估了经过的时间且经历了较少的挫折；4）与任务导向的众包对话系统相比，情绪导向的系统中用户判断响应延迟稍长且经历了更多挫折。我们的见解能为未来众包对话系统的设计提供信息，帮助定义性能要求并预见其对用户体验的潜在影响。