理解用户对众包对话系统响应延迟的感知

众包对话系统（CPCS）因其在各种应用领域的潜在效用而受到越来越多的关注，目前自动化对话界面仍然存在局限性。CPCS目前面临响应延迟时间长的问题，这阻碍了它们作为对话伙伴的潜力。该领域的大部分先前工作都集中在展示方法的可行性和提高性能，而评估研究主要关注响应延迟及其减少方法。目前对CPCS中的响应延迟如何影响用户体验知之甚少。虽然降低响应延迟的重要性在人机交互领域得到广泛认可，但很少有人关注响应质量、响应延迟、对话情境和任务复杂性如何影响用户对话体验，特别是他们感知等待回应的方式。我们进行了一项被试间实验（N=478），以检查这四个因素对用户整体等待体验的影响。结果显示：1）当响应延迟超过8秒时，用户对等待体验的评价更负面；2）在高复杂性任务中，用户低估了流逝的时间，但经历了更多挫折；3）高质量的机器人 utterances 使时间流逝被低估且挫折感减少；4）与任务导向的CPCS相比，情绪导向的CPCS中用户判断响应延迟略长，且经历更多挫折。我们的发现可为未来CPCS的设计提供参考，帮助定义性能要求并预判其对用户体验的潜在影响。