节奏刺激的感知不同步影响瞳孔直径和平稳追踪眼动

研究背景与问题

• 作者发现了哪些问题或挑战？
  本研究关注在网络交互中，由于延迟而导致的视听不同步问题，尤其是节奏性视听刺激中的感知同步性问题。延迟可能破坏视听同步性，例如音频与视频的启动时间（SOA, Stimulus Onset Asynchrony）不一致，从而影响用户体验。

• 为什么这个问题很重要？
  同步性是人际互动中促进信任、亲密感和群体凝聚力的关键因素。诸如远程音乐合作、虚拟游戏及在线健身课程等许多依赖节奏互动的应用场景中，延迟问题对体验产生负面影响。了解延迟如何影响感知同步性，以及如何设计消除这些负面影响的方法，对于改进相关人机交互（HCI）系统至关重要。

• 研究动机与相关工作
  先前研究表明，不同任务和刺激类型对感知延迟的敏感性有所不同，但现有研究多集中于非节奏性视听刺激，节奏性视听刺激的同步性感知影响尚未充分探索。此外，虽然眼动数据（如瞳孔直径和平滑追随眼动）被认为可能与认知负荷和感知同步性相关，但该领域仍有较大的研究空白。

解决方案

• 作者提出了哪些方法或解决方案？
  作者通过实验操控不同节奏频率和视听事件的启动时间差（SOA），研究这些因素对主观同步性判断（Point of Subjective Synchrony, PSS）和同步性窗口（Window of Subjective Synchrony, WSS）的影响。同时，记录并分析眼动数据（瞳孔直径和平滑追随眼动）作为可能的生理指标。

• 该解决方案的创新之处是什么？

  • 首次系统性研究节奏频率对感知同步性及眼动反应的影响。
  • 探讨瞳孔扩张和平滑追随眼动作为感知同步性生理指标的可能性。
  • 引入较宽泛的SOA范围，模拟网络环境中常见的不同延迟场景。

• 实施步骤是什么？使用了哪些关键技术？

  1. 实验设计：基于11个SOA条件（-250ms至+250ms），设定三个频率条件（0.5 Hz、1 Hz和2 Hz）和两种视觉构成条件（恒定速度与恒定距离）。
  2. 参与者任务：参与者跟随可视化标记，并通过四级评分量表判断视听事件的同步性。
  3. 数据采集与处理：使用Tobii Pro Nano眼动仪记录瞳孔扩张和眼动数据，进行基线校正与异常值处理。
  4. 统计分析：通过线性混合模型（LMM）分析SOA、频率和其他因素对主观评分及眼动数据的影响。

研究成果

• 取得了哪些具体成果？

  1. 频率对同步性感知的影响：
     • PSS 受频率显著影响，频率越高时，音频相对于视频稍微滞后时更容易被感知为同步。
     • WSS 不受频率显著影响，这表明同步感知的时间窗口相对稳定。
  2. 眼动与同步性感知的关系：
     • SOA 增大（延迟越高）时，瞳孔直径显著增大，表明较高的认知负荷。
     • 瞳孔扩张对频率变化敏感，在高频下效应减弱。
     • 平滑追随眼动（SPEM）在高频率和更大SOA情况下出现显著滞后。

• 与现有解决方案相比，它有哪些优势？

  1. 提出了通过眼动数据（瞳孔直径和SPEM）作为感知同步性潜在指标的可能性。
  2. 提供了针对音频落后与视频不同步的补偿策略设计建议，尤其适用于特定频率场景的优化（如远程音乐合作或虚拟舞蹈）。

• 实验或评估结果是什么？

  • 数据表明，负的SOA（音频先到）比正的SOA（视频先到）更容易被感知为不同步。
  • 瞳孔直径的增长速率为每毫秒0.0001724毫米，表明SOA对瞳孔扩张有可量化的影响。
  • 所有质量评估（如AIC、BIC）显示，模型在解释因变量的变化时具有良好的拟合度。

• 局限性与未来方向：

  • 局限性：
    1. 实验室环境中的高亮度可能对瞳孔扩张数据产生一定影响。
    2. 单调任务的实验设计中，用户交互维度较少，尚未完全模拟真实使用情境。
  • 未来方向：
    1. 在用户交互更复杂的环境中验证结果（如虚拟现实或远程协作应用）。
    2. 研究不同样本群体对同步性感知的差异。
    3. 探讨更复杂节奏类型（如变化节拍）的效果。

通过本研究，作者深入分析了SOA和频率在节奏性视听同步性中的作用，验证了眼动数据作为潜在同步性衡量标准的可能性，并提出了具体的HCI应用中提高用户体验的设计建议。这为未来研究和技术应用的优化奠定了基础。