Ellie 谈论天气：评估基于平板电脑的语音板在单个哥芬鹦鹉中的表达和丰富潜力

文献标题

Ellie Talks About the Weather: Toward Evaluating the Expressive and Enrichment Potential of a Tablet-Based Speech Board in a Single Goffin’s Cockatoo

文献信息

• 主题领域: 动物计算机交互（ACI）、辅助增强交流（AAC）、动物认知与行为研究
• 关键词: 动物-计算机交互, 触屏交互, 动物丰富化, 鸟类学习, Goffin’s鹦鹉, 社会认知, 增强交流, 科技与动物, 动物行为, 人-动物关系

研究背景与问题

• 问题或挑战:

  1. 科学界对动物使用AAC设备进行交流的研究稀缺，尤其是在动物领域缺乏系统评估框架。
  2. 无一致性方法验证动物使用AAC设备的意图表达或分析行为。
  3. 技术上现有的AAC设备多为人类设计，不完全适用于动物使用。
  4. 很少有关于动物与数字AAC设备互动的长期数据研究。

• 重要性: 该研究不仅可以深化人类与动物之间的沟通理解，还可能通过技术实现动物丰富化，改善其心理健康、生活质量及环境控制感。

• 研究动机与相关工作: 研究发现AAC设备有潜力为动物提供社会和认知丰富化，提升其交流能力。然而，进一步的验证框架开发和数据收集是必需的。本研究聚焦于一只Goffin’s鹦鹉长时间使用平板计算机上的AAC设备的案例，旨在评估其行为背后的表达性和 enrichment（丰富化）价值。

解决方案

• 方法与解决方案:

  1. 实验设置: 数据来源为一只鹦鹉Ellie长达7个月的AAC设备使用视频记录，总计39小时的交互数据，涵盖129个独立日的实验。
  2. 设计框架: 采用了一个新的数据编码和标注框架，用于详细记录鹦鹉与设备交互行为、环境信息以及与人类看护者的互动等。
  3. 数据分析: 创建随机模型，将数据与模拟的随机选择行为进行比较，同时针对鹦鹉行为进行类别化分析以识别主题分布。

• 创新之处:

  1. 开发了专门的分类和编码框架，完整地记录并量化动物与AAC设备的互动。
  2. 将传统的人类AAC评估框架与动物行为研究结合，探索增强交流设备的丰富化功能。
  3. 综合随机建模、交互验证以及主题分类分析，系统地量化了此类设备的潜在表达性。

• 实施步骤与技术:

  1. 记录每次实验细节（位置、时间、行为、互动）并存储相关视频。
  2. 创建与设备界面结构对应的树状数据，设计随机遍历模拟器生成基准数据。
  3. 利用广义线性混合效应模型（GLMM）评估行为偏好及随机性偏离。
  4. 通过语义分类及行为验证（诸如时间投入、任务完成度）验证鹦鹉表达的有效性。

研究成果

• 具体成果:

  1. 选择行为非随机性: 鹦鹉对特定词语的选择不能简单地用设备界面随机性解释；多项模型比较表明其行为偏离随机选择。
  2. 高验证率的选择行为: 在可验证的行为中，92%得到证实（通过任务完成度或行为参与性）。
  3. 选主题分布:
     • “社会-认知交互”相关选择占主导（72.5%）。
     • 相比分布在AAC设备上的图标比例，食物选择的频率比例接近；而环境信息的选择频率被显著低估。

• 相比现有解决方案的优势:

  1. 长期、系统的数据采集: 数据总时长达7个月，是动物AAC领域稀有的长时效实验研究。
  2. 表达性与丰富化的双重探索: 本研究不仅关注是否表达，还加入丰富化价值的评估，提供在动物福利方面的价值。
  3. 方法论贡献: 提供了全面的标注与评估框架，适用于后续对其他物种及个体的扩展研究。

• 局限性与未来方向:

  1. 局限性:
     • 单个研究对象不具备广泛的普适性。
     • 数据量过于庞大，当前分析并未涵盖所有交互场景。
     • 个别技术问题（如设备故障）可能对数据完整性造成影响。
  2. 未来方向:
     • 扩展研究至多个鹦鹉及其他动物，验证现有方法的一般性。
     • 长期跟踪分析行为规律，并持续改进标注与评价框架。
     • 设计专门面向动物用户的AAC设备，涵盖更高个性化与可靠性的特性。