来自智能手机的虚拟键盘动态与加速度计数据相结合，作为了解大脑健康的窗口

文献标题

Smartphone-derived Virtual Keyboard Dynamics Coupled with Accelerometer Data as a Window into Understanding Brain Health

文献信息

• 主题领域: 数字健康、心理健康、生物行为分析
• 关键词: 数字健康、智能手机、键盘动态、加速度计数据、认知健康、生物标志、心理疾病、生物行为分析

研究背景与问题

• 问题或挑战: 传统的临床评估依赖于患者的自我报告和面对面诊断，这些方法受到回忆偏差和无法适用于真实环境的局限。此外，即使生态瞬时评估（EMA）提高了数据的时效性，但仍需要用户主动参与。
• 重要性: 智能手机的广泛使用可以通过被动采集日常行为数据（如键盘动态和加速度计数据），为精神与脑健康研究提供更加生态有效和时间相关的生物标志。
• 研究动机: 作者希望通过使用定制的虚拟键盘和加速度计数据，深入研究在自然环境中人与手机之间的行为交互，并预测认知表现和情绪状态。

解决方案

• 提出的方法与解决方案:
  • 开发了一个定制的智能手机虚拟键盘，收集键盘动态数据（如按键间延迟、打字速度、删除键使用率）以及同步的加速度计数据，用于评估认知表现和日间行为模式。
  • 使用传感器融合方法，将键盘动态数据与加速度计数据结合，以更全面地了解用户的脑健康。
• 创新之处:
  • 将自然环境中的键盘动态与加速度计数据结合，用以测量认知性能的日间变化，并分析与时间相关的行为模式。
  • 通过无侵扰且高频率的数据采样，提供比传统临床评估更生态有效的脑健康监测。
• 实施步骤与技术:
  1. 数据采集: 使用“BiAffect”定制键盘收集用户按键元数据和加速度计数据，同时排除手势输入以减少数据变异性。
  2. 数据处理: 对键盘动态和加速度计数据进行预处理，并提取关键变量（如按键间延迟、手机方向和运动状态）。
  3. 统计分析: 使用混合效应模型分析与认知表现、时间相关的行为模式之间的关系，解析不同时间段的手机使用动态。

研究成果

• 具体成果:
  • 与健康组相比，患有情绪障碍的参与者表现出较低的认知性能（评估使用数字Trail-Making Task Part-B）。
  • 键盘动态:
    • 打字速度（按键间延迟）在认知性能较高的人群中表现为明显的日间模式，这些人群在白天打字速度较快，且夜间减慢的程度更小。
    • 按键数量与时间相关联，认知性能较高的个体更符合昼夜节律，打字行为在晚间逐渐减缓。
  • 加速度计数据:
    • 手机运动强度随着时间推移依次递减，表现出非线性日间变化。
    • 患者的手机朝向为直立的概率随着时间减少，但认知性能较高人群表现出更平滑的减少趋势。
• 与现有解决方案的优势:
  • 提供实时且生态有效的数据以评估认知和情绪变化，而非依赖经常受到回忆偏差影响的传统方法。
  • 结合键盘动态和加速度计数据，为多维度的健康状态评估提供新视角。
• 实验或评估结果:
  • 分析了超74,000个打字会话数据，综合模型评估了与时间、认知性能及加速度计数据相关的行为模式。
• 局限性与未来方向:
  • 局限性:
    • 情绪障碍组的症状较轻，限制了深入探索情绪波动对键盘动态和加速度计数据的影响。
    • 使用固定时间点参考而不是个人生物钟，对日间模式的进一步细化分析造成一定限制。
  • 未来方向:
    • 利用穿戴设备的数据（如智能手表）结合时间醒点，深入探讨个人生物钟与行为动态之间的关系。
    • 将认知评估与键盘动态数据的时间序列精准对齐，以优化对认知变化的理解。

总的来说，这项研究展示了通过智能手机采集无侵扰数据评估脑健康的可行性，为更精准、更个性化的行为健康评估方法铺平了道路。