赋予触摸以意义：社会性触摸的上下文分析

文献标题

Touch with Meaning: A Contextual Analysis of Social Touch

出版信息

• 主题领域: 社会触摸在人机交互（HCI）中的情境与文化分析。
• 关键词: 社会触摸、情境分析、HCI、计算机视觉、文化规范、触摸分类法、媒介化通信、关系动态、手势识别、触摸数据集。

背景与问题

• 问题/挑战: 现有的HCI研究通常将触摸孤立处理，忽视了关系、文化和情境因素对其意义的塑造。当前的数据集规模较小、场景化且缺乏情境深度。
• 重要性: 理解社会触摸的细微意义对于设计具有社会意识的技术至关重要，例如虚拟化身、社交代理和媒介化通信系统。
• 动机与相关研究: 先前的研究探讨了情感触摸和触觉技术，但未能融入真实世界互动中的情境细微差别。本文通过分析触摸如何通过关系、文化和环境情境获得意义，填补了这一空白。

解决方案

• 提出的方法: 使用从YouTube视频中提取的5,016个标注触摸事件数据集，结合半自动化计算机视觉管道进行社会触摸的大规模情境分析。
• 创新点:
  1. 引入目前最大的公开可访问社会触摸情境数据集，包含46个特征的标注。
  2. 开发了一种将手势、身体部位、关系动态和情境设置与社会触摸意义相联系的分类法。
  3. 为超越手势识别、实现意义识别的社会意识技术设计提供启示。
• 流程与关键技术:
  • 检索96,637个具有文化多样性的YouTube视频，筛选出5,016个经过验证的社会触摸事件。
  • 使用计算机视觉（YOLOv8、OpenPose）和AI辅助标注（Gemini）检测并标注触摸事件。
  • 通过人工验证标注以确保可靠性。
  • 开发了一种将社会触摸意义分类为十个核心类别（如情感、安慰、支配等）的分类法。

结果

• 具体发现:
  • 相同的手势（如肩膀拍打）在不同情境下可以传达不同的意义（如安慰与支配）。
  • 相似的意图（如鼓励）可以通过不同的手势（如背部拍打、握手）表达。
  • 文化差异：美国情境偏向正式手势（如握手），而韩国情境则更多涉及亲密的手臂和肩膀接触。
  • 公共场所限制触摸为简短、正式的手势，而私人场所允许更亲密的表达。
• 相较基线的优势:
  • 数据集规模（5,016个验证事件）和情境丰富性超越了现有数据集（如CoST、SATED和VTD）。
  • 捕捉了自然的、真实场景中的互动，而非人为设计或实验室控制的场景。
• 实验/评估:
  • 卡方检验和Kruskal-Wallis检验揭示了触摸意义、持续时间和身体部位的显著情境差异。
  • 人工验证达到了较高的标注者间一致性（Cohen’s κ = 0.75）。
• 局限性与未来工作:
  • 文化范围有限（美国和韩国）；需要更广泛的文化比较。
  • 数据集优先考虑广度而非细粒度，可能遗漏特定手势的微模式。
  • 未来工作包括扩展文化情境、开发实时触摸解释的计算模型，以及将研究成果整合到交互系统中。

总结

本文对社会触摸进行了大规模情境分析，提出了一个包含5,016个标注触摸事件的数据集和十个核心意义的分类法。通过计算机视觉和AI辅助标注，研究揭示了关系、文化和情境如何塑造触摸的解释。研究结果强调了触摸意义的多样性、文化差异以及在媒介化触摸系统中嵌入情境的重要性。该研究为触觉技术、虚拟化身和社交机器人提供了可操作的设计启示，强调了基于意义驱动和情境感知的触摸呈现需求。