"我看到你！": 从视频游戏的主题分析中设计关于智能体视觉感知的界面线索框架

文献标题

“I See You!”: A Design Framework for Interface Cues about Agent Visual Perception from a Thematic Analysis of Videogames

文献信息

• 主题领域: 人机交互、人机协作设计
• 关键词: 人类-机器人交互, 视频游戏, 视觉提示, 定性分析框架, 认知建模

研究背景与问题

• 问题或挑战:

  • 随着人工智能代理（如机器人、虚拟助手）的普及，必须更好地实现人与代理间的协作。
  • 人类需要了解代理所感知的内容，比如是否“看到”特定目标。
  • 缺乏关于“视觉提示”设计的系统性框架。

• 重要性:

  • 提供视觉提示可以帮助人类更好地理解人工智能代理的感知与行为能力，从而提升安全性、隐私性和效率。
  • 这些提示对社会背景下的机器人部署尤为重要，如家庭环境或公共空间。

• 研究动机与相关工作:

  • 视频游戏多年来成功地设计了各种交互，尤其是视觉提示。了解这些设计策略有助于推动人机交互领域发展。
  • 视频游戏中的提醒机制，例如基于视觉目标和感知的用户界面，可以作为人工代理交互设计的灵感。
  • 前期研究集中于机器人行为透明性和动画原理，但忽略了视觉感知能力的系统化沟通。

解决方案

• 提出的解决方案:

  • 通过对流行的视频游戏中视觉提示的主题分析，开发了一种框架，支持设计能够使代理感知对人类可见的交互界面。
  • 设计了一个视觉和声音提示的分类框架，描述了它们能够传递的感知信息类型（例如视野范围、视觉目标等）。

• 解决方案创新点:

  • 从游戏设计中获取灵感，从常规但成功的应用中提炼设计原则。
  • 优化人机交互中的情况感知能力，帮助用户形成代理能力的准确心智模型。

• 实施步骤及技术:

  • 使用布劳恩和克拉克的主题分析方法对多个视频游戏进行迭代研究。
  • 提取60种视觉提示实例，确定关键属性如提示的起源、视觉化/声音化方式、信息种类等。
  • 在多个层面定义提示特性，包括检测信息的呈现形式、视觉目标行为、感知者行为等。

研究成果

• 具体成果:

  • 提供了一套综合视觉提示设计的框架（包括视觉化、声音化两种模式）。
  • 框架列举了适用于设计的13种提示类型，并通过实际游戏数据验证了其可行性。
  • 突出了“非二元检测”视觉提示的重要意义，即代理从未完全检测到目标之间的中间状态。

• 优势:

  • 提供了现有设计导向的全面综述，通过游戏案例展示如何设计基于视觉的交互提示。
  • 优化用户感知代理能力的方式，提高人机互动效率与精确度。
  • 为机器人、虚拟助手设计提供了输入方式（声音、视觉化）及提示类型的选择依据。

• 实验或评估结果:

  • 框架明确了多种实际应用：如搜索与救援机器人需要提供清晰、可信的视觉信号；公共空间的机器人提示需要具备一定的隐私保护。
  • 使用游戏示例验证了视觉提示的有效性，尤其是在动作与潜行类型的游戏中的设计。

• 局限性与未来方向:

  • 局限性：
    • 视频游戏主要基于视觉感知设计，在听觉或其他感官提示方面研究不足。
    • 框架偏重于对敌对关系的设计，缺乏协作型提示机制。
    • 视频游戏数据很难完全还原交互真实体验，可能忽略地方性声音提示效果。
  • 未来方向：
    • 扩展到非视觉感知领域提示的设计，例如听觉、触觉。
    • 研究如何组合不同类型的提示，提高可读性、情感特性与信息量。
    • 在真实机器人场景中测试框架的兼容性，改进硬件与用户体验。

总结

本文通过分析视频游戏中的视觉提示设计，提出了一个支持人机交互设计的框架。游戏设计中多年的交互探索为设计技术提供了丰富实践经验。未来将深入研究这些提示的组合设计，并将成果应用于机器人与人工代理的真实场景，以提高人与智能代理的协作效率和透明度。