我需要找到那张图表：数据工作者如何导航、总结和传达分析对话

文献标题

"I Need to Find That One Chart": How Data Workers Navigate, Summarize and Communicate Analytical Conversations

出版信息

• 主题领域: 人机交互与数据分析的对话式界面。
• 关键词: 分析对话、数据工作者、大语言模型（LLMs）、导航策略、摘要、结构化界面、人工智能协作、意义构建、沟通、用户研究。

背景与问题

• 问题/挑战: 当前的对话式界面生成线性记录，与现实世界中数据分析的迭代性和非线性特性不符，导致重访和摘要变得困难。
• 重要性: 有效的分析对话导航和沟通对于与利益相关者分享发现或交接分析工作至关重要，但现有工具对此支持不足。
• 动机与相关研究: 先前研究探讨了引导大语言模型、验证输出以及增强计算笔记本的方式，但在理解用户如何重访和沟通分析对话发现方面仍存在空白。本文基于意义构建框架和计算笔记本研究，旨在解决这些问题。

解决方案

• 提出的方法: SyncSense，一种设计探针，通过过滤、多层次导航和按需细节等结构化元素增强对话式界面，以支持重访和摘要。
• 创新点:
  1. 基于10名参与者的用户研究，观察分析对话中重访和摘要的行为。
  2. 开发了一个开源设计探针，集成了结构化导航和摘要创作功能。
  3. 提出了设计启示，强调导航和沟通中的结构化元素以及可控的人工智能辅助。
• 流程与关键技术:
  • SyncSense将对话元素组织为线程、言语行为、工件和洞察。
  • 提供同步面板，用于概览、细节探索和带注释的原始对话。
  • 包括一个摘要创作面板，允许用户拖动结构化元素、优化摘要，并利用人工智能进行风格调整。

结果

• 具体发现:
  • 分析对话平均包含29.5轮交流，涉及多种工件，如代码（22轮/会话）、可视化（9.4轮/会话）和数据表（7.2轮/会话）。
  • 参与者使用了顺序导航、抽象导航、视觉回忆和过滤等策略进行对话导航。
  • 创作的摘要平均为245字，结构化为标题和项目符号，重点突出洞察和工件。
• 相较基线的优势: SyncSense使参与者能够高效地定位、回忆和优先处理内容，提供了标准聊天界面所缺乏的结构化导航和摘要创作功能。
• 实验/评估:
  • 包括10名参与者的两阶段用户研究，分析数据集并在一周后重访对话。
  • 任务包括为不同受众（如非技术高管与技术分析师）和格式（如报告与消息）撰写摘要。
• 局限性与未来工作:
  • 由于仅使用单一数据集和来自一个组织的参与者群体，研究的普适性有限。
  • 需要验证基于大语言模型的提取技术，并探索更广泛的数据集和领域。
  • 未来研究应探讨导航策略与摘要质量之间的因果关系。

总结

本研究提出了SyncSense，一种用于导航和摘要分析对话的设计探针，解决了重访和沟通中的挑战。用户研究的实证发现揭示了反复出现的信息需求（定位、回忆、优先排序）和策略（顺序导航、过滤、视觉回忆）。参与者创作了简洁、结构化的摘要，针对受众需求进行了定制，强调了对人工智能生成草稿的人工控制。研究突出了结构化导航、集成沟通工作流和可控人工智能辅助的机会，为未来数据分析中的对话式界面提供了设计启示。