Snowy:用于会话式可视分析的语句推荐系统
大语言模型(LLM)的人机协作交互式数据可视化软件工程师与开发者数据科学家与分析师
文献标题
Snowy: Recommending Utterances for Conversational Visual Analysis
文献信息
- 主题领域: 数据可视化中的自然语言接口(NLIs)、推荐系统以及人机交互设计
- 关键词: 自然语言推荐, 语言语用学, 直指性语句, 语境, 数据趣味性
研究背景与问题
-
发现的问题或挑战:
- 使用自然语言界面(NLIs)进行数据可视化分析依旧面临两大挑战:
- 缺乏分析指导(即用户不清楚应该从哪个数据特征入手)。
- 自然语言输入的可发现性差(用户不确定如何构造输入语句)。
- 即使NLIs语言理解功能有所改善,用户仍在分析过程中挣扎于构造合适的查询语句。
- 需要理解数据域的特性并识别潜在的分析模式。
- 系统的语言理解能力要求用户根据特定语法调整输入语句。
- 使用自然语言界面(NLIs)进行数据可视化分析依旧面临两大挑战:
-
重要性:
- 探索数据时,如果缺乏分析引导或者不得其法地构造查询语句,可能会干扰用户的分析流程。
- 如果这些问题得不到解决,可能会阻碍NLIs在可视化分析中的广泛应用。
-
研究动机与相关工作:
- 现有可视化推荐工具多关注数据图形编码或者数据趣味性,但忽略了自然语言输入的发现性。
- 当前也存在一些自然语言界面(NLIs),但他们未对帮助用户学习语言构造和分析指导做出特别优化。
- 作者希望通过引入推荐系统改善上述问题,从而提升数据分析的有效性。
解决方案
-
方法或解决方案: 作者提出了一个名为“Snowy”的原型系统,通过推荐相关的自然语言表达(称为推荐语句)来解决分析指导问题,同时让用户了解系统支持的语言结构。
-
创新之处:
- 结合数据趣味性指标与语言语用学的原则,生成并推荐语句。
- 支持三类推荐语句:
- 新分析方向(新查询)。
- 当前数据视图的深入分析(后续语句)。
- 基于数据的交互操作(如直指性语句)。
- 系统通过会话中心设计(conversational centers)实现情境推荐,与用户交互状态无缝衔接。
-
实施技术与步骤:
- 数据分析: 使用数据趣味性指标(例如相关性、标准差)计算潜在有趣的属性组合。
- 推荐语句生成: 基于上下文状态、历史交互记录和分析目标,生成参数化的语句。
- 语言实现: 使用模板,将分析目标和数据参数转换为多样化的自然语言表达。
- 推荐引擎: 根据用户当前的上下文状态实时调整推荐内容,提供针对性语句。
研究成果
-
具体成果:
- Snowy支持用户通过自然语言查询数据,同时提供了针对性的分析指导。
- 系统生成的推荐能够帮助用户构造有意义的分析语句,并引导数据探索。
- 通过语句推荐,用户能够逐步熟悉系统支持的语言结构。
-
优势与比较:
- 与传统可视化推荐系统相比,Snowy不仅从数据模式出发,还提供了语言发现性。
- 同类自然语言系统通常不关注语句推荐对语言学习的支持,而Snowy加入了这一设计。
-
实验或评估结果:
- 在初步用户研究中,参与者普遍认为推荐语句有助于引导数据探索。
- 推荐语句有助于用户学习如何使用自然语言与系统交互,同时提供分析方向。
- 在开放式数据探索中,推荐比定向分析更能帮助用户。
-
局限性与未来方向:
- 当前系统仅支持有限的可视化类型与分析目标,需要进一步扩展支持的功能。
- 应深入研究推荐语句对用户工作流与学习效率的具体影响,例如与基线系统比较。
- 系统需要优化推荐内容的解释性,以帮助用户理解推荐背后的逻辑。
- 可以探索将语句推荐应用于语音交互或聊天机器人等新领域。
通过结构化设计和初步验证,本文提出了一个实用的工具和设计框架,展示了自然语言推荐如何在数据分析中提升用户体验并指导用户认知。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3lightbulb
现实痛点
1- 100%
「图表就像护栏」:使用交互式共享表示结构化生成式AI辅助假设探索
C&C '25· 大语言模型(LLM)的人机协作 +1
- 80%
处理多方面个人信息系统的资讯过载
CHI '18· 大语言模型(LLM)的人机协作 +2
- 80%
InterWeave:在上下文中呈现搜索建议以支持信息搜索与综合
UIST '22· 大语言模型(LLM)的人机协作 +1
- 80%
Flowco:通过数据流图和大型语言模型实现可靠端到端数据分析的混合主动式创作系统
UIST '25· 生成式AI(文本、图像、音乐、视频) +2
- 75%
当大卫遇到歌利亚:结合智能手表与大型垂直显示屏进行可视化数据探索
CHI '18· 交互式数据可视化
- 67%
Jupybara:利用LLM实现可用于操作的数据分析和叙事设计空间
CHI '25· 大语言模型(LLM)的人机协作 +2
- 67%
Dango:使用大型语言模型的混合发起数据整理系统
CHI '25· 大语言模型(LLM)的人机协作 +2
- 67%
使多模态大语言模型成为可靠的图表数据提取器:基准测试与训练框架
CHI '26· 生成式AI(文本、图像、音乐、视频) +2
- 67%
PleaSQLarify:面向自然语言数据库查询的视觉语用修复
CHI '26· 大语言模型(LLM)的人机协作 +2
- 67%
SCSimulator:一种基于大语言模型多智能体模拟的供应链合作伙伴选择探索性可视化分析框架
IUI '26· 大语言模型(LLM)的人机协作 +2
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3472749.3474792
一眼看懂
fact_check论文快照
dataset
来源
UIST
calendar_month
年份
2021
emoji_events
奖项
未标记奖项
group
作者
2 位作者
sell
研究子方向
大语言模型(LLM)的人机协作、交互式数据可视化
work
职业/产业
软件工程师与开发者、数据科学家与分析师
article
内容状态
已索引正文
hub
相关论文
10 篇相关论文