WaitGPT：通过实时代码可视化在数据分析中监控和引导对话式LLM代理

视频

DOI

大型语言模型通过对话用户界面支持数据分析，如OpenAI的ChatGPT（正式名称为高级数据分析或代码解释器）。本质上，LLM生成代码以完成多样化的分析任务。然而，呈现原始代码可能掩盖逻辑并阻碍用户验证。为增强用户对LLM执行分析的理解和控制，我们提出了一种将LLM生成代码转换为交互式可视化表示的新方法。该方法为用户提供LLM生成代码的清晰、逐步实时可视化，使他们能够理解、验证和修改分析中的各个数据操作。我们的设计决策基于一项形成性研究（N=8），探究用户实践和挑战。我们进一步开发了名为WaitGPT的原型，并进行了用户研究（N=12）评估其可用性和有效性。研究发现表明，WaitGPT有助于监控和引导LLM执行的数据分析，使参与者能够增强错误检测并提升对结果的总体信心。