FathomGPT：用于交互式海洋科学数据探索的自然语言界面

视频

DOI

我们推出了FathomGPT，这是一个通过自然语言界面进行海洋科学数据交互调查的开源系统。FathomGPT与海洋科学家紧密合作开发，使研究人员和海洋爱好者能够探索和分析FathomNet图像数据库。FathomGPT提供了一个自定义信息检索管道，利用OpenAI的大型语言模型实现：创建复杂查询以检索图像、分类信息和科学测量；将常见名称和形态特征映射到科学名称；按需生成交互式图表；以及按图像或图像内指定模式进行搜索。在设计FathomGPT时，特别注重优化响应时间以增强用户体验。我们提供了FathomGPT的架构概述和实现细节，以及一系列消融研究，展示了我们在名称解析、微调和提示修改方面的方法有效性。此外，我们还展示了交互式数据探索的使用场景，并记录了海洋科学家和机器学习专家的反馈。