穿针引线：用于浏览线程化在线讨论的可视化工具

文献标题

Needling Through the Threads: A Visualization Tool for Navigating Threaded Online Discussions

出版信息

• 主题领域: 用于管理分层在线讨论内容的可视化工具。
• 关键词: 内容管理，分层讨论，可视化，Reddit，毒性检测，人机协作，时间分析，交互工具，社区规范，社会技术系统。

背景与问题

• 问题/挑战: 分层在线讨论（例如Reddit上的讨论）由于其庞大的信息量、快速的更新节奏以及深层嵌套结构，导致对话流程难以追踪，管理工作复杂化。现有工具缺乏多层次的上下文理解，无法有效应对特定社区的规范需求。
• 重要性: 有效的管理对于维护社区健康和安全至关重要，同时可以减少接触有害内容的风险，并缓解管理者的工作压力。提升管理效率和准确性的工具对于大规模在线社区的管理工作尤为重要。
• 动机与相关研究: 之前的研究开发了针对线性或主题型讨论的计算工具和可视化系统，但未能充分解决分层讨论的复杂性。现有的管理工具（如Reddit的ModQueue）缺乏上下文意识，主要依赖于人工审查或基础的关键词过滤，这对于细致入微的社区管理来说是不够的。

解决方案

• 提出的方法: Needle 是一个交互式可视化工具，提供多层次的可视化分析，帮助管理者高效地浏览分层讨论。它总结了活动、毒性和投票趋势等关键指标，从而实现高效的监控和干预。
• 创新点:
  1. 结合了信息流级别和线程级别的可视化，支持分层讨论的多层次总结。
  2. 集成毒性检测和视觉提示，引导管理者关注问题内容。
  3. 提供可定制的设置，以适应不同社区规范和讨论规模。
• 流程和关键技术:
  • 使用Reddit API进行数据收集，并通过Perspective API进行毒性评分。
  • 信息流级别界面：通过直方图、条形图和时间可视化展示整个子版块的活动和毒性趋势。
  • 线程级别界面：提供单个线程的详细视图，突出显示有毒评论并支持直接管理操作。
  • 可定制的阈值和排序选项，使管理者能够根据社区需求调整工具。

结果

• 具体发现:
  • 管理者平均每次会话调整毒性阈值270.8次，而分数阈值仅调整35.6次。
  • 8/10的管理者认为视觉高亮和过滤功能非常有用。
  • 线程级别的可视化在识别异常方面效果显著，但由于回复量较低，针对TLC的可视化影响较小。
• 相较基线的优势:
  • 与Reddit的ModQueue相比，Needle 提供了上下文可视化，支持主动管理并降低认知负荷。
  • 毒性指标和视觉提示帮助管理者更有效地识别未报告的问题内容。
• 实验/评估:
  • 对10位来自不同子版块的Reddit管理者进行用户研究（平均社区规模：184万成员，平均管理经验：6.5年）。
  • 任务包括定位感兴趣的线程并使用 Needle 管理评论。
  • 半结构化访谈和主题分析验证了工具的可用性和有效性。
• 局限性与未来工作:
  • 使用预先抓取的数据进行模拟环境测试，可能无法反映实时管理动态。
  • 与现有工具（如AutoMod和ModQueue）的集成有限。
  • 通用毒性检测模型难以适应社区特定的规范；未来工作应开发上下文敏感的模型。

总结

Needle 是一个专为Reddit管理者设计的可视化工具，用于浏览和管理分层讨论。通过提供多层次的可视化总结、毒性指标和可定制设置，它实现了高效的主动管理，同时降低了认知负荷。针对10位管理者的用户研究表明，该工具在识别问题内容和融入现有工作流程方面表现出色。然而，在适应社区特定规范的毒性检测和与现有管理工具的集成方面仍存在挑战。未来工作将专注于开发社区特定模型、整合用户级信号，并扩展工具的功能以服务于管理者和普通用户。