NewsComp:通过比较注释促进多样化的新闻阅读

虚假信息与事实核查用户研究方法(访谈、调查、观察)事实核查员HCI 研究员

文献标题

NewsComp: Facilitating Diverse News Reading through Comparative Annotation

文献信息

  • 主题领域: 新闻阅读、比较注释、信息公平性
  • 关键词: 新闻阅读, 比较注释, 信息可视化, 多视角, 用户感知, 新闻可信度, 新闻质量, 众包

研究背景与问题

  • 发现的问题或挑战:

    • 现代新闻媒体往往带有明显的政治立场或偏见,特别是在有争议的主题上,这可能影响公众的观点与态度。
    • 阅读多来源的新闻是获取平衡视角的重要方式,但用户倾向于选择符合其观点的内容,形成“确认偏见”与“回声室”效应。
    • 传统利用专家将不同来源内容合并的方式在人力上难以应对全球海量新闻内容的挑战。
  • 重要性:

    • 识别和克服新闻偏见对于民主社会的信息公平至关重要。
    • 软件和平台可以帮助用户了解冲突性观点,帮助生成平衡的意见。
  • 研究动机与相关工作:

    • 现有研究表明,众包可以在某些任务中与专家输出高度相关,但在比较注释这样的复杂任务中尚待探索。
    • 过去已有旨在改善信息公平性与理解的界面设计(如NewsCube),但在验证是否能促进用户批判性接触和其感知上的影响方面仍有研究空白。

解决方案

  • 提出的方法或解决方案:

    • 设计并开发了一款名为 NewsComp 的原型系统,用于支持用户以比较注释的方式分析两篇新闻文章,包括:
      • 比较视图:将来自不同来源的两篇新闻文章以并排形式显示。
      • 注释工具:用户可以标注两篇文章的相似声明,并指出“不相似但重要”的声明。
  • 创新之处:

    • 将比较注释作为一种抓取多视角信息的用户交互机制。
    • 不仅关注相似点,还衡量用户对“缺失但重要”信息的补充能力。
    • 检测比较注释对用户新闻可信度与质量看法的影响。
  • 实施步骤与关键技术:

    • 对NewsComp界面通过“思维启发式”用户测试和设计迭代,使其更具用户友好性。
    • 通过用户实验对 NewsComp 进行评估,使用 AB 实验法比较参与者在两种条件(注释 vs 控制组)下的差异表现。
    • 结合机器学习算法(如 Sentence Transformers)分析用户注释行为和文本特征。

研究成果

  • 具体成果:

    • 注释表现(用户 vs 专家):用户在寻找相似性(precision 高)上的表现优于寻找重要差异性(precision 较低)。
    • 用户偏好发现:用户在高对比文章(如移民话题)上的可信度评分受注释任务显著影响,而在低对比文章上无明显效果。
    • 用户认知变化:注释任务帮助用户注意到内容视角、信息布置方式、情感用词(如同情 vs 煽动)的微妙差异。
  • 与现有解决方案的比较与优势:

    • 相比传统的单一新闻来源阅读,比较注释机制促使用户更深度地分析不同新闻视角。
    • 通过聚合用户注释数据,可生成高质量数据集用于后续算法优化和事实核查。
  • 实验或评估结果:

    • 用户的注释精度可通过集体统计(如多用户共识注释)显著提高。
    • 对使用 TF-IDF 提取用户的文本理由,发现泛化词汇(如“quote”, "context")有助于区分错误注释,提出优化算法的潜在方向。
  • 局限性与未来方向:

    • 局限性:实验受控环境限制了与真实新闻消耗场景的接近性;仅聚焦于美国的政治语境。
    • 未来方向:
      1. 增加任务模块化设计或协作注释工具以减少任务复杂度。
      2. 探索注释任务对长期新闻感知与偏好形成的影响。
      3. 将注释数据用于训练更高级的自然语言处理模型和自动化事实核查算法。
      4. 延伸至多人、实时协作以构建“社区型新闻核查”生态系统。

总结

本研究展示了比较注释作为多视角新闻理解一个有潜力的工具,其在改进新闻信息公平性与可信度感知方面起到了一定积极作用。未来工作可以进一步优化用户界面设计与增强数据利用效率。

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/papers/chi/95836/2023

广告推荐

学习 AI 编程到 CodeNow

open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3544548.3581244
一眼看懂

论文快照

fact_check
dataset
来源
CHI
calendar_month
年份
2023
emoji_events
奖项
未标记奖项
group
作者
4 位作者
sell
研究子方向
虚假信息与事实核查、用户研究方法(访谈、调查、观察)
work
职业/产业
事实核查员、HCI 研究员
article
内容状态
已索引正文
hub
相关论文
6 篇相关论文