NewsComp:通过比较注释促进多样化的新闻阅读
虚假信息与事实核查用户研究方法(访谈、调查、观察)事实核查员HCI 研究员
文献标题
NewsComp: Facilitating Diverse News Reading through Comparative Annotation
文献信息
- 主题领域: 新闻阅读、比较注释、信息公平性
- 关键词: 新闻阅读, 比较注释, 信息可视化, 多视角, 用户感知, 新闻可信度, 新闻质量, 众包
研究背景与问题
-
发现的问题或挑战:
- 现代新闻媒体往往带有明显的政治立场或偏见,特别是在有争议的主题上,这可能影响公众的观点与态度。
- 阅读多来源的新闻是获取平衡视角的重要方式,但用户倾向于选择符合其观点的内容,形成“确认偏见”与“回声室”效应。
- 传统利用专家将不同来源内容合并的方式在人力上难以应对全球海量新闻内容的挑战。
-
重要性:
- 识别和克服新闻偏见对于民主社会的信息公平至关重要。
- 软件和平台可以帮助用户了解冲突性观点,帮助生成平衡的意见。
-
研究动机与相关工作:
- 现有研究表明,众包可以在某些任务中与专家输出高度相关,但在比较注释这样的复杂任务中尚待探索。
- 过去已有旨在改善信息公平性与理解的界面设计(如NewsCube),但在验证是否能促进用户批判性接触和其感知上的影响方面仍有研究空白。
解决方案
-
提出的方法或解决方案:
- 设计并开发了一款名为 NewsComp 的原型系统,用于支持用户以比较注释的方式分析两篇新闻文章,包括:
- 比较视图:将来自不同来源的两篇新闻文章以并排形式显示。
- 注释工具:用户可以标注两篇文章的相似声明,并指出“不相似但重要”的声明。
- 设计并开发了一款名为 NewsComp 的原型系统,用于支持用户以比较注释的方式分析两篇新闻文章,包括:
-
创新之处:
- 将比较注释作为一种抓取多视角信息的用户交互机制。
- 不仅关注相似点,还衡量用户对“缺失但重要”信息的补充能力。
- 检测比较注释对用户新闻可信度与质量看法的影响。
-
实施步骤与关键技术:
- 对NewsComp界面通过“思维启发式”用户测试和设计迭代,使其更具用户友好性。
- 通过用户实验对 NewsComp 进行评估,使用 AB 实验法比较参与者在两种条件(注释 vs 控制组)下的差异表现。
- 结合机器学习算法(如 Sentence Transformers)分析用户注释行为和文本特征。
研究成果
-
具体成果:
- 注释表现(用户 vs 专家):用户在寻找相似性(precision 高)上的表现优于寻找重要差异性(precision 较低)。
- 用户偏好发现:用户在高对比文章(如移民话题)上的可信度评分受注释任务显著影响,而在低对比文章上无明显效果。
- 用户认知变化:注释任务帮助用户注意到内容视角、信息布置方式、情感用词(如同情 vs 煽动)的微妙差异。
-
与现有解决方案的比较与优势:
- 相比传统的单一新闻来源阅读,比较注释机制促使用户更深度地分析不同新闻视角。
- 通过聚合用户注释数据,可生成高质量数据集用于后续算法优化和事实核查。
-
实验或评估结果:
- 用户的注释精度可通过集体统计(如多用户共识注释)显著提高。
- 对使用 TF-IDF 提取用户的文本理由,发现泛化词汇(如“quote”, "context")有助于区分错误注释,提出优化算法的潜在方向。
-
局限性与未来方向:
- 局限性:实验受控环境限制了与真实新闻消耗场景的接近性;仅聚焦于美国的政治语境。
- 未来方向:
- 增加任务模块化设计或协作注释工具以减少任务复杂度。
- 探索注释任务对长期新闻感知与偏好形成的影响。
- 将注释数据用于训练更高级的自然语言处理模型和自动化事实核查算法。
- 延伸至多人、实时协作以构建“社区型新闻核查”生态系统。
总结
本研究展示了比较注释作为多视角新闻理解一个有潜力的工具,其在改进新闻信息公平性与可信度感知方面起到了一定积极作用。未来工作可以进一步优化用户界面设计与增强数据利用效率。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
help
研究问题
3- 比较标注如何影响用户对新闻的可信度和质量的感知?分类: 新闻与媒体中的公平性、偏见与代表性同类问题arrow_forward
- 用户能否通过比较标注发现新闻内容中“缺失但重要”的信息?分类: 新闻与媒体中的公平性、偏见与代表性同类问题arrow_forward
- 与单一来源新闻阅读相比,比较标注如何促进用户对多视角新闻的理解?分类: 新闻与媒体中的公平性、偏见与代表性同类问题arrow_forward
lightbulb
现实痛点
1- 用户易陷入新闻偏见和偏确信息的“回音室效应”。分类: 新闻与媒体中的公平性、偏见与代表性同类问题arrow_forward
- 60%
微博分析作为一个工作项目
CHI '18· 社交平台设计与用户行为 +1
- 60%
设计和评估使用Discord问题突出新闻报道多样性的界面
CHI '23· 虚假信息与事实核查 +1
- 60%
评估内容监管政策的实施情况:对YouTube上选举错误信息的事后众包审核
CHI '23· 内容审核与平台治理 +1
- 60%
谁不会从事实核查网站中受益?一种心理特征预测选择性避免点击不相投的事实
CHI '23· 语音可访问性 +1
- 60%
对话式接种增强对虚假信息的抵抗力
CHI '26· 对话式聊天机器人 +1
- 60%
论证对话中的自我强化过滤气泡模型
CUI '23· 对话式聊天机器人 +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)
快捷操作
广告推荐
学习 AI 编程到 CodeNow
open_in_new打开DOI链接
DOI: https://doi.org/10.1145/3544548.3581244
一眼看懂
fact_check论文快照
dataset
来源
CHI
calendar_month
年份
2023
emoji_events
奖项
未标记奖项
group
作者
4 位作者
sell
研究子方向
虚假信息与事实核查、用户研究方法(访谈、调查、观察)
work
职业/产业
事实核查员、HCI 研究员
article
内容状态
已索引正文
hub
相关论文
6 篇相关论文