什么是用户参与?:对人机交互及更多领域的241篇研究文章的系统性回顾
作者
研究背景与问题
-
问题发现及挑战
作者指出,用户参与(User Engagement, UE)这一概念在人机交互(HCI)研究中被频繁讨论,但其定义、可靠性和应用仍然模糊且不一致。这种定义的分裂性不仅影响了它在研究中的理论应用,也阻碍了其在实际系统设计中的实践效用。 -
问题重要性
明确定义和一致度量的UE可帮助HCI领域更有效地比较研究成果,开发一致的测量方法,改善研究重复性。然而,当前UE的发展道路显示了概念不明确和操作化不足的问题,这直接限制了其在设计用户界面和分析用户行为方面的实际应用。 -
研究动机与相关工作
作者调查了1993年至2023年间241篇关于UE的文章,旨在总结其定义与测量方法,分析概念化和评估方式之间的对齐程度。之前的相关文献研究也提到过UE的模糊性问题,但缺乏系统的分析以提供更明确的聚焦方向。
解决方案
-
提出的解决方案
作者建议UE应被视为一个“范畴标签”(categorical label)而不是一个统一的构造,直到能发展更系统的框架。同时,作者支持让HCI社区采用“分歧视角”,即在特定研究领域中对UE进行上下文定位,专注于符合特定实践和规范的可测量属性。 -
创新之处
作者主张跳出传统对UE的定义与测量框架,提出将其作为一种灵活标签,并为不同研究领域创建分领域的定义。这种方法对解决研究中定义与度量不一致的问题有重要意义。 -
实施步骤与技术
- 系统布局分析:对ACM Digital Library、Web of Science和Google Scholar收录的241篇相关文章进行检视。
- 提取与分类:手动提取文章中关于UE的定义、测量方法及其数据收集方式。
- 相似性与主题分析:基于语义相似性、自然语言处理工具和开放编码分析,识别定义和评估方法的显著趋势。
- 提出建议:推荐以社区为单位的分领域定义和度量框架。
研究成果
-
主要成果
- 研究发现95.8%的UE定义之间具有较低的语义相似性,其中许多定义类别分散、缺乏一致性。例如,定义中反复出现的特征包括用户行为、感知和技术亲和力。
- UE作为科学构造的效用有限,且其构造效度不清晰。
- UE的测量多集中于行为数据(51.9%)和自我报告数据(34.4%),但缺少标准化和一致的测量方法。
-
优势
- 系统性文献回顾首次系统性地揭示了UE概念分裂和测量不统一的问题。
- 提出的将UE作为范畴标签的建议灵活性强,便于研究者在特定社区内对其进行量化。
-
实验或评估结果
- 对241篇文章的分析表明,绝大多数研究使用的UE定义和测量缺乏统一标准。例如,在社交媒体领域研究中,定义之间的相似度也很低,仅20.4%定义对的语义相似度高于0.5。
- 从测量角度看,多数研究使用个别测量维度,极少数研究结合多种测量手段(仅1.2%使用了完整的组合)。
-
局限性与未来方向
局限性包括未能涵盖所有相关文献(例如非HCI技术领域的用户参与研究),以及分析主要集中于现有样本的语言和主题特征。未来方向包括:- 在特定领域建立更精确的UE理论框架。
- 通过跨领域比较验证UE的理论和实践价值。
- 探索能够整合“用户体验”心理与行为维度的统一测量方法。
总结
总体而言,该研究系统分析了UE概念在HCI领域中被应用的现状,揭示了显著的不一致性和碎片化问题。作者提出的重要观点是将UE定义为一个范畴标签,并在不同HCI子领域中创建特定定义。这种新视角为解决当前问题提供了理论基础,也为后续研究指明了实用方向。
研究问题 / 现实痛点
这篇论文在当前问题库中对应的问题线索。
研究问题
3- 用户参与(UE)的定义和测量为何在HCI领域中存在如此多的不一致性?分类: 研究方法实践、编码流程与设计研究反思同类问题arrow_forward
- UE应被视为更灵活的分类标签还是统一构造,其优缺点是什么?分类: 研究方法实践、编码流程与设计研究反思同类问题arrow_forward
- 如何通过领域特定的框架改进当前UE的测量方法和应用?分类: 研究方法实践、编码流程与设计研究反思同类问题arrow_forward
现实痛点
1- 设计师难以使用现有指标统一评估用户参与(UE)。分类: 研究方法实践、编码流程与设计研究反思同类问题arrow_forward
- 100%
我们如何衡量这一点?! 快速量表开发
CHI '18· 用户研究方法(访谈、调查、观察)
- 75%
定性研究的半自动编码:以用户为中心的探究和初始原型
CHI '18· 用户研究方法(访谈、调查、观察) +1
- 75%
我们如何衡量这一点?! 快速量表开发
CHI '18· 可视化感知与认知 +1
- 75%
我们如何测量这一点?! 快速量表开发
CHI '18· 用户研究方法(访谈、调查、观察) +1
- 75%
百慕大三角区?- 用户体验评估中的方法应用和三角互证的回顾
CHI '18· 用户研究方法(访谈、调查、观察) +1
- 75%
交互性的意义——一些定义和测量的建议
CHI '18· 用户研究方法(访谈、调查、观察) +1
- 75%
衡量交互的“为什么”:用户动机量表(UMI)的开发与验证
CHI '18· 算法公平与偏见 +1
- 75%
技术接受与用户体验:人机交互中经验成分的回顾
CHI '18· 用户研究方法(访谈、调查、观察) +1
- 75%
希克定律对人机交互有多重要?
CHI '20· 可视化感知与认知 +1
- 75%
用户体验问卷(UEQ)的心理测量特性
CHI '22· 用户研究方法(访谈、调查、观察) +1
基于研究子主题与职业分类的 Jaccard 相似度(≥60%)