G3.17.2disclose personalized ranking设计研究
个性化排序的结果需提示这是定制结果而非通用结果
别名: 个性化提示 · customized results · 非通用排序
概念解释
同一查询,登录用户看到的前十和未登录、或另一账号看到的前十可以不同:历史、地点、角色、点击被写进了排序。标明这是定制结果,是把「这份名单针对你」说出来,并提供看通用名单的路。不标的话,人会把私人排序当成世界的客观排名,拿它去跟人争论「搜这个就该是这个」,或以为对象对所有人一样可发现。Pitkow、Teevan 等人对个性化检索的研究反复碰到这个透明问题:定制一旦看不见,就被当成中性。
它不是把画像细节摊开,也不是关闭个性化。它要求名单的种类可分辨:通用的还是为你排的。
机制
排序被默认读成对查询的公共回答。个性化把私人变量混进这个回答,却不改列表的外观,于是公共与私人在观感上同构。后续行为按公共来:转发链接并假设对方看到同一条、用前三训练自己的查询习惯、把「搜不到」说成内容不存在。对方的名单不同,习惯被私人变量塑造,内容其实在通用名单里。
提示把名单重新分类为「针对我的视图」。分类一旦成立,人会预期别人看到的不一样,也会去找未定制的对照。没有对照,提示只是一枚徽章,无法检验定制到底改了什么,个性化仍然不可被问责。
怎么研究
比较「静默个性化」与「标明并提供通用对照」时,人对名单公共性的判断和查询策略。
- 范式:同一查询给定制名单和通用名单,一种条件不说差别,一种标明「为你排序」并允许切换。问「同事搜同一句话会看到什么」、以及是否会为了对照去切换。日志可看切换控件的使用率,但不用率不等于不需要——可能是发现不了。
- 自变量:是否标明定制、是否能一键看通用名单、定制所用信号是否用一句话概括(「根据你常打开的项目」)。
- 因变量:公共性判断的准确率、误把私人前三当成全员前三的比例、为核对而切换的次数。
- 方法论注意点:实验室里若两人不当面对比屏幕,公共性错误很难被体验。至少要用「把结果描述给下一位被试」的传递任务。不要用满意度当成功:静默定制往往更「顺」,同时更误导。
边界
没有任何个人信号的排序(未登录、纯关键词、无历史)标「为你定制」是说谎,会制造不存在的私人性。协作检索、共享屏幕、培训场景里定制的代价最高,默认应提供通用名单或自动降级。推荐流(「猜你想看」)本来就被理解为私人,再标一次边际小;搜索框发出的查询仍被当成公共问题,必须标。儿童或被监护账号的定制可能不应被本人关闭,但仍然要标明名单不是全库中性排序。
怎么落地
- 当历史、角色、地点或点击改变了排序,在结果页用稳定文案标明「为你排序」或「已按你的工作区加权」。
- 提供「查看未定制结果」或等价切换,切换后查询词与筛选保持不变。
- 概括信号到用户能认的一层(「你最近的项目」「你所在地区」),不要列特征权重。
- 验证:两个账号搜同一句话,前三不同。当事人应能指出名单是定制的,并能切到与未登录一致的顺序。若两份名单外观完全一样、也无法切换,定制被当成了通用结果。