Q6.09.2Single-proxy gaming设计研究

单一代理指标容易被针对性刷高而不改善真实体验

别名: 单点刷指标 · proxy inflation · 针对性抬高

概念解释

只守住一个代理时,攻击面集中:找到抬高该代理、又不经过真实体验的那条路径即可。这是单代理刷高(single-proxy gaming)。把“我喜欢”做成关掉弹窗的唯一按钮,喜欢率上升,态度并未改善;把视频自动续播算进观看时长,时长上升,观看并未发生。单一使针对性便宜——只要研究一个数字的定义缝,不必同时骗过一簇互相牵制的观察。

机制

代理是目标的窄切口。切口越窄,能塞进去的无关行为越容易设计:一个点击、一个默认选项、一次时机挑选。真实体验是宽的,要同时改善发现、理解、完成和事后评价,成本高。理性的刷法是走窄切口。单代理还有可预测性:团队知道评审只看这一列,就会把设计探索收成“如何让这一列动”,探索本身被定义缝塑造。刷高成功之后,代理看起来更像目标——因为它涨了——于是更没有动力引入第二观察,单点被锁死。

怎么研究

针对现行单代理做红队:列出不改善目标也能抬高它的界面改动,在小流量上实施其中安全的几项,测量代理与独立效标是否分裂。分裂越大,单点越脆。历史案例中,代理持续创新高而任务成功、投诉、自愿回访不动或反向的区间,是刷高已经发生的候选。定义审计也很有用:分母排除、默认值、自动续算一旦出现,单代理往往已经被打开过。

边界

有些代理几乎没有缝,例如崩溃率、支付失败率,针对性刷高要造假数据才做得到,那是另一类问题。单代理在探索期用作侦察可以接受,前提是不进入成功宣布。把单代理换成另一个单代理,只是搬家,不降低针对性。刷高也不都来自恶意:自动续播可能被当成“连续体验”的善意设计,效果上仍是刷时长。

怎么落地

  • 进入通过线的代理必须能经受至少一种“不改善目标也能抬高它”的演练,演练能成功则不得单独作为通过线。
  • 禁止把关闭、跳过、继续的唯一路径做成代理事件本身。
  • 代理创新高时,并列一张未进入奖励的效标;效标不动则按刷高处理,而不是按体验胜利处理。
  • 发现定义缝(默认选中、自动续算、排除困难用户)立刻关掉,而不是先争论动机。

延伸

  • 同组Q6.09.1 指标一旦被用作考核依据,团队会优化指标本身而非其代表的目标 · Q6.09.3 交叉使用多个代理指标可以降低被单点操纵的风险 · Q6.09.4 需要配套的反向指标监控代理关系是否已经失真
  • 相邻Q6.05 指标的可操纵性 · Q6.01 分类框架
  • 站内检索single-proxy gaming · proxy inflation · metric loophole

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/Q6.09.2