Q6.03.3Wrong north star misdirection设计研究

指标选错会系统性误导组织

别名: 错误北极星 · metric misdirection · 系统性误导

概念解释

北极星一旦选错,错误会被规划、招聘、实验队列和对外叙事放大,而不是停在报表里。这是错误北极星的系统性误导(wrong north star misdirection)。把“日打开次数”当成内容产品的方向,组织会系统性地奖励能唤回注意的设计,而不是能完成阅读或创作的设计;几个季度之后,团队结构、推荐策略和成功标准都会按这个错误长成。选错不同于后来被人钻空子:在钻空子之前,方向本身就已经指错了。

机制

单一方向的对齐力量在选错时不会关闭。招聘按“能把该数字做上去”来筛选;实验队列按“预期能移动该数字”来排序;失败被定义为“该数字没动”,即使用户价值已经变化。误导是系统性的,因为它改的是什么算进展,而不只是某一次判断。常见选错包括:把平台规模当成用户价值(注册量)、把中间态当成完成(打开而非办成)、把公司收入时点当成体验成功(当季 GMV)。一旦这些计数成为方向,相反的证据很难进入:任务失败、后悔和高质量用户离开,只要不开反向计数,就不会否决路线图。纠正的成本随时间上升,因为人员和系统已经按错误方向耦合。

怎么研究

对候选北极星做反事实:若过去四季度只优化它,实际会上哪些项目、砍哪些项目,再与独立的用户价值证据对照。用“错误方向敏感度”检验:列出该计数最容易奖励、但价值上不可接受的杠杆,看这些杠杆是否在现行激励下已经出现。也可以对比相邻产品或历史阶段:方向更换前后,被批准的实验类型分布是否整片移动。误导成立的证据是行动组合的结构性偏移,而不是单点数字好看不好看。

边界

方向需要随阶段调整,不等于每次调整都证明上一颗星选错;过期和选错要分开写。局部 KPI 选错的伤害通常可被其他组对冲,北极星选错没有对冲。有时“错”来自窗口:一个对年度正确的计数在月度决策里会误导,那是周期问题而非构念选错。把综合指数当北极星,会让“选错”变成不可审计的权重错误,更难发现。

怎么落地

  • 为现行北极星写三条它会系统奖励、但产品不能接受的杠杆;若这些杠杆已在路线图上,暂停该方向。
  • 用一份不进入考核的价值证据(任务完成、重复使用、主动推荐)每季度校对方向,出现持续背离则启动重选。
  • 重选必须同时改实验通过线和规划模板,否则旧方向会凭惯性继续排序项目。
  • 记录北极星的启用日期与适用阶段,避免把一个阶段的正确计数延用到下一个阶段。

延伸

  • 同组Q6.03.1 单一指标提供方向一致性 · Q6.03.2 需要护栏指标防止片面优化
  • 相邻Q6.05 指标的可操纵性 · Q6.04 体验与业务指标
  • 站内检索wrong north star · metric misdirection · north star metric

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/Q6.03.3