Q6.06.1Short-term gain long-term harm设计研究

短期提升可能以长期损害为代价

别名: 短升长损 · intertemporal metric trade-off · 长期损害

概念解释

同一改动可以让短窗口里的指标变好,同时种下更晚才显现的损害。这是短升长损(short-term gain long-term harm)。提高通知频次,当周打开上升,数月后通知权限被关、回访下降;把免费额度藏进难找的位置,当季转化上升,次年续费时信任被透支。短窗里的胜利和长窗里的损失可以来自同一次设计,不能因为短窗好看就宣布无害。

机制

许多体验损害有延迟。习惯被打断、信任被消耗、学习被捷径替代,都不会在发布次日的转化里结清。短指标捕捉的是即时反应:好奇、被唤回、来不及细想的同意。长损害走的是记忆、声誉和替代选择:人记住被骗的一次,下一次有别的产品就走。界面杠杆往往对短反应更灵敏,对长损害更迟钝,于是短升成为默认可被证明的结果,长损成为无人认领的残差。若发布决策只认短窗,损害会被记在“后来市场变了”或“竞品抢走了”,而不是记在当初那次短升上。

怎么研究

把历史上短窗大胜的改动按更长窗口重读,看同一群组随后的留存、权限关闭、投诉和主动卸载。比较“短窗通过、长窗未跟踪”与“短窗通过且长窗仍跟踪”两类发布,后者若经常出现反转,短升长损就不是个案。质性回访应问的是几个周期之后的解释,而不是发布当周的第一印象。注意把新奇效应、季节和获客质量与设计本身的延迟损害分开。

边界

不是所有短升都有长损:修掉一个真错误,短窗和长窗都可以变好。也不是所有长损都能回溯到某一次短升,有些是策略累积。观察窗不够长时,不能用“没看见损害”当作无损害。生命安全或资金类产品上,短升长损的代价不对称,短窗胜利的证明标准应更高。

怎么落地

  • 对主要靠唤回、稀缺和默认选项拉动短指标的方案,强制写下一列预期的延迟损害及观察窗。
  • 短窗胜利不得单独全量;至少保留一部分流量看到更长窗,或约定全量后的复查日期。
  • 复查时用同一群组的后期指标,而不是用后来新客的混合总量来为旧改动开脱。
  • 若后期指标恶化,把该杠杆类型标为高延迟风险,下一次同类方案不得再只报短窗。

延伸

  • 同组Q6.06.2 长期效应需要长周期实验才能观察 · Q6.06.3 决策周期与效应周期错配是常见陷阱
  • 相邻Q6.10 长期效应与短期指标的冲突 · Q6.04 体验与业务指标
  • 站内检索short-term gain long-term harm · intertemporal trade-off · delayed harm

同组卡片

快捷操作

分享

分享当前页面

ios_share

https://hci.top/zh/handbook/Q6.06.1