行业基准值来源不透明时不宜直接引用比较
别名: 行业基准 · 黑箱对标 · 不可核查的常模
概念解释
咨询报告、厂商白皮书和“行业平均推荐值”常常只给出一个数字，不给出题目原文、抽样框、收集年份、排除规则、加权和应答率。这样的数字是来源不透明的基准（opaque benchmark）：看不见它测的是谁、在什么接触点、用哪一句题。把本公司分数拿去减这个数字，得到的差没有可解释的单位——差的可能是行业，也可能是题干、渠道或把谁踢出了样本。不宜引用，不是因为对标本身非法，而是因为无法核查的常模不能当作比较组。
机制
推荐值对测量过程极度敏感：何时弹出、是否允许跳过、是否把“非真实用户”删掉、用 0–10 还是 1–5、要不要开放评论，都会移动合成分数。外部基准几乎从不公开这些选择，却以“行业水平”的权威口吻出现。引用它的组织等于把对方未声明的操作化认领成自己的尺子。数字越好看，越容易在汇报里变成无需方法附录的事实。一旦基准的供应商同时卖提升分数的服务，激励是让客户显得低于平均，而不是让平均可复现。不可核查的常模因此不是中性背景，而是一个无法审计的对照臂。
怎么研究
把拟引用的基准当成一份缺失方法的研究来审：列出题目、总体、时间窗、应答率和清洗规则中有哪些未知。未知项无法补齐，该数字就只能标为传闻。若供应商提供微数据或至少分行业、分渠道的分布，再评估与本公司操作化是否匹配；匹配失败则停止数值比较，最多讨论方向。用本公司历史同期、随机对照或预注册的内部基线做比较，比引用外部点值便宜且可核查。对已进入报告的外部数字，追溯第一次出现的幻灯片，看中间有没有被改过定义。
边界
监管或采购文件点名要看某个公开常模时，组织可能必须并列报告，但仍应标注方法缺口，并同时给出可核查的内部对照。学术元分析或开放数据集若方法完整，可以作为常模，前提是题目和总体对得上。内部“去年今日”不是行业基准，透明度来自自己的日志，不要把它和外部黑箱混在一张图的同一条参考线上。
怎么落地
- 引用规则：写不出题目、抽样和年份的基准，不得进入对外或对内结论页。
- 对标表增加一列“可核查性”；标为否的行只允许出现在附录，并写明未知项。
- 默认对照改为产品自己的前一窗口或实验对照臂，而不是“行业平均”。
- 验证：把基准数字从报告里删掉后，主张是否还站得住；若删掉就只剩下“我们低于一个不明来源的数”，该主张取消。