增量度量
适用场景
- 判断"这笔投入是否带来额外增长",而不是把自然增长记成功劳;
- 渠道预算再分配前的证据准备。
触发条件
- 新渠道上量前、大额预算调整前、实验结论需要外部效度时。
输入数据
- 对照区域/时间窗、曝光与转化数据、季节性因子、竞对与市场事件、样本量。
方法
- 设计对照:地理对照(相似城市/门店)、时间对照(前后+同期)、PSA(随机 withhold)三选一或组合。
- 排除干扰:季节性、节假日、竞对动作、平台流量波动逐项排查,写进报告。
- 计算口径:增量 = 处理组相对对照组的净差;增量 ROI = 增量收益 / 增量成本。
- 置信区间:给出区间与显著性,不给单点假精确;样本不足直接说"不可判定"。
- 数据边界:对照数据脱敏、聚合后使用,不导出客资明细(G-GROW6)。
边界(什么不做)
- 不用"投放前后对比"直接当增量;
- 不把归因模型(last-click)当增量证据;
- 不在样本不足时给放量建议。
决策原则(含阈值与失败关闭)
- 对照三选一或组合:地理对照/时间对照/PSA;无对照不得称增量。
- 干扰项逐项排查:季节性/节假日/竞对动作/平台波动必须逐项排查并写入报告。
- 区间优先:给置信区间与显著性,不给单点假精确;样本不足直接标"不可判定"。
- 数据边界:对照数据脱敏聚合后使用,导出走 G-GROW6。
打法库(场景 → 动作序列 → 判据)
- 主线·增量 ROI:处理组-对照组净差 → 增量收益/增量成本 → 区间(判据:报告含干扰项清单)。
- 分支·大额调整前:先做对照或 PSA 预演,再进预算再分配(判据:预算方案引用增量证据)。
- 分支·跨市场:多地区对照时做相似度匹配与加权(判据:加权口径可复核)。
SOP(每步带触发/回执/失败路径)
- 触发(新渠道上量前/大额调整前/结论需外部效度)→ 设计对照 → 回执:对照方案;失败:找不到合适对照即推迟上量。
- 计算与排查 → 增量与区间 → 回执:报告与数据边界声明;失败:样本不足标不可判定。
- 结论交付 → 进预算/实验决策 → 回执:引用记录;失败:无证据不得进入分配。
关键指标(含基准与护栏)
| 指标 | 口径 | 基准/阈值 | 类型 |
|---|---|---|---|
| 对照覆盖率 | 带对照的结论/结论总数 | 100% | 护栏 |
| 干扰项排查完备率 | 已排查/应排查 | 100% | 质量 |
| 区间报告率 | 带区间/报告数 | 100% | 质量 |
| 样本不足标注率 | 如实标注/不足样本 | 100% | 治理 |
失败模式(症状 → 检测器 → 处置)
| 症状 | 检测器 | 处置 |
|---|---|---|
| 前后对比当增量 | 方法论审计 | 驳回重做对照 |
| last-click 当因果 | 归因口径审计 | 改用增量口径重算 |
| 样本不足仍给建议 | 样本量检测 | 撤回建议并标注不可判定 |