当一次活动结束后,总新增明显上升,但随后一周回落,团队常会争论这是活动带来的短期刺激,还是原本就存在的自然增长被掩盖了。缺少完整后台权限时,仍然可以用时间对照、来源分桶和留存形状三个动作做初步区分;但任何单一指标回升或回落,都不能单独证明活动有效或自然增长强劲。
假设某次集中投放或联名活动持续三天,后台只给出每日总新增,没有分渠道明细。活动期新增比前一周高,活动后三天又低于活动期。这时至少有两种解释:
两种解释都可能成立,关键不是看峰值有多高,而是看峰值前后能否找到可区分的证据。
在权限有限时,最小动作是取活动前同样长度的窗口、活动窗口、活动后同样长度的窗口,比较三段的总量和日均值。假设活动三天,就取前三天、活动三天、后三天。若活动期明显高于前后两段,且后段没有低于前段,更接近真实增量;若活动期高、后段明显低于前段,则更像提前触达或短期刺激。
这个动作的结果会直接影响下一步:如果后段低于前段,下一步不应继续加码同类活动,而应先检查是否有重复触达同一批人;如果后段与前段接近,才值得进一步拆分来源,判断增量来自哪一类触点。
自然增长通常表现为多个来源同时缓慢抬升,活动集中触达则常表现为某一来源在短时间陡增。缺少完整权限时,可以用可获得的维度做替代分桶,例如新老用户、首次访问与回访、不同落地页、不同内容主题。重点不是分得多细,而是看陡增是否集中在活动直接关联的那一桶。
可区分证据是:活动关联来源在活动期陡增、结束后快速回落,而非关联来源曲线基本不变。若所有来源在同一时间同步抬升,且活动结束后没有明显透支,则自然因素或外部共同事件更值得优先排查。
总量只能说明触达发生了,留存形状才能说明触达是否带来了持续行为。最小动作是看活动期新增在随后几天是否还有二次行为,例如再次访问、再次使用或再次互动。若活动期新增的后续行为比例明显低于自然期新增,说明集中触达更偏向一次性;若两者接近,则活动可能带来了与自然增长质量相近的人群。
这里要注意:留存比例低不等于活动失败,它也可能说明活动目标本来就是拉新或唤醒;留存比例高也不等于自然增长强,它可能只是活动筛选了本来就更活跃的人。因此留存形状只能作为区分证据之一,不能单独下结论。
如果只有总量、没有来源和留存,最多只能判断活动期与前后窗口的相对高低,不能判断增量归因。请求量、抓取量或某个统计归零,也不能单独证明处理正确,因为还可能是统计口径变化、采集延迟或权限范围变化。可执行的最小动作是先固定三个窗口和一种分桶方式,记录每次观察的结果;下一次活动前重复同一口径,才能看出变化是否稳定。稳定出现的时间对照和分桶差异,才值得进入下一步的归因讨论。