先把矛盾当成分组信号,而不是数据错误。你手里通常已经有一份按渠道汇总的报表或后台导出。把它按“新装后7天内是否完成关键行为”拆成两列,再看每个渠道在两列中的占比,往往比看总量更能解释为什么渠道A说用户质量好、渠道B说同一批人留存差。
渠道反馈互相矛盾,第一步不是调权重,而是确认两个渠道说的是不是同一群客户。常见情况是:渠道A的报表覆盖全部新装,渠道B只统计了完成注册的人。此时两边的“留存率”分母不同,矛盾只是口径差。
处理动作:从后台导出两份明细,各保留设备标识、激活时间、渠道来源、首个关键行为时间四个字段。用设备标识做交集,看重叠比例。若重叠低于三成,说明两个渠道实际触达的是不同客户群,矛盾不需要调和,需要分别拆群。若重叠超过七成,才进入下一步,检查同一群人在两个渠道中的行为差异。
不要按年龄、地域这类静态标签拆,先按行为深度拆。以工具类APP为例,假设关键行为是“创建第一个项目”。可以切成三层:
把每个渠道的客户按这三层重新归类,再对比渠道之间的层间分布。如果渠道A的深激活层占比明显高于渠道B,而渠道B的浅激活层占比更高,那么“渠道A质量好”这个结论只在深激活层成立,不能直接推广到全部客户。
这一步的实际动作是:在报表中新增一列“行为层级”,用公式或筛选完成分层。结果会影响下一步——如果某个渠道的客户集中在未激活层,后续优化重点应放在首次引导,而不是继续加量。
个别样本成立但规模化后出现例外,通常有三个原因。第一,小样本来自特定时间段,比如周末安装的用户与工作日安装的用户行为不同。第二,小样本来自特定活动,活动结束后渠道质量自然回落。第三,小样本的客户群本身较窄,规模化后引入了新的子群。
要判断属于哪一种,可以做一个假设比较:把当前渠道数据按周切成四段,分别计算每段的深激活层占比。如果第一周高、后续三周持续下降,说明规模化后客户群结构变了,不能照搬第一周的优化结论。如果四周占比稳定,只是总量波动,则矛盾更可能来自统计口径或短期活动干扰。
这个判断结果决定下一步动作:结构变了就重新分层,口径问题就统一事件定义,活动干扰就剔除活动期数据后再看。
拆完客户群后,渠道取舍不再看单一指标高低,而看每个渠道在哪一层有优势。可以按下面顺序处理:
这里的关键动作是给每个渠道绑定一个层级目标,而不是继续用同一个留存指标考核所有渠道。结果会直接影响下一轮预算分配:深激活层占比高的渠道适合承担拉新后的转化任务,浅激活层占比高的渠道适合承担首次引导测试。
拆群能成立的前提是两个口径固定。第一,关键行为的定义在所有渠道中一致,不能渠道A算“打开首页”而渠道B算“完成支付”。第二,归因窗口一致,比如都按安装后7天计算,不能一边7天一边30天。
如果这两个口径暂时无法统一,先不要下渠道优劣结论。可以只在一个渠道内部做分层对比,等口径对齐后再跨渠道拆群。这样做的代价是判断变慢,但能避免把口径差误读成客户群差异。
最后,渠道反馈矛盾时,优先检查分母和事件定义,再按行为层级拆客户群,最后才决定预算取舍。这个顺序能让你从一份现有报表开始,而不是先争论哪个渠道的数据更可信。