入选理由选增量测试法先看渠道:无法追踪个人的CTV与户外用地理留出且受众须有地域分散度,能按个体控曝光的长青渠道用受众留出。
地理区域对照组和受众对照组检验的是完全不同的东西
Geo holdouts and audience holdouts test completely different things
地理对照实验会在部分区域关掉广告、在其他区域保留投放,然后对比两边发生了什么。这种做法适合 CTV 或户外广告这类本来就无法追踪单个用户的渠道,但你的受众得在地理上有足够的分散度,数据才有意义。
受众对照实验则是在个人层面起作用的。把一部分受众排除在再营销或邮件之外,再拿他们的行为和其他所有人对比。结果更干净,但它只适用于那些你能在这一层面控制曝光的常开渠道。
选错渠道,团队就会把测试跑上好几周,最后拿到的答案其实什么也说明不了。