广告文案测试实际上就是实验;其结果旨在为您提供更多数据,以便您决定要展示的广告素材。测试结果并不旨在保证广告效果。如果某项测试收集到的数据足以表明测试结果不是随机结果(即该测试具有显著的统计意义),那么假如您重复运行该测试,便可能会看到相同的广告效果。
示例:
结果:具有显著的统计意义
如果广告文案测试结果具有显著的统计意义,且某一广告的效果优于其他广告,那么您可以停止投放效果不佳的广告。最佳广告的效果将会继续介于置信区间所指定的范围内。
广告文案测试设置
优化目标 = CTR
统计显著性阈值 = 95%
某个广告的广告文案测试结果
置信区间 = 3.92% 到 4.27%
结果表明,您可以 95% 地确定,效果较好的广告的 CTR 真实值介于 3.92% 和 4.27% 之间。
结果:不具有显著的统计意义
如果广告文案测试结果不具有显著的统计意义,且测试中所有广告的效果大致相同,那么您可以停止测试并继续投放这些广告。
广告文案测试设置
优化目标 = 非购买型操作率
统计显著性阈值 = 90%
广告文案测试结果
所有广告的置信区间均介于 81.65% 到 90.88% 之间
结果表明,广告效果不具有显著性差异。您可以停止测试,而不暂停任何广告。如果您想测试更多广告,不妨向广告组添加更多广告,然后开始新的测试。
结果:具有显著的统计意义
在所有广告都被评为“未定”的情况下,广告文案测试可能会具有显著的统计意义。
广告文案测试设置
优化目标 = CTR
统计显著性阈值 = 95%
广告文案测试结果
置信区间表明,Ad1 的 CTR 介于 1.55% 到 1.80% 之间。Ad2 的 CTR 介于 1.33% 到 1.56% 之间。结果表明,Ad2 的效果可能会优于 Ad1,但这种可能性微乎其微。
对于这样的结果,您至少有两种选择:(1) 您可以停止测试并暂停 Ad2,因为 Ad1 的效果略胜一筹。这样做可能会提高 CTR。(2) 您可以停止测试,并继续投放这两个广告。
结果:具有显著的统计意义
广告文案测试既可具有显著的统计意义,又能在广告效果未定的情况下确定效果不佳的广告。
广告文案测试设置
优化目标 = 单次访问的收入
统计显著性阈值 = 90%
广告文案测试结果
结果表明,您可以 90% 地确定,您能停止测试并暂停效果不佳的广告。其他广告的效果将会继续介于所指定的范围内。