假设每次都是背面朝上。然后我就下结论,基于这个结果,以后每次我扔硬币都会是背面朝上。
但我们都知道这是不可能的,扔到背面的概率是50%。
问题就是我们扔硬币的次数还不够多。
如果我扔100次,就会发现概率基本是50%。以上我们是因为用了不良数据才得出了错误的结论。
这就是为什么很多联盟营销者不能让campaign赚钱的核心概念。他们不明白统计学,在不良数据的基础上做出决策。
现在我们把这个概念运用到campaign例子,看看我到底在说什么。
统计显著性的实例
案例1
John刚刚在谷歌adwords推出了一个新的campaign,数据如下:
John可以说广告1效果更好,然后停止广告2。他对吗?
让我们用计算器(SplitTester)看看统计显著性。【博主备注:该网站的计算器已经不存在,我建议大家用这个计算器。】
“不是很有信心” (即图中的”not very confident”)意味着什么?数学上来说, 意思是我们不知道广告1是不是确实比广告2好。我们还得继续扔硬币。
如果我们让这个campaign再多跑几天呢?
好像广告2实际效果更好。
通过计算器,我们发现确实是广告2的效果更好。我们有多么确定呢?非常确定。95%是我常用的基准。
那为什么广告2在刚开始效果不好?没人在乎为什么,因为这根本无关紧要。这就像我们在本文开始时举的例子一样 – 虽然一连五次都是背面朝上,可是这只是碰巧而已。
生活中的一切都有运气的成分在里面,测试越多,运气成分就会越少,才可以找到真正的或然率。
你有没有明白我想说的点?很多人都过早对campaign做出调整了。
John用一个不怎么样的广告在跑这个campaign。他本来可以赚钱的,但是他做出了太多错误的决定。
案例2
John这周有200刀的移动campaign预算。他不知道应该推出多少广告。
他决定推出40个广告。
你发现问题了么?每个广告只会得到大约五刀的点击或展示,这样的数据不够达到统计显著性。
在这种情况下,他应该推广更少量的广告,比如7个。这样他也许可以找到一到两个表现良好的广告去继续完善他的campaign。
案例3
John周一推出了他的campaign。周四他就因为赔钱太多停掉了。
有可能campaign到了周五周六周天就赚钱了(有的垂直领域在周末的时候转化会更好)。
他不知道这点,因为他没有收集足够多的数据,太早停掉了campaign。
怎么把这些应用到你的campaign里
以上我是用广告做例子,但这种概念适用于别的一切 – 登陆页、offer等等。
很多新人都搞不清楚应该推广多少广告、登陆页和offer。
这取决于你的预算。
预算是200刀?也许三个offer,1个登陆页,7个广告。
预算是2000刀?也许五个offer,3个登陆页,50个广告。
我不会根据情绪来做决定。 我用数据做决策。
在2014年,我还会在优化时计算统计显著性吗?很少了。我都是跑很多流量,目测结果。只有在数字很相近的时候我才会用计算器。
但如果你的预算不多,那就一定要用计算器。
计算器
【原文: CharlesNgo.com】
Leave a Reply