很多人做A/B测试时会犯的错误

 

什么时候A/B测试变的不像A/B测试了？

下面是一个类似优化的场景。不过，实行的完全没有常识。

比如说你推广了一个campaign，并跟踪这些变量：

• Banner广告1 和 Banner广告2
• 登陆页A 和 登陆页 B
• Offer X 和 Offer Y

经过三天的测试，你发现banner广告1，登陆页B和OfferY效果最好。

你怎么能确定？

一次只能优化一个变量。

同时测试多个变量不是优化，而是猜测，权衡。

应该每次只测试一个变量，比如这样：

• Banner广告1
• 登陆页A
• Offer X PK Offer Y

过程很费时，但是比那些小数据可靠的多。

测试变量的顺序是什么样的？

1. Offer
2. 角度
3. 登陆页主题
4. 登陆页内容
5. Banner/文本广告

Premium Posts Volume X里我对这个过程进行了分布讲解。

如果你的测试过程目前类似于一个疯子对着飓风扔大便，我建议你从这里开始。

 

【原文： FinchSells.com】