她解释道，早在 20 世纪 60 年代，“你会花一志，但你永远不会真正知道结果”。
很难精确衡量线下转化率。但线上交易越来越多，情况就不同了。
格拉斯表示：“现在，我可以明确地去找创意总监说，这个广告活动没有效果，我知道这是因为（另一个活动）效果要好得多。”
她指出，在数字营销中，A/B 测试或拆分测试意味着在广告素材上尝试不同的版本或模板，这种情况在 10 次中有 9 次如此。例如，您可以测试一个只有一张图片的产品页面和一个只有三张图片的产品页面，看看哪一个能带来更多的销售。
来源：VWO
但是您可以对数字营销工作的几乎每个方面进行 A/B 测试——Facebook 广告时间、电子邮件发件人姓名或网站上的用户体验。
最终，你要针对用户行为进行优化，Capland 说道。“增长营销人员有兴趣进行 A/B 测试，以推动更多安装或注册，或推动一定数量的用户做某事。”
“增长营销人员有兴趣进行 A/B 测试以推动更多的安装或注册，或者推动一定数量的人做某事。”
那么该怎么做呢？使用 A/B 测试软件。它是数字营销人员技术堆栈的关键——对于增长营销人员来说尤其如此。为了找出最好的工具，我们联系了专家。
与专家见面
凯特琳·格拉斯 (Katelyn Glass)，电子商务和营销机构Fifty Six创始人兼执行合伙人，Rowing Blazers前首席运营官
Delivering Value创始人、前Postscript发展主管Andrew Capland
MarketerHire 网络中有 20 多名增长营销人员
何时以及为何应运行 A/B 测试
在公司发展的每个阶段，A/B 测试对于验证将长期影响多个团队或工作流程的业务决策都很有价值。
事实上，我们的专家建议将 A/B 测试作为一项常规做法。
营销顾问Rose Mayo表示：“消费者行为会改变，产品组合会改变，趋势会改变——因此你的测试结果也会改变。确定核心测试的良好节奏，并至少每年重新运行一次。”
以下几个关键情况说明该进行 A/B 测试了：
您的转化率很低。如果您获得了大量流量，但安装量却不多，“那么现在正是开始进行一些实验以找出原因的好时机，”Capland 说。
你在每个社交平台上都投放相同的创意。 “你在电子邮件上展示的创意应该与付费社交上的创意不同，”Glass 说。但你必须进行测试，找出哪种字体大小或摄影风格适合每个平台和目标受众。
你的决策过程止于询问创始人该做什么。在为创始人提供预算之前，你应该对他们的热门想法进行压力测试。
你正在推出新产品。 “在投入过多之前，A/B 测试对于验证事情非常有用，”Capland 说。在花费数周时间进行产品开发之前，先测试一个最低限度可行的产品，以确定是否值得进一步投资。
您希望实现快速增长。Optimize Digital的 Mara Beaman 告诉 MarketerHire：“A/B 测试是在很短的时间内将结果翻倍、三倍或十倍的最简单方法之一。” “高增长团队……总是在进行测试。”
但问题就在这里——你不可能测试所有的东西。
如何知道 A/B 测试是否值得运行。
尤其是在初创公司，你不想让团队不堪重负。因此，不值得进行测试来了解客户是喜欢薰衣草花头还是长春花花头。
早期公司的用户群通常较小，因此结果可能需要 90 天（甚至更长时间）才能显现。结果很可能是结果并不重要。
一个很好的经验法则是：“在一家小公司，当你要做一百万件其他事情时，A/B 测试应该占用增长营销人员 15-20% 左右的时间，可能不会更多”，Capland 说。
在制定测试之前，卡普兰建议思考以下两个问题：
您是否正在测试某些可能永久存在的东西，比如注册表单、主页或产品？
您是否希望了解一些可能影响其他项目、其他团队、您的定价或您的信息传递的内容？
如果两个问题的答案都是否定的，那么你可能只是想找个决胜局。这可能是一个简短、低强度的 A/B 测试——或者，老实说，一场石头剪刀布游戏。
如果任何一个问题的答案都是肯定的，那么你应该非常有信心“你所学的就是你认为你正在学习的东西”，卡普兰说。
这意味着，除非您有足够的时间和用户量来达到某种程度的统计意义，否则您不应该运行测试。
少于 200 个字的统计意义。
如果你发现自己疑惑，“是不是因为按钮尺寸更大，导致更多人看到版本 A 时转化了，还是只是偶然？”你实际上是在问“这个结果是否具有统计显著性？”
统计显著性基本上是对测试结果确定性的衡量。它会随着... 的增加而增长。
版本 A 和版本 B 之间的性能差距增大，和/或...
您的样本量增加了
你永远无法确定结果不是偶然的，但理想情况下，结果是偶然的概率为 5% 或更低。（换句话说：你的测试的 p值为 0.05 或更低。）
你不应该让统计意义不强的测试影响重大业务决策。如果你这 以色列手机号码
样做，你仍然在做出情绪化的决定——只是数据影响了而已。
理想的 A/B 测试方法。
您应该定期并有策略地运行 A/B 测试。有用……
你正在寻找一个低风险决定的决胜局
您正在寻找有关重大业务决策的指导，并且您有足够的时间和用户量来实现具有统计意义的结果
但它们也可能被过度使用。
卡普兰说：“营销人员有时会利用统计意义作为支撑，阻止他们做出重要决策并凭直觉行事。”
“有时营销人员会利用统计意义作为支撑，阻止他们做出重要决策并凭直觉行事。”
当您在符合您的品牌价值的选项和不符合您的品牌价值的选项之间做出选择时，您无需进行测试即可知道该怎么做。
开始 A/B 测试就像 1、2、3 一样简单
正如增长营销人员Aaron Patrick Doherty向 MarketerHire 诗意地说道： “A/B 测试是一个过程，而不是一个平台” 。
它与科学方法并无不同——因此需要一些批判性思维和技术知识。
以下是您的团队应采取的步骤，以成功运行 A/B 测试。（剧透警告：在打开测试平台 之前，还有一些事情要做！）
1. 收集定性数据。
