为高级数字营销人员推荐的 A/B 测试堆栈

已发表: 2019-10-23

A/B 测试背后的概念很简单。 您将两个版本的内容相互比较,以确定哪个版本表现更好。

作为运行拆分测试的结果,您的企业和网站将受益于更多的潜在客户和更高的转化率。

我叫 Lars Lofgren,在我开始在 Quick Sprout 经营公司之前,我的职业生涯始于增长。 作为 KISSmetrics 的增长总监和我会教你致富,我个人负责实现我们的领先目标并运行我们的 A/B 测试程序以提高每个网站的转化率。

在我的职业生涯中,我进行了数百次 A/B 测试。

在这两家公司,我都将转化率提高了一倍和三倍。 更具体地说,我将 KISSmetrics 的每月潜在客户流量翻了两番,并在 I Will Teach You To Be Rich 构建了每月可产生 40,000 个潜在客户的潜在客户生成机器。

在我的营销生涯中,我尝试了几乎所有与可用测试相关的软件。 有些很棒,有些则不然。 如果我要再次启动 A/B 测试程序,这些是我会信任的 11 种工具。

A/B 测试的最佳工具

A/B 测试需要多种不同类型的工具。 它远远超出了用于运行测试的单一工具。 让我们来看看所有适用的类别。

交易和自定义电子邮件

要正确测试交易电子邮件,您需要完全控制电子邮件的创建和分析。 SendGrid 提供了这种类型的控件。 更流行的电子邮件工具(如 MailChimp)不够强大,甚至许多营销自动化工具也不够灵活。 最好有一个您的开发人员可以完全控制的电子邮件工具。

Sendgrid 确实有一些内置的 A/B 测试,但它是有限的:

A/B 测试堆栈 SendGrid

Sendgrid 的魔力并非来自内置功能。 它来自于您的开发人员能够对整个电子邮件和漏斗进行 A/B 测试,因为他们拥有完全的控制权。 当您拥有完全控制权时,您可以运行任何您想要的测试。

首先,我个人从不费心测试主题行或点击率。 它们不会对业务产生实质性影响。 其次,测试内容还可以,但我更喜欢测试完全不同的电子邮件渠道。 那是我找到最大胜利的地方。 这就是为什么我忽略内置测试 UI 而对整个电子邮件使用 Sendgrid 的原因。

我的大多数 A/B 电子邮件测试实际上都是保留测试。 将您的电子邮件发送给 50% 的测试组,不向其他 50% 发送任何内容。 您将能够看到该电子邮件的真正影响。

调查

SurveyMonkey 是在线调查的行业标准。 几乎所有阅读本文的人都曾在他们的平台上做过一次调查。

我喜欢 SurveyMonkey,因为它非常易于使用。 由于几乎每个人都熟悉它,因此用户很乐意接受由他们的软件支持的调查。

您可能会问,“为什么我认为调查是我的 A/B 测试堆栈的一部分?”

调查回复激发了导致 A/B 测试获胜的洞察力。 在运行任何测试之前,我从定性研究开始。 我越了解客户,通过 A/B 测试找到赢家的几率就越高。

要收集有价值的定性见解,请牢记以下提示:

  • 不要使您的调查过于复杂。 专注于提出 5 到 10 个你真正需要知道的问题。
  • 将大部分问题集中在客户遇到的问题上。
  • 从开放式问题开始,直到你对受访者有一个非常好的直觉。

如需更多指导,这里有很多很棒的调查提示。

用户测试

A/B 测试堆栈 UserTesting

为 A/B 测试获胜找到定性见解的另一种好方法是用户测试。 这些实验的最佳工具是 UserTesting。

您需要做的第一件事是选择您的受众。 您可以使用自己的受众或通过 UserTesting 的面板与特定目标建立联系。 该平台使您能够精确地了解人口统计数据和其他因素,从而为您的实验找到最佳用户。

接下来,选择 5 或 10 个用户来完成您的入职流程或您网站上的其他常规用户流程操作。 UserTesting 将提供这些用户与您的内容进行交互的视频。 因此,您可以确定主要的摩擦点,从而赢得 A/B 测试。

这是 A/B 测试获胜的金矿。 我强烈建议在您的注册或入职流程中运行其中的一些。 我总能找到一个主要的摩擦点,导致后来的大胜利。 在 KISSmetrics,我们了解到人们要绘制出他们需要跟踪的所有数据是多么困难。 然后我们改进了入职流程,使其更加结构化,并引导人们逐步浏览每条数据。

商业智能

A/B 测试堆栈 Tableau

对于那些想要认真的 A/B 测试程序的人,您需要将所有数据和报告带到内部。 要有效地做到这一点,您需要有某种数据仓库。 设置完成后,您就可以实施商业智能报告的最佳工具(在我看来)——Tableau。

我更喜欢 Tableau,因为它给我完全的控制权,而且它会生成你想要的任何报告。 因为我知道我需要的确切查询、报告和可视化,所以我可以按照我想要的方式构建所有内容。

然而,不幸的消息是必须有人管理它并构建您需要的报告,这是一项全职工作。 您还需要执行级别的专业知识才能了解需要什么报告。 传统的 BI 分析师可以构建报告,但不知道哪些报告和指标对业务最重要。 所有这些都很快变得昂贵。

此解决方案并不适合所有人。 只有在您拥有确保其正确执行的专业知识和预算的情况下,才走这条路。

统计显着性计算器

根据您的技能水平,推荐使用两种工具进行统计显着性计算。

简易计算器
Neil Patel 的 A/B 显着性计算器是您最直接的选择。 所需要做的就是为每个变体手动插入访问者数量和转化次数:

A/B 测试堆栈简易计算器

然后计算器确定测试是否足够重要以得出结论。

高级计算器
对于更高级的选项,AB Testguide 计算器是您的最佳解决方案。 此工具为您提供了更多参数以包含在计算中。

使用此计算器,您可以选择一个假设并选择您的置信度。 甚至测试的结果也更加先进。 该工具不仅会向您显示图表,还会显示其他统计数据以及观察到的功效、p 值、z 分数和差异的标准误差:

A/B 测试堆栈高级计算器

这是一堆额外的细节,只有在您进行了大量测试或具有统计学背景时才有意义。 如果这太复杂,请选择更简单的计算器。

我为什么要用这些?

大多数测试工具不计算统计显着性吗?

如果我学到了一个教训,那就是不要盲目相信新工具。 仔细检查统计显着性计算,直到您确信 A/B 测试工具是可信的。 有很多方法可以计算统计显着性,也很容易把这些东西搞砸。

因此,每当我使用新的测试软件时,我总是使用上面的计算器之一,直到我确定它们的计算是可靠的。

网站分析

只需看看流量分析之王 Google Analytics。

要对网站进行 A/B 测试,您需要了解流量动态,尤其是:

  • 哪些页面获得最多流量?
  • 哪些流量来源正在增长或下降?
  • 哪些页面带来的流量最多?

即使您只使用 Google Analytics 来确认您打算进行 A/B 测试的页面上有足够的流量,安装它也很容易值得。 它也是完全免费的世界级工具。

几乎每个站点都安装了它是有原因的。 数据质量、报告和见解的数量以及完全免费的事实使 Google Analytics(分析)成为无与伦比的交易。

以前,我曾经大量自定义 Google Analytics 配置文件。 不过目前,我很少接触设置并依赖内置报告。 所以我建议你也这样做。

用户分析

为什么要获得第二个分析工具? Google Analytics 还不够吗?

即使过了这么多年,Google Analytics 仍然擅长流量分析。 是的,它现在有用户跟踪功能,但它从来没有为此设计过。 您需要成为 Google Analytics 高级用户才能使用它进行真正的用户分析。

为此,我最喜欢的用户分析和客户数据工具是 Amplitude,因为您可以轻松跟踪用户渠道:

A/B 测试堆栈振幅

大多数 A/B 测试程序通常侧重于注册和入职渠道。 不仅要测试的量很大,而且对这些渠道的小改进也会对业务产生重大影响。

当您测试您的渠道时,您需要每月监控它们以确保它们稳步改进。 A/B 测试可能会报告一个结果,但您的每月 KPI 不会完美匹配。

如果您决定全面使用数据仓库和商业智能工具(如 Tableau),则可以完全跳过用户分析工具。 我发现当企业还没有准备好构建整个基础架构时,用户分析工具是一个很好的中间步骤。

点击后着陆页

对于广告后点击,您需要一个专注于着陆页体验的专用解决方案,而不是恰好具有“A/B 测试”或“构建器”的一体化软件。 当每个活动都应该有一个独特的点击后登录页面并且在此过程中对每个页面进行 A/B 测试时,尤其如此。 Instapage 不仅可以帮助您扩展每个活动的着陆页制作,它还内置了 A/B 测试。当您找到胜利时,您将能够立即启动它们:

A/B 测试堆栈 Instapage

我的营销计划总是以大量的着陆页结束。 如果您不对流量最大的页面进行 A/B 测试,那么您就会放弃收入。

热图

在客户研究中,有一条常见的建议:“不要关注人们所说的,而要关注他们所做的。” 这就是为什么热图是另一种用于定性洞察的重要数据收集资源。 热图非常适合更好地了解人们的行为方式。 另外,它们超级容易理解。

了解人们点击什么、他们滚动多远以及他们的鼠标移动到哪里会激发各种优化想法——这是 A/B 测试的另一个金矿。

Instapage 在他们的平台中内置了热图,可以为点击后登陆页面做所有这三件事(下图只是点击图):

A/B 测试堆栈 Instapage 热图

您还需要在您的主站点上运行热图。 在这种情况下,我会推荐 Crazy Egg:

A/B 测试堆栈 Crazy Egg

在您的主页、定价页面和入职流程上运行热图。 寻找获得大量出乎意料的点击次数的内容,以及您认为会获得更多关注但没有获得更多关注的内容。 然后提出测试想法,突出人们想要的东西,同时弱化他们不关心的东西。

CXL 在此处提供了很多关于如何使用热图的重要提示。

A/B测试

A/B 测试工具本身呢? 测试主页、入职流程和产品的最佳选择是什么? 在我看来,VWO:

A/B 测试堆栈 VWO

VWO 有一款可靠的 A/B 测试产品,起价为每月 199 美元。 与每年动辄数万美元的其他工具相比,VWO 更容易获得。 每美元的价值非常高。

使用 VWO,您将能够同时运行多个拆分测试。 还有一个可视化编辑器,允许您在不编辑任何代码的情况下运行 A/B 测试。 非常适合测试标题等元素。 您还可以使用他们的代码编辑器对您的测试进行更高级的更改。 代码编辑器是一个巨大的改进。

WordPress A/B 测试

WordPress 是世界上最流行的 CMS,但在整个 WordPress 网站上运行 A/B 测试可能会很痛苦。 该平台绝对不是为此而设计的。

这就是为什么你应该使用像 Nelio 这样的插件来进行 WordPress A/B 测试:

A/B 测试堆栈 Nelio

被警告; 您想在进行此测试之前整理好您的网站。 如果您不清理所有内容,您将遇到无数的插件冲突,并且您的站点将无法足够快地提供测试变体以进行有效测试。 由于 WordPress 从未设计用于站点范围的测试,因此 A/B 测试很容易与插件、主题和构建不佳的站点发生冲突。

首先,确保你有一个好的虚拟主机。 你最不想要的是一个缓慢的主机,它会延迟服务变体,这样用户就会注意到变化。 然后清理您的 WordPress 主题并删除所有不必要的插件。 这将减少任何插件冲突并足够快地为您的测试提供服务以避免被注意到。

一旦您的 WordPress 网站清理干净并具有快速加载时间,请安装 Nelio,并使用它来运行网站范围的 A/B 测试。 我过去常常在我们的博客上进行大量测试,以增加电子邮件订阅的转化率。

结论

真正的 A/B 测试程序需要一套工具才能有效运行。 我自己在多家公司测试了数百个工具并进行了数百次测试后,我更喜欢上面的堆栈,因为它们专注于数字营销的不同领域,而且没有一个在所有类别中都是“最好的”。

如果您一直在考虑使用一些热门的新工具,请随时更换其中的一个。 我的一般规则是经常使用易于启动和停止的工具进行试验,例如用户记录或调查工具。 但是对于像分析这样的基础设施工具,我会选择可靠的并且我可以依赖多年的工具。

关于作者
Lars 目前是 QuickSprout 的首席执行官。 在此之前,他是 I Will Teach You To Be Rich 和 KISSmetrics 的增长总监。