如何在低流量网站上进行 A/B 测试

触发警告：

我们知道围绕统计显着性、95% 的神话（或不是？）标记、测试和流量等存在大量争论。

如果你是一个对这些东西有强烈感觉的优化器，你可能会被触发。 好吧，评论是开放的，我们可以进行一次非常有启发性的对话。

让我们开始！

测试不适用于低流量网站。

这是肯定的。

因为要获得具有统计意义的见解，您需要向（至少）数千名用户展示您的实验变体。

事实上，在 Convert Experiences，我们经常建议我们的用户运行 A/B 测试——这是最简单的 CRO 实验——前提是他们可以为每个变体发送大约 1 万访问者。

此外，我们建议记录大约 1000 次转化，以产生对照或变体优越性的确凿证据。

这解释了为什么 CRO 不是百万客户类型的市场，因为只有少数 10 万个网站（或企业）有足够的客流量来测试任何成功以及昂贵（迅速发展的“企业”）优化解决方案的预算！

低流量站点应该排除测试吗？

鉴于一般小型企业的网站每天只有几百个访问者，A/B 测试实验对他们来说没有意义。

但：

这并不意味着小企业根本无法进行实验。

事实上，即使是小企业也可以进行许多实验。

运行它们有很多好处。

例如，如果您拥有一家小型企业，运行实验将帮助您从基于直觉的决策转向数据驱动的决策。 它将迫使您查看数据……并且通过面对面的数字，您将不再默认使用 *我认为* 策略。 这种数据支持的方法将改变您建立和发展业务的方式。

进行实验也会教你通过尝试而不是接受现状来学习。 它会启发你看看这些被认为有效的原则是否真的对你有用。

最后，当您拥有“足够的”流量时，运行实验将为您准备一些“真正的”CRO，因为它有助于培养正确的测试心态——有效 CRO 的先决条件。

因此，开始在您使用的任何营销渠道上进行任何实验。 以下是您的一些选择。

使用电子邮件进行测试

令人惊讶的是，电子邮件营销是一种让您尝试不同想法的渠道，而无需大量订阅者（或“联系人”）。

“谁说的？”

从 MailChimp、ConstantContact 和 Campaign Monitor 到 HubSpot（在其营销自动化软件中支持电子邮件营销），每个电子邮件营销软件提供商都表示。

让我们从 HubSpot 开始。

因此，如果您想使用 HubSpot 的电子邮件平台运行 A/B 测试，您只需要 1,000 个联系人： 1,000 个联系人也是我们对电子邮件发送样本运行 A/B 测试的基准。 — HubSpot

Campaign Monitor 还表示，即使是小型电子邮件列表，您也可以运行 A/B 测试。 这是它背后的数学原理：

现在，您可能会想，“我的列表大小只有 500 个订阅者，您希望我如何运行成功的测试？” 我的回答是，您需要将目光投向更大的 MDE [最小可检测效应 (MDE)]。 当您增加 MDE 时，您所需的样本量会减少。 因此，每个变体不需要 592 个订阅者来检测 20% 的相对效果，而每个变体只需要 94 个订阅者来检测 50% 的相对效果。 请注意，基准转化率也会影响您的样本量——转化率越低（在本例中为开放百分比），您需要运行准确测试的订阅者就越多。 — 活动监视器

因此，如果您有大约 500 或 1000 个订阅者，那么您可以进行测试，前提是您有一个对您要说的内容感兴趣的响应式数据库。

但是，一些电子邮件营销提供商建议使用稍高的联系基础。

例如，电子邮件营销解决方案提供商 ConstantContact 建议将样本量提高到 HubSpot 允许的最小量的两倍。 它表明，对于有意义的 A/B 测试，样本量必须至少为 1,​​000 个联系人。 因此，如果您有 2000 个订阅者，您应该可以很好地进行测试（您的 A 和 B 版本各获得总联系人的 50% 作为测试流量）。

对于主题行测试，我们建议尽可能在至少 1,000 个联系人的样本大小上测试每一行。 每个版本的 1,000 个用户通常是任何 A/B 测试的良好基准，但如果您没有足够的联系人或访问者来达到这些数字，那么仍然值得进行测试。 —常量联系

MailChimp 还建议使用更大的列表来运行 A/B 测试。 它建议您必须至少有 5,000 个联系人才能运行测试。 但是由于许多小型企业的联系人基础比这要小得多，因此建议在完整列表中测试想法：

我们建议您将组合发送给至少 5,000 个订阅联系人，以便从您的测试中获取最有用的数据。 如果您的列表或细分的大小不允许每个组合中有 5,000 个订阅者，请考虑测试您的整个列表并使用活动结果来为未来的活动内容决策提供信息。 — MailChimp

虽然拥有庞大的样本量确实可以帮助您更快地达到统计显着性（并且更有信心），但您也可以开始使用您的小列表进行测试！

这里有 150 多个电子邮件拆分测试想法，适用于您的电子邮件活动。

此外，这里是电子邮件 A/B 测试的快速指南。

使用社交媒体进行测试

社交媒体是另一个让你测试你的想法的渠道，不管你的社交关注度有多小。 此外，在某种程度上，在社交媒体上，没有什么能真正限制你的影响力。

例如，在 Convert Experiences，即使我们没有数以万计的追随者，但我们出色的社交卖家仍在不断尝试我们社交媒体副本的元素，例如其标签、图像等。

她的测试为我们带来了一些伟大的胜利。 例如，她使用一组特定标签的实验曾经为我们赢得了 Google Analytics 的转发！

现在，这是一些社交媒体曝光，不是吗？

您可能会说，由于（也许）侥幸而忽略快速获胜很容易，但是当您看到一组主题标签通常比您测试它的其他标签获得更多曝光时，您拥有的不仅仅是测试结果……您拥有的是一种趋势.

您可以运行大量社交媒体 A/B 测试来发现此类趋势并提升您的社交媒体表现。 我们在这里发布了关于社交媒体 A/B 测试的精彩入门。 阅读它以了解如何从社交媒体 A/B 测试开始、可以运行的不同社交媒体 A/B 测试以及必须牢记的顶级社交媒体 A/B 测试最佳实践。

使用付费广告 (PPC) 进行 A/B 测试

就像电子邮件和社交媒体营销渠道一样，PPC 营销渠道还可以让您尝试广告文案和广告活动的所有其他元素。

无论是 Google Adwords 还是 Facebook 广告，大多数付费网络都支持实验，因此您可以获得最高的 ROI。

但是要从您的 PPC 实验中获得具有统计意义的结果，您需要对每个广告文案进行数千次展示。 Google 建议测试每周至少获得 5000 次展示的广告组。

那么几千次广告展示的成本是多少？

这在很大程度上取决于平台和行业（以及其他因素），但有数据可以帮助您进行预算。

例如， AdStage 在 2018 年第一季度分析了超过 1.1 亿次广告展示（在 Google Adwords 上），发现平均需要 116.91 美元才能在 Google Ads 上获得一千次展示 (CPM)。 去年，它便宜了大约 13% 。

Facebook 等社交媒体网络也提供可访问的 CPM 选项。

来自 Statista 研究的数据表明，Facebook 的平均 CPM（每千次展示费用或每千次展示费用）为 1.26 美元。 AdExpresso 和 WordStream 的其他 Facebook CPM 平均成本估计在 7-10 美元范围内。

问题是即使预算有限，您也可以开始测试广告文案。

一种（几乎）“交通证明”的实验方式：个性化

根据您对访问者的了解，个性化或个性化访问者的网站体验是另一种常见的实验形式。

个性化最好的部分是即使是低流量的网站也可以使用它们，因为适用于 CRO 测试的流量限制不适用于个性化。

这背后的原因是，通过个性化，最终目标不是优化转化率。 相反，它的目标是提供更相关的用户体验，从而带来更多的转化或更高的客户满意度和保留率。

例如，您可以创建不同版本的产品页面来展示给您的客户和非客户（或潜在客户）。

在您的客户产品页面上，您可以显示产品指南和视频、访问支持的快速链接等内容，以便他们获得更有价值的产品体验。 而您向潜在客户展示的版本（例如，那些注册试用的人）可以专注于您的产品功能或案例研究以帮助他们转换。

大约 93% 的公司通过个性化实现了更好的转化。

您可以立即开始个性化。

此外，借助 Convert Experiences 等工具，您可以在几分钟内设置个性化的网站体验。 只需设置定位规则，您就可以向不同的受众群体展示个性化的信息——促使每个群体进入他们购买旅程的下一个阶段。

把它包起来……

虽然网站流量低可能会限制您进行实质性 CRO 实验，但它不能阻止您“学习”。

这就是重要的——因为一旦你通过尝试而不是接受规范将注意力转移到学习上，你就会开始培养实验文化，这是有效 CRO 的先决条件。

无论您处于哪个成长阶段，您都可以投资于发展测试文化。 当您的网站实际上有足够的流量进行核心、权威的 CRO 实验时，它会派上用场。