什么是 A/B 测试中的后分段？ 以及使用高级后分割从实验报告中获取更多信息的 5 个技巧

细分超出了传统 A/B 测试的范围，通过将他们细分为特定的目标群体，您可以更好地了解您的受众。

尤其是后细分，您可以在测试完成后定义受众细分，从而为您在测试过程中对受众做出有用的发现留出空间。

Convert 为细分前和细分后提供了一些出色的工具，因此您可以优化价格，更好地了解您的受众，获得更高的投资回报率，甚至可以识别可能导致您的网站出现问题的最细微的问题，并吸引更多信息总体结论。

最近，我为一家大型跨国零售连锁店的 Convert 客户打了一个故障排除电话。 我问：

“您如何判断产品的促销是否对该产品或其他类似产品的未来销售产生了积极影响？”

他们回应：

“只需为所有网站访问者提供 A/B 体验，并比较促销前后的销售情况。”

尽管这个答案可能会从许多组织中获得高分，但任何分析进化的组织都认为它效率低下或不正确。

这种简化的分析工作在稳定状态下，不受外部因素或无法控制的因素变化的影响。

然而，在大多数实际应用中并非如此。

在当今世界，外部因素可能在一夜之间发生变化，得出错误结论的成本可能很高。

那么，如何确定促销的效果呢？

一个简单的解决方案是针对目标受众进行 A/B 测试或体验。

A/B 测试或拆分测试的目标是提高您的转化率或客户采取的操作数量，例如点击号召性用语按钮、文本链接或导航链接。

为了有效，您必须首先将您的受众视为一个整体。 这种观点始于以下问题：

• 谁是我的潜在客户？
• 是什么把他们带到这里来的？
• 他们想从我们的品牌中得到什么？

一旦您回答了这三个关键问题，您就可以开始测试细分受众群或简单地使用细分。

让我们从一些定义开始：什么是分割？

您网站的访问者并不完全相同。 他们可能来自不同的国家，说不同的语言，使用不同的浏览器，通过不同的网站访问网站，使用不同的设备，还有其他各种细微而显着的差异。

那么，一次对所有访问者进行 A/B 测试有什么意义呢？ 非分段的 A/B 测试结果可能是虚幻的，导致有偏见的行为。

但是，您可以通过细分来细化您想要了解的受众。

当您只希望一部分访问者参与 A/B 测试时，这尤其有用，这样您就可以了解更改如何影响该特定目标。 您可能有兴趣在您的网站上运行 A/B 测试，只有来自特定地区、使用特定浏览器或在周末访问您的网站的访问者。

通过细分，您将能够回答以下问题：

• 这种体验对新客户和常客的工作方式有什么不同吗？
• 是否有一种变体对某种类型的流量特别有效？
• 是否存在在某个浏览器或操作系统上表现特别差的变体？ 有没有可能有缺陷？
• 在每个变体中转换的用户和未转换的用户之间是否存在趋势？

分割前还是分割后？

细分时的另一个考虑因素是是在设计体验时考虑到细分，还是在体验激活/完成后定义细分。

如果在设计体验时考虑了特定的细分，那么样本量和统计显着性通常足以做出决定。

另一方面，如果您通过切片和切割随机片段发现了一些模式，那么确保有足够的样本量是至关重要的。 如果不是这种情况，您必须延长体验时间或重新测试。

从一开始就分割经验并不总是有助于研究/假设过程。 体验的目标是确定哪些部分响应哪些变化，如果在测试开始之前将它们分开，这可能很难做到。 如果您事先不知道要对结果进行细分，请针对特定的高性能细分进行后续测试，直到您有足够的样本量可供使用。

测试后分割可以帮助识别这些模式和信号，然后可以将其用于测试前计划，以及使用适当的上下文和样本计划潜在地测试特定区域。 然后，您可以使用特定于设备的假设创建和执行完全独立的测试。

如果您从一开始就考虑到细分进行实验，您也可以生成报告（后续实验中经常出现这种情况）。

为什么细分 A/B 测试结果很重要？

传统的 A/B 测试工具允许您向尽可能广泛的受众提供体验，针对新的变体测试您网站的原始版本或基线版本。

另一方面，细分允许您在测试过程中将每个客户的期望归零。

更好地了解您的客户

细分您的访问者需要彻底检查谁构成了该受众以及您在他们中注意到哪些特征。 它还允许您确定诸如哪些群体对公司最忠诚或哪些群体花费最多等因素。

该信息将使您能够更好地匹配您未来的营销工作，并为您的访问者提供更高质量、更具吸引力的客户体验。

更好的价格优化

有必要进行研究以了解您的客户和您的组织。 而且，虽然这并不总是那么容易，但确定您的产品或服务的理想价格并非不可能——尤其是如果您拥有必要的工具并牢牢掌握基本定价理念。 在测试新价格时，您可以通过对您的 A/B 体验使用细分策略来确定愿意为您的产品或服务的某种增强而多花一点钱的人群。

更大的价值创造

当您使用访问者细分策略而不是一般方法时，您会注意到营销活动和计划的投资回报率更高。

面向整个访问者群体的非针对性体验的平均成功率将低于针对各个细分市场的适当针对性和差异化体验的平均成功率。

从本质上讲，逐段优化比针对总访问者进行优化更有效。

不确定的经历

假设您已经进行了很长时间的测试或体验，结果显示出小幅提升，但无法得出结论。 现在会发生什么？

不用担心。 虽然感觉测试似乎是在浪费时间和资源，但您收集的信息实际上仍然非常有用！

对收集到的数据进行分段是剖析它的第一步。

根据不同的细分检查您的数据将提供更多信息以帮助生成迭代。

如果您执行的测试更改了产品详细信息页面的显示方式，请尝试按设备对数据进行分段。 通过这样做，您可能会找到具有统计显着性结果的明显赢家。

识别错误和损坏的元素

即使您已尽可能全面地测试您的代码，您也可能忽略了某些设备上的关键响应问题（由于操作系统版本、特定位置的 Internet 连接或设备本身）。

智能手机业务目前的碎片化状态可能是开发人员最头疼的问题。 由于加载时间、响应能力和崩溃（而不是原始概念的实用性），客户经常对他们本来会喜欢的设计和功能给出负面反馈。

假设您正在为您的主页或登录页面尝试一个新的横幅，并且您发现它与原始版本相比表现不佳。 这可能是因为原始版本更加用户友好。 但是，根据您的直觉和客户输入，也许您仍然认为新版本会更好。 这将是使用分段数据的好时机，看看是否还有其他事情发生。

分段数据表明，不利评级与 Android 移动应用程序版本子集的性能问题有关。 不需要拒绝新流程的设计； 但是，必须更新代码以进行进一步测试。

您可以在 A/B 体验中使用的常见细分

以下是运行实验时要考虑的一些常见细分示例：

地理分割

地理位置是确定市场定位和产品销售的重要组成部分，因为人们将有不同的需求和需求，并根据他们居住的地方表现出不同的特征。

这是运行 A/B 体验时需要考虑的事情。 这就是为什么您应该在广告和营销活动中包含地理细分。

天气分割

天气还可用于细分受众，帮助具有季节性产品目录的电子商务公司销售相关服装和其他商品。

天气对客户行为有巨大影响，它为企业影响决策和提高转化率提供了宝贵的机会。

天气定位使网站能够更好地了解客户的需求，以及满足这些需求的记录。

天气营销可让您随心所欲地发挥创意，各种规模的企业都应将其作为整体营销策略的一部分。

一旦您认识到温度变化如何影响您的公司，您就可以调整和优化您的公司程序。

• 广告定位：在您的广告逻辑中使用天气数据作为定位信号（例如，如果下雨则显示一个广告变体，如果条件晴朗则显示另一个广告变体）。
• 广告内容：使用天气数据作为广告内容（例如显示当前条件/温度值）。
• 广告定位和内容：结合天气定位和内容以获得强大的用户体验。

天气细分应与客户的地理位置结合起来才有意义。 例如，意大利北部 20°C 的温度会促使人们购买新的 T 恤，而南部相同的温度可能会促使人们购买薄毛衣或长袖衬衫。

行为细分

营销人员需要行为细分来了解和响应现场行为，例如受众对您的内容的兴趣或他们与您网站的某些方面进行交互的频率。

行为细分对于识别和吸引每个用户产生最多收入的用户也很重要，这通常是网站总访问量的一小部分。 这在 A/B 测试中尤为重要，因为分段测试可以让您了解高价值客户对您在网站上创建的体验的反应。

下面列出的细分将帮助您了解如何处理一组客户的特定要求或愿望，找到改善客户旅程的方法并评估他们对贵公司的潜在价值。

• 最近购买
• 新访客与回访访客
• 新购买与重复购买
• 已登录与已注销的访问者
• 计划类型或忠诚度计划级别

技术分割

根据他们用于在线购买的应用程序和设备，在技术细分中，客户在很大程度上被分类。

这些可以包括：

• 消费者用于访问公司网站的互联网浏览器
• 用于打开营销通信的电子邮件应用程序
• 用于完成购买的设备
• 操作系统
• 用户代理

应该使用技术细分来更好地理解和优化客户在所有平台和设备上的体验。 这种类型的细分将允许您回答以下问题：

移动应用用户与我的内容互动的时间更长或更短？

即使在使用响应式设计时，网站的移动和桌面体验通常也会有很大不同。 这可能会影响您的内容的外观，以及它收到的参与度。

我的移动应用访问者的转化率是否与我的桌面访问者（销售或潜在客户）相同？

虽然您的业务目标可能保持不变，但您可能会发现移动访问者比其他目标更容易转换某些目标。 这可能会影响您的跨平台策略和漏斗设计。

是否所有浏览器都为我的访问者提供相同的 UX 体验？

如果您发现某个浏览器（例如 Safari）的转化率异常低，您可以尝试进一步调查。 您可能会发现在 Safari 上查看时购物车页面上的结帐按钮显示不正确，并且一些简单的调整可以显着提高该平台上的转化率。

使您的细分无效的前 3 个问题

因此，您定义了您的细分市场，提出了强有力的假设，一切似乎都井然有序……直到您检查了体验报告。 你的结果不是你所期望的，你想知道......为什么？

让我们来了解一下！

1. 样本量较小的细分市场

您用来优化体验结果的细分最终可能会非常小。 您可能正在比较您测试的变体的不同部分，却发现您的业务洞察力几乎没有统计意义。

不应使用统计显着性来确定何时应完成体验。 它只通知您原始版本和变体之间是否存在区别。 这就是为什么您不应该等待测试变得重要（这可能永远不会发生）或在它变得重要时立即停止体验。

相反，在停止体验之前，您必须等到达到计算的样本量。 为了更好地了解何时停止体验，请使用测试时间计算器，例如 Convert 的 A/B 测试显着性计算器。

在对报告数据进行分段时，说明样本量减少的最佳方法之一是运行原始 A/B 测试的时间是平时的两倍。 如果您事先知道您将对结果进行分段，这将特别有用。

2. 多段比较问题

请始终牢记，如果您对大量片段进行假设检验，则可能会出现 I 类错误（称为误报）。

如果您在实验技术中选择了 95% 的置信水平，那么您已经接受了单个指标的 5% 误报率。 但是，当您查看多个指标时，发现误报的机会就会增加。 因此，比较次数越多，误报的次数就越多。

这种增加假阳性率的概念也可以在多变量测试 (MVT) 中看到，其中测试了许多条件。 后期细分还会增加您的误报率，并将报告结果划分为设备、平台、区域和/或人口统计部门。

幸运的是，有许多统计方法可以缓解多段比较的问题。 这些方法通常涉及在进行分析之前调整您选择使用的显着性阈值，以便 p 值（用于确定测试结果是否为阳性）是实验考虑的比较次数的函数。

3.专注于错误的部分

在细分受众时，很容易忽略某些可能有利可图的类别。 例如，您可能会发现自己不成比例地专注于访问者的一个类别（例如您的新客户），即使另一个子集可能更适合您的产品。

请记住，细分的优点是可以让您的方法非常具体和个性化。 这意味着，即使您针对占市场比例较小的细分市场，您也可以期望获得巨大的成果。

花时间确保您确定正确的客户群至关重要，否则您将面临错失增长机会的风险。

Convert 如何处理预分割和后分割？

Convert 中的分段可以在激活体验之前或之后进行：

• 之前可以通过定义受众来完成，
• 之后可以通过根据体验期间获得的指标对报告统计信息进行分段来完成。

在转换体验工具中应用测试前或测试后的细分就像使用过滤器或在报告中包含/省略特定受众一样简单。

细分的力量对于开发 A/B 测试体验特别有用。

在最基本的情况下，它可以让公司更好地了解客户的各种品味和行为。

在更复杂的场景中，公司可以创建全新的在线体验，以响应客户登录、地区或一天中的时间等触发器。 这些修改的复杂程度不一，可以像改变行动号召一样简单，也可以像更新网站组件一样复杂。

预先细分受众

您希望作为体验的一部分的一群人被称为受众。 在激活体验之前，必须添加受众，以便 Convert 收集的数据仅影响这些个人。

只有符合这些条件的游客才有资格进入。 您可以建立一个受众来捕获有关访问者的信息并将其应用到体验中。 您还可以使用 AND/OR 条件混合不同的受众，以在特定体验中获得更精确的定位参数。

不符合您的观众条件的访客不包括在体验中。 它们被排除在您的体验之外，只能查看您网站的原始版本。 它们也不包括在“报告”页面上的体验的唯一访问者计数中。

您可以通过转到“体验摘要”并找到“受众”部分来为您的体验创建受众。 单击“新受众”下拉菜单将为您提供以下选项：

1. 预设将允许您从 111 个预建受众中进行选择，并有助于加快体验受众的配置。
   

   

2. Saved Audiences是您可以找到您之前创建的受众群体的地方，这些受众群体并未用于当前体验。
3. 如果没有任何预设符合您的要求，您可以在新受众中创建自己的受众。

创建新受众时，您必须从三种不同类型的受众中进行选择：永久受众、细分受众和临时受众。

永久观众

仅在访问者分桶时间（第一页查看）检查此类受众，并且不会再次检查。

如果访问者满足受众条件，则体验将运行。

如果访问者在后续访问中未满足受众条件，则体验将继续为该访问者运行。

分割

细分是符合特定受众条件（例如位置、用于访问网站的设备、一天中的时间以及任何其他用户行为）的一组访问者，并且可以在以后用于定位。

特定细分市场的访问者可能会以相同的方式行事或购买。

您可以通过定义受众条件来创建细分，这些条件允许 Convert Experiences 确定访问者有资格获得哪个细分并运行适当的变体。

选择此选项后，与内容相关的条件在条​​件构建器中可用，允许您基于 URL 创建细分（例如，到达定价页面的用户细分）。

临时观众

对于瞬态受众，只有当访问者满足受众条件时，体验才会运行。 但是，如果访问者不满足受众条件，则访问者将不再看到该体验。 每次页面查看时都会检查受众条件，而不仅仅是第一次查看。

选择受众类型后，您将看到受众条件，这些条件可能会因您的需要而异。 我们在另一篇文章中分享了如何根据访问者来源、目标和地理位置等详细信息来定位受众，仅举几例。

使用基本过滤器进行后分割

如果您在激活时没有将受众添加到您的体验中，您仍然可以选择在体验运行时或完成后对数据进行分段。

只需转到您的体验报告并从顶部菜单中选择“细分”选项：

默认情况下，Convert 将显示所有进入您体验的访问者的结果。 转换后，您可以过滤结果以查看某些访问者组的行为是否与您的整体访问者不同。 这称为测试后分割。

在 Convert 中，您始终可以使用默认细分过滤结果，这些默认细分会自动捕获并包含在所有定价计划中：

• 按浏览器细分
• 按设备类型细分
• 按用户类型细分
• 按国家/地区细分

让我们看看它在您的报告中的外观示例。 这是未启用测试后分段的报告：

这是启用了测试后分段的同一报告：

使用高级过滤器进行后分割

您还可以将高级自定义细分添加到您的体验中。 以下属性仅包含在特定定价计划中：

• 按流量来源细分
• 按大洲划分
• 按 10 个自定义细分（受众）细分

对于最后一个选项，您必须首先创建具有“细分”受众类型的受众（如前所述）。

在报告的后面部分，您可以使用该受众来细分您的数据，如下所示：

您可以使用这些属性进行自定义细分，从而更详细地了解对您的业务很重要的访问者。

例如，假设您运行一个测试弹出式促销优惠的体验，从而产生整体积极的提升。 但是，当您在移动设备上对访问者进行细分时，您会看到统计上的显着损失。 可能是弹出窗口在移动设备上具有破坏性，或者很难关闭。 根据您了解到的情况，您可能会考虑在将来执行更改或执行类似体验时排除移动访问者。

细分您的结果是获取深入知识（超出普通访问者的活动）以及促进您的实验工作的最有效方法之一。

以下是您可以使用这些高级细分执行的操作：

提示 1：根据 Hubspot 列表创建高级细分

您可以使用 Hubspot 网页上的转换体验来定位和后期细分属于 Hubspot 列表或 Hubspot 营销活动的访问者。

这使您可以利用组织对给定 Hubspot 列表的投资。

为此，通过将 Hubspot 模板变量列表分配给自定义转换页面标记来修改 Hubspot 模板。 这将允许您使用自定义页面标签来定位体验或创建细分后细分。

首先修改 Hubspot 模板，并在 HEAD 标记的开头和内部插入以下代码：

 <!--开始转换体验代码-->
<script type="text/javascript">
// 以下行将转换页面标记变量分配给 Hubspot 模板变量
让 _conv_custom_v1 = {request_contact.list_memberships};
让_conv_custom_v2 = {content.campaign_name}；
</脚本>
<script type="text/javascript" src="//cdn-3.convertexperiments.com/js/123456789-123456789.js"></script>
<!-- 结束转换体验代码 →

在高级受众编辑器中创建一个细分。 选择自定义页面标记条件并将其与您要定位的 Hubspot 列表或 Hubspot 活动进行比较。

提示 2：根据目标完成情况创建高级细分（“触发目标”）

您知道您可以使用目标完成来设置您的高级自定义细分吗？

这个强大的功能提供了过滤访问者的新方法。 基于“已确认订单”目标的完成创建体验可以提高重复购买者的转化率（通过为他们未来的购买创造新体验）。

转到受众并将“触发目标”条件从左侧列表拖放到右侧。 建立受众以识别已完成目标的用户：

稍后，您可以使用此自定义细分来过滤体验报告中的访问者。

提示 3：根据访客 Cookie 创建高级细分

您可以仅针对访问过您网站的特定页面的访问者细分您的体验，方法是在访问该页面时编写一个 cookie 并设置受众来定位具有该值的访问者。

提示 4：根据您的数据层创建高级细分

这是一个非常常见的网络分析跟踪示例。 您可能有一个数据层，它将有关每个访问者的数据提供给您的分析工具，例如登录状态、用户 ID、地理位置或有关页面的元数据（最佳分辨率、图像版权）。 通常，此数据在表示层或标记中不可用。

您可以使用此数据层来存储会话访问者数据，然后将特定体验呈现给某个访问者组。

为此，您需要创建要向该受众群体展示的体验，并通过高级受众编辑器配置细分。

输入以下JS代码：

 “医疗” == dataLayer[0].industry;

现在，您可以仅针对数据层的行业价值为“医疗”的访问者细分您的体验结果。

技巧 5：使用 6Sense API 创建高级细分

预测性前景分析和潜在客户评分平台 6sense 可以识别和分析潜在客户的需求，并预测他们在买家旅程各个阶段的行为。

使用Convert Experiences，您可以查询6sense聚合的数据，并以此为基础进行细分。

例如，如果您想仅针对“意识”购买阶段的访问者细分您的体验结果，则需要创建一个名为“意识阶段”的受众。

您将通过使用以下代码添加 JS 条件来做到这一点：

 （功能（） {
var visitorData = JSON.parse(localStorage._6senseCompanyDetails);
if(typeof(visitorData)=="undefined") {
convert_recheck_experiment(); 返回错误；}
否则返回 (visitorData.scores[0].buying_stage == "Awareness");
})()

观众应该这样配置：

带有 GA 自定义细分的外部细分

除了内置的分段前后，Convert 还提供了一种将数据发送到 Google Analytics 并在那里分段您的访问者的方法。

谷歌分析允许您根据他们的共同特征和需求对您的网站访问者进行细分。 默认情况下，Google 搜索引擎会收集广泛的用户详细信息，包括屏幕尺寸、互联网浏览器、引用站点和访问的页面类型。 然后可以使用这些属性对访问者进行分类。

要开始在 Google Analytics 中进行细分，请转到“自定义”选项卡并选择您创建的自定义报告以将您的转换数据发送到。 您现在可以查看符合细分过滤器的用户和会话的百分比。

当您点击“新细分”时，您将能够使用您选择的过滤器设计您自己的细分。 Google Analytics 现在允许您每个帐户最多有 1,000 个细分，但每个视图只有 100 个细分。

下图显示了为每个段配置过滤器的各种可能性。

完成创建新细分后，单击“预览”以查看它将如何改变现有报告。

结论

细分将 A/B 测试提升到一个全新的水平，从而在您的受众中实现更大的转化率优化 (CRO)。 In a world of haphazard A/B testing, segmenting your testing efforts adds a layer of accuracy and completeness that is simply not otherwise achievable.

When testing new features, segmentation ensures that your experiences will have a better probability of declaring a winner.

You'll have a good knowledge of where the visitor comes from, what their intentions are, and how to test their behavior.

Your A/B testing will become exponentially more beneficial, thanks to the wide range of secondary insights created by every experience, which can be used for follow-up tests, identifying pain points, and gaining a deeper understanding of how customers interact with your products.