使用 Google Optimize 和其他免费 A/B 测试工具? 当你看到这 6 件事时转变……
已发表: 2021-07-15A/B 测试工具真的可以免费吗?
不,不是。 您可能认为支付服务费用只是交出您的信用卡信息的问题,但您是否考虑过如果有人事先不要求您什么,您可能会放弃什么作为交换?
当然,市面上有很多免费和开源的 A/B 测试工具。
但是您有没有想过,您不为需要花钱建立和维护的服务付费的原因是否是您以其他方式付费?
刚开始时,Google Optimize 等免费工具非常棒。 它们可以帮助您理解和应用实验的基础知识。
但是随着您的进步,有些事情会让您想要重新考虑您首选的 A/B 测试软件。 这并不是因为免费工具无法完成工作,而是因为您想要超越的限制。
让我们向您展示……
- 有没有免费的 A/B 测试之类的东西?
- 免费与免费增值 A/B 测试工具(附示例)
- 免费与开源 A/B 测试工具(附示例)
- 1.芥末
- 2. 虚荣心
- 3.莫吉托
- 4.拆分
- 什么时候可以使用像 Google Optimize 这样的免费 A/B 测试工具?
- 谷歌优化辩论
- 什么是谷歌优化?
- 从 Google A/B 测试工具转移的 6 个理由
- 1. 对贝叶斯的过于宽泛的解释
- 2. 功能限制
- 3.缺乏支持
- 4. 测试结果对 SEO 的影响
- 5. 测试访客人数通胀
- 6. 关于抽样的争论
- 如何选择免费 A/B 测试工具的替代品
- 1.弄清楚你的“为什么
- 2. 做一个 A/B 测试工具比较
- 3. 列出您的首选工具
- 寻找免费 A/B 测试工具替代品的捷径
- 结论
有没有免费的 A/B 测试之类的东西?
如果金钱是您考虑的唯一因素,那么 A/B 测试可以是免费的。
有许多工具只需 0 美元即可运行测试并为您提供结果。
但是,如果您从业务的角度来看,考虑到其他有助于成功或失败的资源,那么您可能想要更深入地研究。
这些免费工具中有许多是为首次测试人员设计的,以便他们在营销实验中涉足。 当这些营销人员想要进一步测试或实施更高级的策略时,他们很快发现他们的免费工具无法执行这些操作。
如果它是免费增值工具,您会看到“注册专业计划”通知阻止了您通往高级功能的道路。
但这还不是全部。
对于大多数免费工具,您将牺牲的不仅仅是高级功能。
免费与免费增值 A/B 测试工具(附示例)
最好的免费 A/B 测试工具之一是 Google Optimize——Google Analytics Content Experiments 的继任者。
谷歌优化让你开始:
- A/B、A/B/n、多变量和拆分 URL 测试
- 为您的网络访问者提供个性化体验
- 使用响应式所见即所得编辑器创建网站的变体
- 在基本代码编辑器中编辑网站的 HTML、JS 和 CSS
- 与 Google Analytics 集成以提取有价值的见解等等……
另一方面,免费增值工具从免费工具停止的地方获取。 您从一个免费计划开始,该计划为您提供基本功能或在有限时间内使用专业功能,然后您必须付费。
但这通常是值得的。 这些是您可以期望使用它们的常见功能:
- 您可以同时运行的测试数量没有限制
- 目标数量没有限制
- 能够计划和执行更复杂的测试
- 在应用程序和网站(不仅仅是网站)上运行测试
- 与您使用的许多其他营销应用程序集成
- 客户支持
更多取决于您使用的工具。
Nelio 就是一个例子,它是一种用于 WordPress 和 WooCommerce 网站的开源 A/B 测试软件。 每月 500 次页面浏览是免费的。 如果您有多达 5000 名访客,则需要支付 29 美元/月的起始价格。 它带有无限的实验和技术支持。
此外,您应该知道可以选择另一种免费工具——开源 A/B 测试工具。
他们有什么不同?
免费与开源 A/B 测试工具(附示例)
开源 A/B 测试工具在免费的同时提供了一些额外的好处。
一些例子是:
1.芥末
这是 Intuit 完全免费的开源 A/B 测试工具。 那么有什么问题呢? 它不再处于积极开发中,也没有支持。 此外,您需要一些技术知识来部署这个 100% API 驱动的实验平台。
2. 虚荣心
Vanity 还允许您在您的网站和应用程序上运行实验。 但就像 Wasabi 一样,您可能需要开发人员来帮助安装和配置 Vanity 以运行您的 A/B 测试。
3.莫吉托
它是一个开源实验堆栈,可让您使用 git 构建和运行测试。
4.拆分
Split 是一个基于机架的 A/B 测试框架,可实现最大程度的定制和可扩展性。
但当然,没有支持团队。 这很困难,因为部署这些工具通常需要强大的技术背景。
只有你、工具和你的实验。 如果出现任何问题或者您不知道如何采取某种行动,您必须希望它在文档中,或者有一个帮助社区/论坛可以运行。
此外,没有人有义务消除您可能发现的任何错误。
一款免费工具在所有这些开源工具中遥遥领先。 那是谷歌优化。
虽然是营销人员的最爱,但它的设计初衷并不是一个完整的实验解决方案。 但有时使用 Google Optimize 非常有意义。
什么时候可以使用像 Google Optimize 这样的免费 A/B 测试工具?
除了作为网站 A/B 测试软件的绝佳介绍之外,Google Optimize 等 Google A/B 测试工具还非常适合:
- 证明新的设计理念适用于您的网站
- 对提高您的网站转化率进行细微更改
- 确保提出的想法不会降低您网站的当前性能,以及
- 通常,帮助您做出明智的决定,以提高您现有流量的底线
但最终,优化团队最终会超越这一点。
转化率优化和实验顾问 Lorenzo Carreri 说:
免费的 A/B 测试工具非常适合那些刚开始进行实验的人。 但是有一些限制,就像这个世界上其他免费的东西一样。 首先,根据工具的不同,您通常会受到可以运行的实验数量的限制,因此如果您想提高实验速度,这是一个挑战。 其次,根据我的经验,我在工具随机化流量的方式中遇到了错误和问题。 这当然会完全污染并使您的测试无效。 正如您可以想象的那样,这很烦人,因为您刚刚浪费了很多时间来设计、构建和 QA 测试。 你现在被困在你的实验程序中,直到错误/问题得到修复。
谷歌优化辩论
什么是谷歌优化?
Google Optimize 可让您免费运行 A/B 测试以提高您的网站性能。 它有一个简单的界面,任何人都可以在他们的第一次测试中轻松搞定——它与谷歌分析完美集成。
它还与 Google Ads、Google BigQuery、Accelerated Mobile Pages (AMP) 等兼容。除了 A/B 测试之外,您还可以在 Google Optimize 上运行重定向、个性化、多变量和横幅测试。
Google Optimize 的其他优点是您可以:
- 只需很少的技术知识即可轻松自行排除故障,
- 无压力地定义详细的受众细分,以及
- 以易于理解的界面和术语查看测试报告。
这非常适合小型企业的 A/B 测试。 但是,当您积极致力于增长时,您会很快发现自己在很多方面都受到限制。
由于谷歌优化是一个免费工具,他们不会使用很多资源。 例如,您不能将图片直接上传到平台。 它必须托管在其他地方。
当您的需求超过某个点时,Google Optimize 将不再能够处理您的测试。 您必须升级到付费的 Google A/B 测试工具 Google Optimize 360。
其他限制是:
- 您一次只能进行 5 次测试
- 您不能设定超过 3 个目标
- 您只能测试网站,不能测试应用
- 您的测试不能运行超过 90 天
- 在多变量测试中,最大变量数为 16
- 您在 Google Optimize 的代码编辑器中编写的代码不能超过 10,240 个字符
- 如果您不使用 Google Analytics,那么将 Google Optimize 与您的“外星人”分析工具集成起来可能会很麻烦
现在,不要误会我的意思。 我们并不是在抨击这个心爱的工具。 我们只是为您提供不同的视角。
Google 优化工具并非旨在成为 A/B 测试的开始和结束。 这就是他们以定制价格提供高级 360 版本的原因。
此外,将 Optimize 和 Optimize 360 视为一项服务表明,从本质上讲,Google Optimize 是一种免费增值工具。
如果您想扩展您的 A/B 测试,切换到付费选项是明智的选择。
尝试一种经济实惠且功能强大的免费测试工具替代方案。
从 Google A/B 测试工具转移的 6 个理由
就像 Google Optimize 等免费工具用于 A/B 测试一样方便,现在是时候做出转变了。
我们建议在以下 6 个问题开始影响测试速度或在关键测试结果的计算方式中引入不透明性时进行切换:
1. 对贝叶斯的过于宽泛的解释
在 Optimize 的文档中,谷歌表示他们正在使用贝叶斯推理“更好地回答营销人员实际遇到的问题”。
这里有一点背景:
贝叶斯推理是一种通过使用先前信息来更新事件发生概率来进行有根据的猜测的方法。
这是一个用更简单的术语来说明这一点的例子。
想象一下,你被蒙上眼睛,被要求从一篮子 3 个橙子和 1 个苹果中挑选。 你摘苹果的机会很小,对吧? 4 分之一,即 0.25,因此有 25% 的机会采摘苹果。
如果你被告知最后 3 个被蒙上眼睛被要求选择的人都选了一个橙子怎么办? 这让你觉得你现在采摘苹果的机会如何? 很自信,对吧? 那是因为你知道只有 3 个橙子,如果已经有 3 个人摘了它们,你就有 100% 的机会摘到苹果。
因此,您正在根据对先前事件的了解,在心理上调整摘苹果事件为真的概率。
这就是谷歌优化所使用的框架——许多人会认为它缺乏严谨性并且太不透明,尤其是在“预先”选择方面!
这就是我的意思。
在文档中,他们对“什么是'最好的概率'?”的回答。 去:
贝叶斯先验是关于我们认为变体或实验将如何表现的建模信念。 […] 对于 Optimize,我们使用各种先验。
请注意,这是预测性的,而不是基于最终结果。 这是除了先前的假设/信念被纳入您的数据这一事实之外。 谷歌优化不会让你知道这些先前的假设/信念到底是什么。
另一方面,我们有其他测试工具使用的基于频率的统计方法。
根据维基百科,
频率论概率或频率论是对概率的一种解释; 它将一个事件的概率定义为它在许多试验中的相对频率的限制。 概率可以(原则上)通过可重复的客观过程找到(因此理想情况下没有意见)。
频率论推理允许您在运行定义明确的随机实验后做出明确的“通过”或“不通过”决定,并且将偏差影响结果的风险降至最低。
这就是 Convert Experiences 用于其测试的内容。
2. 功能限制
Google 对向所有人提供其所有测试功能不感兴趣。 这将是违反直觉的,并导致在资源上浪费金钱,例如花费真金白银的服务器。 如果免费的 Google Optimize 没有功能限制,很多人会使用它,给公司带来巨大压力。
因此,对于营利性企业谷歌来说,这样做是没有意义的。
如果您刚刚开始,这不会对您的优化目标产生太大影响。 但是当你成长时,谷歌优化的功能限制会扼杀你的成长。
就像我们上面提到的,这些限制最多包括:
- 5 次测试
- 3个进球
- 90 天运行时间
- 16 个变量,以及
- 代码编辑器中的 10,240 个字符
还有更多……
你:
- 无法测试复杂功能
- 测试运行时无法添加目标
- 无法自定义 Google Analytics 受众
此外,没有将获奖者推向个性化的功能。 这使您可以通过尝试复制您从实验中获得的提升来验证这些获胜者,而无需立即永久更改内容。
转换体验具有该功能。
3.缺乏支持
事实是,没有商业头脑的开发人员会支付专门的支持团队来为非付费客户提供服务。
因此,就支持而言,您可以从 Google Optimize 获得的最佳服务是他们的资源中心。
从好的方面来说,它非常详细。 您可以从提示、Google Optimize 视频教程、社区、入职提示等中获得一切。但没有实时支持。
没有人可以打电话,没有实时聊天,没有电子邮件支持。 只有当您选择付费选项——Google Optimize 360 时,您才能获得它。
4. 测试结果对 SEO 的影响
在不对您的 SEO 产生负面影响的情况下运行 A/B 测试有一些最佳实践。
但是,如果您使用 Google Optimize 运行 A/B 测试,无论如何您都有可能损害您的 SEO。
这是因为闪烁——当用户访问您正在测试的页面并在显示其变体之前的一瞬间看到该页面的原始版本时,就会发生这种情况。
这不仅会影响测试结果的质量,还会损害用户体验。
谷歌在搜索引擎优化方面的用户体验很重要。
为了解决这个问题,Google Optimize 提供了一个可以添加到页面的防闪烁代码段。
此防闪烁代码段的工作原理是使您的网站元素透明(或不可见),直到加载来自 Google Optimize 的 JavaScript 的变体。 因此,在变体准备好之前,页面不会看到原始的瞬间,而是保持白色。
但是这个片段有一个问题,即使谷歌优化器在“安装防闪烁片段”帮助页面上显示这个警告。
他们说:
仅在必要时安装防闪烁代码段,因为它会影响页面性能。
因为它延长了页面加载时间。 因此,查看变体的用户比获得控制权的用户体验更差。
因此,尽管您努力消除片段的闪烁,但您的 SEO 仍然受到打击。
转换体验可以快速为您的变化提供服务,没有任何烦人的闪烁。
5. 测试访客人数通胀
您的访问者计数是访问您的站点并参与您的活动测试的每月唯一访问者的数量。 此计数不是某个访问者访问您的网站的次数(会话),而是这些唯一访问者中有多少。
Google Optimize 有一种方法可以记录对您的测试结果产生负面影响的访问者数量。
这个谷歌 A/B 测试工具使用谷歌分析规则,会话被测量为 30 分钟,有时可以延长到 4 小时。 这对您意味着,如果有人在上午 9 点访问您的网站,然后在下午 2 点(5 小时后)返回,Google 优化工具会将其记录为 2 个唯一身份访问者。
这会使您的转化率低于实际水平,从而使您的结果不那么准确和令人印象深刻。
为什么会这样? Google Optimize 是一个免费的测试平台。 为了尽量减少使用服务器存储来保存用户数据,他们必须使这些会话保持简短。
因此,如果您需要更好的结果,请考虑一个值得您投入的每一分钱的付费替代方案。
6. 关于抽样的争论
Google 否认在 Optimize、Optimize 360、Analytics 或 Analytics 360 中进行任何采样。相反,它声称它从 Google Analytics 数据表中提取未采样的数据,并且不会在优化应用程序本身内执行进一步的采样。
这是他们支持团队的官方声明:
优化数据是从底层的 Google Analytics 数据表中提取的,而不是抽样的。 而且,Optimize 不会在 Optimize 界面中强加任何采样。 这意味着您在优化工具中看到的任何数据都是非抽样的,无论您是使用优化工具还是优化工具 360,还是使用 Analytics 或 Analytics 360。
也就是说,经验丰富的优化人员注意到了在高流量网站上采样的令人担忧的趋势(想想数百万的访问者)。
Speero 的首席技术官 Silver Ringvee 发现采样是他们的团队每天都会遇到的问题:
在 Speero,我们合作的大多数网站都有相当多的访问者,每月产生数百万次点击。 当然,这些网站中的大多数都有 Google Analytics,但并非所有网站都有高级 GA360 版本。
这意味着抽样是我们每天都要处理的问题,尤其是在使用自定义细分分析 A/B 测试结果时。 无论是优化工具还是其他工具,在 Google Analytics 中分析这些数据时,采样仍然是一个问题。
话虽如此,您在 Google Optimize 报告中看到的数字并未抽样,但这些数字不允许进行任何高级分析。 虽然 Google Optimize 报告中的数据没有被抽样,也没有在其 ToC 中明确说明,但我相信这些数据仍然受到 Google Analytics ToC 中提到的数据收集限制的影响。 这种信念得到了以下事实的支持:Optimize 基于与 Google Analytics 相同的数据集,并且我们在 Optimize 中看到了一些相当奇怪的数字,这些数字用于接收大量点击(每月超过 1 亿)的网站。
为什么采样首先发生? 这是一种节省基础设施资金或加快报告加载速度的方法。 但是,它会降低结果的准确性,因为您只查看原始数据集中的一部分数据。
Speero 的 Silver Ringvee 找到了一种规避采样问题的解决方案:
对于任何关键业务决策(例如决定 A/B 测试的获胜者),我总是会等待更长的时间,然后根据 100% 的数据获取报告。 不幸的是,免费版的 Google Analytics 没有给我们这个选项。 接收大量访问者的站点将不得不处理抽样问题。 尤其是在使用非常常见的自定义细分来分析 A/B 测试的结果时。
因此,抽样可能会导致 A/B 测试中的数据出现偏差,从而导致您走上错误的道路。 如果您在网站上获得大量流量,请考虑使用付费工具,该工具不会弄乱您的数据并为您提供准确的报告。
如何选择免费 A/B 测试工具的替代品
您将使用免费的拆分测试解决方案达到自然停止点。 这可能会阻碍您从实验中获得的结果。
但这没关系。 这仅意味着您已经进步到不再是首发的地步。
即使您还没有处于企业级别,您也可以找到适合您所处的三明治位置的正确工具。
就是这样:
1.弄清楚你的“为什么
您为什么选择切换到付费工具?
当您了解要摆脱的限制以及要开始使用的功能时,它将帮助您做出明智的决定。
你想摆脱闪烁吗? 您是否希望运行更多并发测试? 或者您是否在扩展业务时寻求专家支持?
当您找到推动迁移的功能后,接下来要做的就是根据某些标准评估可用工具。
2. 做一个 A/B 测试工具比较
并非所有工具都是平等的。 当然,功能是一个差异化因素。 但还有更多。
即使它们以相同的价格提供相同的功能,还有其他可能对您很重要且值得评估的表面下特性。
您可能有以下问题:
- 他们对用户隐私的立场是什么?
- 他们使用什么定价模式?
- 与成本相比,它们的功能是否有意义?
- 他们是否表现出对世界的关心?
需要评估工具列表吗? 在这里检查。
或者查看这个全面的 A/B 测试工具比较,以找到满足您需求的最佳选择。
3. 列出您的首选工具
在这一点上,您可能已经找到了 3 或 4 个符合您对理想工具的想法的工具。
对于某些工具,在查看定价时,您的初始评估可能会碰壁。 许多 A/B 测试工具仅在与销售代表多次交谈后才会显示自定义价格。
确定入围首选工具后,请通过免费试用版对其进行测试。 然后,找到你的赢家。
当您从 Google Optimize(或任何其他免费的 A/B 测试工具)转换时,您可能会进入一个更复杂的环境。 与免费替代品相比,付费工具配备更多,并且可能更复杂。
这就是为什么您的获胜者应该提供强大的客户支持。 无论是实时聊天还是 24/7 电话和电子邮件支持,您都需要可靠的支持,您可以随时依靠,这样您的工作就不会因为任何挑战而减慢。
寻找一个用户以这种方式谈论支持团队的工具:
- “客户支持团队快速、知识渊博且以解决方案为导向。”
- “支持总是友好和乐于助人的。”
- “支持是一流的,反应迅速。”
选择的工具应该有合适的支持团队来帮助您从免费的 A/B 测试工具顺利切换到付费的 A/B 测试工具并扩展您的测试计划。
寻找免费 A/B 测试工具替代品的捷径
如果您需要寻找免费 A/B 测试工具的替代品,但又不想为此花钱,请免费试用 Convert Experiences。 它为您提供 15 天的免费访问权限,以便您在做出任何购买决定之前评估它是否适合您的需求。 您可以与 100 多种工具集成,并根据自己的条件运行 A/B 测试。 无限。
结论
Google Optimize 等免费 A/B 测试工具非常适合启动您的 UI、UX、网站、应用程序等测试体验。但自然而然,这些工具的设计是有限制的,因为它们不会为工具所有者带来收入.
这对您意味着,当您需要做的不仅仅是基本实验时,这些免费和开源测试工具的功能会限制您。
要跨越这个障碍并将您的优化提升到一个新的水平,您必须选择付费的 GO 替代方案。 令人惊奇的是,您可以获得价格实惠且功能强大的工具,例如 Convert Experiences,它通过专门的支持团队提供无限的功能,帮助您最大限度地提高投资回报率。