A/B 测试会损害您的业务吗? 使用错误 A/B 测试工具的 4 种方式可能会损害您的业务
已发表: 2020-05-28不要忽视您的 A/B 测试工具。 它们对于您的企业来说太重要了,不能仅仅将其视为您技术堆栈中的另一个 Martech 产品。
您如何分配营销预算、您的网站获得的流量、您的运营开销大小以及被罚款 2000 万欧元的可能性与您选择的测试工具有很大关系。
所以,要注意这一点。
以下是错误的 A/B 测试工具会使您的公司亏损或面临亏损风险的一些方式:
- 失去对优化目标的关注
- 宝贵流量的损失
- 运营成本增加
- 隐私和数据风险
- 结论
失去对优化目标的关注
多合一工具很方便——如果您需要所有这些功能。 但问题是,你很可能不会。 事实上,Gartner 2019 年的一项研究表明,英国和北美 42% 的营销人员未充分利用他们的营销堆栈。
因此,您会看到,从供应商的角度来看,许多新功能令人兴奋。 它们非常适合营销。 但是当涉及到优化器实际需要该工具的任务时,有哪些可用的功能?
浏览一个试图做所有事情但什么都做不好的工具的混乱 UI 有多容易?
当您获得此类工具时,通常会有一个更有趣的问题:基本计划包含可帮助您收集定性数据的功能。 但是在设置和运行测试时,您会遇到困难,因为您需要的功能现在被一个更昂贵的计划所保留。
有时这就是企业计划。 “好吧,让我们花掉额外的钱。” 另一个问题是:定价是自定义的,现在您必须与销售团队通电话以确定您将支付多少。 最终变成了五个数字。
这还不是全部……
一体化测试平台降低了 A/B 测试的决策能力。 因为鼓励用户依赖热图、会话记录等。归根结底,这些并不能帮助您做出更好的营销或开发决策。
以热图为例,它们并不能准确地告诉您用户的注意力在哪里,而只是鼠标指针在哪里。 这就是为什么 Peep Laja 将其称为“穷人的眼球追踪工具”。
试图将人们使用鼠标的方式与他们关注的地方联系起来会导致判断不准确。
谷歌的研究表明:
- 94% 的人显示鼠标移动和眼球追踪之间没有垂直相关性
- 81% 显示鼠标移动和眼球追踪之间没有水平相关性,并且
- 10% 的人将鼠标悬停在链接上,然后继续阅读页面上的其他内容
现在问问自己:你的眼睛在鼠标指针的位置吗?
热图并未被证明有助于衡量和表示风险。 当然不是决策。 它们实际上被证明会导致错误和混乱。
所以,最后,它甚至不是有用的定性数据。 它浪费了投资并减慢了目标的实现。
要提高生产力和效率,您需要的是一种工具,它可以做您想做的事情而不会造成混乱。 Gartner 还证明,使用集成套件方法进行营销技术的营销人员在实现营销目标方面的效率仅为 28%,而选择完全符合其独特需求的工具的营销人员则为 45%。
您需要一个 A/B 测试工具,为您和您的团队配备从头到尾执行复杂测试所需的所有功能 - 在您现有的计划中。
这就是 CRO 机构 Mintminds 在面临改进电子商务品牌产品页面的挑战时所做的。
他们评估了热图,发现人们关注了页面上的某些部分。 他们用它开发了 4 个页面变体,使访问数据显示人们正在寻找的信息变得更容易。
然后他们在 Convert Experiences 上设置了测试并运行它。 结果? 没有人能打败控制,相反,所有 4 人的转化率都下降了。
他们做的下一件事是转向用户研究。 根据他们挖掘的洞察力,他们这次为页面创建了一个新变体,并提出了不同的假设。 他们对对照运行了 28 天,得到了不同的结果。
加入购物车的比率比对照高 13%,订单转化率上升 4.96%,每位访客的收入增加 6.58%。
正如全文页面上的标题所说,“没有上下文的数据具有误导性。”
宝贵流量的损失
就像人流量对实体店很重要一样,网络流量对在线公司也很重要。 全球有超过 45 亿人使用互联网。 这些人是大多数在线营销活动的目标。 公司使用 SEO 和 PPC 来吸引网络流量到他们的网站,希望卖给他们。 这些技术非常有效且需求旺盛,2017 年 PPC 支出超过 100 亿美元,而 SEO 服务预计今年仅在美国就达到 800 亿美元!
您的团队可能正在使用 SEO、PPC 甚至两者来为您的网站增加流量。 如果您使用了错误的 A/B 测试工具,您在增加流量上所花费的努力和资源可能都是徒劳的。
A/B 测试工具并非生来平等。 有些可能会影响您网站的加载时间。
页面速度很重要,因为它会影响转化率、自然排名和用户体验。 在页面上进行测试时,您的 A/B 测试工具会增加页面加载时间。 由于您页面上的额外脚本以及提供新变体的时间。
谷歌的一项研究发现,移动页面速度的第二次延迟可以将转化率降低多达 20%。 随着超过 30 亿人使用智能手机访问互联网,更快的移动页面速度比以往任何时候都更加重要。
您的 A/B 测试工具可能会花费您来之不易的流量的另一个领域是原始内容的闪现 (FOOC)。
这也称为测试中的闪烁。 当测试页面的访问者在加载测试变体之前看到原始页面时,就会发生这种情况。 它发生在一瞬间。
一些测试工具会异步加载它们的脚本,以减少它们对页面速度的影响。 但这会导致闪烁。 如果游客继续经历这种情况,他们就会离开,因为没有人喜欢未经许可接受测试。
如果他们注意到闪光但没有离开,这可能会影响测试的完整性,因为他们现在知道发生了什么。
Convert Experiences 等 A/B 测试工具及其 SmartInsert 技术不仅可以消除闪烁,而且对页面加载速度的影响也很小。
它是这样工作的:当网页通过安装在网站上的 A/B 测试工具脚本加载更改时,导致闪烁的 A/B 测试工具在访问者的浏览器中应用更改。
同时,我们开发的技术作为浏览器和网站之间的层加载。 这样,更改是可见的,而原始内容是隐藏的。
当原始内容加载速度快于变体时,您会看到闪烁。 这意味着错误的版本首先到达终点线。
据麻省理工学院的神经科学家称,人脑识别图像只需 13 毫秒。 闪烁可以持续长达 100 毫秒到一整秒。
使用转换体验,您想要的版本总是首先到达终点线。 无闪烁测试,因此您不会丢失流量并损害您的测试结果。
运营成本增加
无论是财富 500 强公司还是夫妻店,降低运营成本是每个企业的目标。 无论是减少非生产时间、中断还是劳动力成本,企业都希望降低间接成本。
当您每周花费数小时在电话上试图联系正确的支持代理以解决您的测试工具问题时,这可能很难实现。 花在电话支持上的时间会降低您的整体生产力并花费您的公司资金。 盖洛普报告称,生产力低下每年使全球公司损失 7 万亿美元。
人工成本占企业运营成本的 70%。 每次您将开发人员从他们的职责中拉出来,并将他们与复杂的测试工具设置捆绑在一起时,您都在推高运营成本。 考虑一下花费的加班费,以便开发人员可以将您的新 CRO 工具与您当前的 Martech 堆栈集成。
需要大量开箱即用的开发资源和无响应的支持代理的测试工具将显着增加您的运营成本。
相反,您的策略应该是合理地花费在工具上,并将剩余的预算投资于强大的优化团队。 您的 A/B 测试工具每年不应花费 100,000 美元。
工具仅此而已,工具。 如果没有人使用它,它也可以放在展示玻璃中。 大多数优化专家都同意这一点,这就是为什么在 LinkedIn CRO 社区中有一个完整的#TeamOverTools 活动。
优化人员可以使用像 Convert Experiences 这样足够强大的工具来产生收入驱动的结果,该工具的支持速度提高了 4 倍,以帮助您的团队做得更好。
与其每年订阅 6 位数的 A/B 测试工具,不如将您的资金重新投入到团队中。 投资于创建您的假设、推进您的实验文化并使用工具来提取驱动您的业务决策的洞察力的人。
该工具只能与使用它的人一样好。 当然,工具很重要,但工具本身并不能运行您的优化程序。 人们会。 没有人,你将无处可去。
隐私和数据风险
今天的世界更加注重隐私。 保护技术用户隐私的法律法规如雨后春笋般涌现。
当今影响最大的 3 项决策并导致科技行业处理数据和分析的方式发生重大转变:
- 通用数据保护条例 (GDPR)
- 关于隐私和电子通信的隐私和电子通信指令,也称为 ePrivacy 指令
- 加州消费者隐私法 (CCPA)
例如,在 A/B 测试中,GDPR 明确规定,在世界任何地方处理欧盟公民数据的每个人都必须遵守 GDPR。 在处理任何此类数据之前,您必须获得同意,说明数据处理的目的,并便于撤回此同意。
实际上,这将
- 影响您可以为 A/B 测试收集的数据量,
- 缩短 cookie 生命周期存储限制,
- 将测试人群限制在那些没有在浏览器上激活“请勿跟踪”的人,等等。
此外,ePrivacy 指令要求匿名访问者的 ID、不存储和处理最终用户的个人数据、针对地理位置和时区请求同意等。
当然,这带来了一些主要问题,因为违约的罚款感觉不仅仅是在手腕上打耳光。
如果按国家/地区划分,这个数字会上升。 在美国,遭受数据泄露的企业的成本为 819 万美元。
随着欧盟数据保护法 (GDPR) 的实施,数据泄露的成本现在要高得多。 处理来自欧盟公民的任何数据的公司必须完全遵守 GDPR,以免面临巨额罚款。
2019 年,法国数据保护机构因数据泄露对谷歌罚款 5700 万美元。 就在最近,西班牙一家小型咖啡馆因违反 GDPR 的一部分而被西班牙数据监管机构 AEPD 罚款 1,500 欧元。
实验工具收集有关访问者看到您的变体的数据。
这些数据是匿名的吗? 它是否完全符合 GDPR 标准?
如果您的 A/B 测试工具收集并存储有关访问者(尤其是来自欧盟的访问者)的个人身份信息,它可能会使您的业务面临罚款,可能从数千美元到数百万美元不等。
符合 GDPR 的测试工具是确保您的企业在发生数据泄露时在收集、存储和处理访问者数据方面不承担任何责任的唯一方法。
现在,您不必在 A/B 测试之前获得同意。 但不要交叉手指祈祷这不会发生。 如果您觉得是时候保持隐私法的安全,请转向转换。
Convert Experiences 是实验隐私领域的领导者。 因此,您可以依靠我们的工具来遵守所有法规并适应隐私法规的变化。 当我们步入一个没有 cookie 的未来时,请获得一个测试工具,该工具将与您的团队一起成长,并使您的优化程序保持最佳状态。
结论
错误的 A/B 测试工具不仅会花费您的公司资金,还会花费您的时间并使您的公司承担责任。 如果您发现自己处于这种情况,则应该切换到更好的工具。 您需要一种可以根据您的需求定制的工具,该工具对页面速度的影响最小,并且比行业平均支持响应速度快 4 倍。
该工具有一个名称:转换体验。 免费试用 15 天。 不需要信用卡。