实际假设构建:专家的做法

已发表: 2019-08-16
实际假设构建:专家的做法

什么是假设?

对问题提出的解决方案,其有效性需要评估。

为什么假设对您的优化程序至关重要?

对改进的内在渴望是驱动优化程序的动力,但仅仅为了测试而测试是失败的设置。 实验需要一个决定成功的主要目标。

提出一个假设迫使我们思考这个目标是什么,我们应该如何努力实现它,以及要寻找什么结果。 一个好的假设提供了结构。

一个糟糕的假设会造成混乱; 垃圾进垃圾出。 假设是实验的基础,它包含构建拆分测试所需的所有信息。

您如何构建拆分测试假设?

拆分检验假设的三个主要组成部分:理解、响应和结果

为了使组件易于记忆,它们遵循我们所有人都非常熟悉的 CRO 首字母缩写词。

每个组件由两到四个简短的书面片段组成,描述通过研究、设计和测量收集的数据。 将这些片段组合成句子,你就建立了一个可靠的假设。 这是一个示例,每个数据片段都以粗体标记:

  • 理解:通过比较过去 6 个月的购买数据,我们观察到多件商品的购买量有所减少
  • 回应:我们希望在手机的购物车页面通过在线追加销售来推广配对产品,以供购物车中已有商品的返回用户使用
  • 结果:这应该会导致单品购买者更容易找到和购买互补产品,这将通过平均订单价值 (AOV)来衡量,并由平均订单规模、多品购买数量、订单转化率和收入来支持。

您可以看到每个片段如何描述从研究中收集、通过设计提出的重要数据或概述测量标准。

组合在一起,它们被解读为一个完整的假设。 现在,让我们深入研究每个组件。

理解

理解来自研究; 它正在识别和理解您想要利用的问题。 例如:“ 90% 的用户在第 3 次输入后就放弃了注册表单。” 理解由两个片段组成:观察和观察方法。

观察

要识别问题,首先必须观察它。 挖掘一些数据并弄脏你的手。 查找有关您的网站的某些内容不如您希望的那样好。 研究的两个主要途径是分析和反馈。 分析是大规模的数字、定量数据; 通常是被动收集以供以后聚合的数字统计数据。 反馈是积极收集并代表用户行为的描述性轶事数据。

观察方法

您用来识别问题的工具、技术或过程。 将观察方法纳入假设有助于证明您进行了研究。 每种研究的观察方法示例包括:

分析

  • 技术:热图、页面漏斗、会话重播
  • 工具:谷歌分析、SessionCam、FullStory

反馈

  • 技术:调查、可用性测试、产品评论
  • 工具: Hotjar、Qualaroo、TurnTo

回复

响应来自设计; 它正在提议并针对您想要进行的更改。 通常,这可以从一个问题开始,例如“如果我们在类别网格显示中增加产品图像的大小会发生什么?”

反应是你实验的“肉和土豆”; 将在拆分测试软件中配置的核心。 形成响应的片段是:变体、位置和受众

变化

提出的改进是什么。 这是实验的理论部分。 无论您认为任何更改都会胜过网站的当前状态,无论大小:按钮上更强大的号召性用语文本、更大的图像、减少表单输入、重新设计的标题导航。 你明白了; 简短描述您超越基线的想法。

地点

实验将在您的网站上进行的位置; 页面类型、URL 定位、设备范围和/或屏幕断点。

观众

谁应该看实验; 有关提供有意义的行为反馈的用户状态的具体细节。

响应的片段是您如何确定实验范围和微调结果数据的信噪比。

例如,如果变体正在改变电子商务网站的估计订单总数的位置,则目标可能是购物车页面,然后受众将只是购物车中有商品的用户。 您不希望从与空购物车页面交互的用户那里收集数据,因为他们无论如何都不会看到显示购物车总数的 UI 元素。

正在寻找一种 A/B 测试工具,让您在定位和受众构建方面变得非常成熟? 查看 Convert Experiences 的功能。

结果

结果来自测量; 这就是定义和评估成功的方式。 结果的片段是:期望的行为改变、主要 KPI 和次要 KPI

期望的行为改变

您希望由响应引起的用户行为变化; 要么鼓励积极的行动,要么阻止消极的行动。

主要 KPI

决定实验成功或失败的指标。 测量实验试图影响的用户操作。 实验存在的理由。

次要 KPI

备份主要 KPI 的指标。 这些可以帮助您充实主要 KPI 所讲述的故事,和/或检查意外的用户行为。 次要 KPI 通常是目标区域和主要 KPI 终点之间漏斗的每个阶段的转换。

例如,如果您的主要 KPI 是来自订单的收入,并且实验针对产品页面,那么次要 KPI 将是添加到购物车、购物车浏览量、结帐浏览量和订单转化。

假设生成器

在 Corvus CRO,我们致力于构建小工具来帮助 CRO 专家的生活更轻松。 为此,我们构建了一个假设构建器,以帮助简化和标准化拆分检验假设的构建。 它是一个 Web 表单,它为每个必要的片段输入文本,并将它们组合成一个完整的假设。 您可以使用该工具来证明和建立自己的假设。 甚至还有一个“复制到剪贴板”按钮,因此您可以轻松获取您构建的假设并将其粘贴到您选择的项目管理工具中。 我们希望您能像我们一样充分利用该工具!

收集每个片段可能是一个耗时的过程,但回报是结构稳固的实验,从长远来看将提供更多的整体价值。

一盎司的预防胜于一磅的治疗; 前期多做一点准备工作可以显着减少后期的开销。

罗盘
罗盘