测试思维导图系列:如何像 CRO 专业人士一样思考(第 16 部分)
已发表: 2022-06-25采访瑞恩·托马斯
CRO 世界中有很多最佳实践,人们倾向于盲目遵循。 例如,“您必须至少运行一个测试两周”,或者“您一次只能在同一页面上运行一个测试”。
在本文中,Koalatative 联合创始人 Ryan Thomas 挑战人们思考何时以及为什么放弃这些最佳实践是有意义的。 并真正专注于最重要的事情:善于与客户交谈并了解他们的动机和担忧。
Ryan 认为测试持续时间或并发测试的数量不应该一成不变,因为它们是高度相关的。
在现实世界中,转化率优化没有什么硬性规定——所以总是挑战教条,边做边学!
现在开始面试……
瑞恩,告诉我们你自己。 是什么启发了您进入测试和优化领域?
自 2010 年代初以来,通过阅读博客文章和观看视频,我对 CRO 有很长时间的模糊熟悉。 我试图将一些概念应用到我正在构建的网站上,但我没有参与任何可以真正大规模实施的项目。
激励我朝着这个方向转变职业的一件事是阅读史蒂夫·布兰克的书“创业用户手册”和“顿悟的四个步骤”,其中一个主题是“走出大楼”去挑战内部团队的假设和偏见。
CRO 中的分析数据、定性研究和测试相结合似乎是为网站实现这一目标的完美方式。 不仅仅是初创公司,因为看起来组织可以变得非常大,并且仍然主要基于“建筑物”内部产生的意见来运作,所以有很多机会提供这种外部、以客户为中心和以数据为基础的观点。
你优化了多少年了? 您向有抱负的测试人员和优化人员推荐的一种资源是什么?
我在 2017 年决定专攻 CRO,并报名参加了 CXL 的认证课程,这导致我在完成后不久就被他们业务的代理方聘用。 它基本上是直接进入行业顶端的弹射器。 那里有很多课程,但没有一个能真正与 CXL 相提并论,所以我绝对建议将其作为有抱负的优化者的坚实起点。
但是,如果我必须选择一种资源,那就是:客户。 如果您能够擅长与客户进行实际交谈并了解他们的动机、需求、犹豫以及他们的想法,那么学习特定工具和方法的课程只是锦上添花。 当你第一次习惯这个想法时,它几乎就像是在作弊。
如果您与您试图向其销售的人打交道,那么对于一些最难的商业谜团的答案只是一两个问题。
用 5 个字或更少的词回答:对你来说优化的学科是什么?
用于网站性能的爬山算法。
人们在开始优化之前必须了解的三件事是什么?
- 您在定量数据中看到的更可能是跟踪设置的产物,而不是真实的用户行为。
- 您看到的 500% 提升且没有关于测试计划和样本量的信息的案例研究完全是 BS。
- CRO 世界中有很多教条是您绝对应该挑战的。 诸如“您必须至少运行 2 周的测试”或“您一次只应针对同一页面和/或指标运行一项测试”之类的内容。 几乎所有事情都取决于上下文,故事总是有更多内容,虽然其中一些交易规则可能有合法基础,但它们都不应该一成不变。 因此,首先要遵循教条,但随着您的学习,您应该弄清楚何时以及为什么应该打破这些规则。
您如何处理定性和定量数据,以便它讲述一个公正的故事?
定量数据告诉你发生了什么,定性告诉你为什么。
我通常会在分析中四处寻找,查看不同的报告,然后当我看到一些有趣的东西时,我会通过应用细分和二级维度来深入研究它,并检查跟踪设置以确定它是否是真实的用户行为。
排除跟踪问题后,我会查看所涉及的页面以寻找解释发现的线索,然后设置一些定性数据收集以获取用户/客户的观点。
仅此一项就可以很好地消除偏见,但是进行实验来检验您的假设会让您更接近(您永远无法完全消除偏见)。
另一个提示是我所说的“幼稚评估”。 您在项目开始时的幼稚实际上是一种非常宝贵的资源,因此在您对网站、客户和业务了解太多之前,请尝试利用它。 当您对业务一无所知时,像客户一样思考会更容易,因此我喜欢在项目中尽早进行初步的轻度审核。
您为优化团队设置了什么样的学习计划? 你为什么采取这种特定的方法?
我们的团队还很小,但总的来说,我们的新员工已经上过一些 CRO 课程。 因此,最初的学习将基于我们在 Koalatative 制作的内容,旨在消除所有其他课程和内容的噪音,同时提供关于如何处理 CRO 中各种主题的更高级的视图。
一旦他们掌握了我们如何看待事物和流程的基础知识,那么最好的学习方式就是实践。 因此,我们将让他们参与客户通话,然后让他们一次掌握 CRO 难题的一部分。 有很多有能力和有积极性的人想进入 CRO 作为职业并参加了很多课程,但是很难坚持下去,因为他们没有办法应用他们所拥有的东西学习。
您希望消失的最烦人的优化神话是什么?
CRO 对我们所做的事情来说是个坏名声,应该改变它。 有很多突出的声音在推动这个想法,在大多数或所有情况下,它可以追溯到推动特定产品或工具的深思熟虑的战略叙述,或差异化策略。
经过多年的默默无闻之后,CRO 终于得到了更多的主流关注,并且肯定有人以一种骗人的方式在做这件事,但是让那些人拥有这个词并重新开始似乎是朝着错误方向迈出的一步建立对新术语的认识。 如果你向前推进,同样的循环将继续下去,所以行业中的白帽们有责任推广良好的做法并教育从业者如何以正确的方式进行 CRO。
瑞安的知识宝库真是太棒了! 将以下采访的删节版本保存在您的滑动文件中,以便在难以找到灵感时使用。
希望我们的采访将有助于指导您的实验策略朝着正确的方向发展!
什么建议最能引起你的共鸣?
请务必继续关注我们与 CRO 专家的下一次采访,他将带领我们了解更高级的策略!
如果您还没有,请查看我们对 CRO 传奇人物Gursimran Gujral 、 Haley Carpenter 、 Rishi Rawat 、 Sina Fak 、 Eden Bidani 、 Jakub Linowski 、 Shiva Manjunath 、 Deborah O'Malley 、 Andra Baragan 、 Rich Page 、 Ruben de Boer的采访, Abi Hough , Alex Birkett , John Ostrowski和我们最新的Ryan Levander 。