测试思维导图系列：如何像 CRO 专业人士一样思考（第 14 部分）

采访“阳性”约翰·奥斯特罗夫斯基（阳性实验）

良好的判断力和决策能力对于 CRO 的成功至关重要。 对 John Ostrowski 来说，优化就是理解问题、了解你的受众，以及让增长成为团队的努力。

他认为，任何结果指标都可以通过实验在一定程度上得到改进——但这并不总是值得付出努力。 您不能只在真空中查看数字——您必须考虑机会成本、风险和其他因素。 知道什么时候“果汁值得挤压”（又名优先级）是实验者面临的最大挑战之一。 这是应该使用定性和定量数据来提高决策信心的地方。

John 提供了一种全新的 CRO 方法，它不同于您以前读过的任何其他方法。

让我们潜入……

约翰，给我们介绍一下你自己。 是什么启发了您进入测试和优化领域？

从巴西到美国、匈牙利和波兰。 从机械工程师到数据分析师、实验者和成长导师。

无论我在哪里或做什么，我都是一个优化者。

工具进化了。

精益制造变成了精益创业。

六西格码成为产品增长框架。

持续改进，Kaizen，仍然是共同点。

实现全数字化的转折点是我在匈牙利的一个愿景：“想象一个我在笔记本电脑前工作的世界，在任何地方，无需通勤到工厂……”

你优化了多少年了？ 您向有抱负的测试人员和优化人员推荐的一种资源是什么？

随着行业的发展，大约九年的时间优化了一些东西。 运行在线优化工作，具体来说，大约 5 年。

我记得的第一个实验是在两台具有不同设置的冷冲压机之间进行的，以了解生产线之间的不同公差。 娱乐时间。

就资源而言，我会推荐一门课程、一本书、一个播客和一份时事通讯。

在线课程：

Reforge 的 Experimentation Deep Dive 将优化游戏提升到了战略层面。

书：

我不能推荐 Ronny Kohavi 的在线可信实验。 它给你超能力只是阅读它。

播客：

Guido 的 CRO 咖啡馆里有无数金块。

通讯：

积极实验通讯的无耻插件，我在互联网的角落分享我对增长实验、财务自由和积极性的看法

用 5 个字或更少的词回答：对你来说优化的学科是什么？

榨汁值得一试。

— 请注意，定义价值对您的业务意味着什么本身就是一种练习。

人们在开始优化之前必须了解的三件事是什么？

“如果我有 1 小时的时间来解决一个问题，我会花 55 分钟思考这个问题，5 分钟思考解决方案。”

1. 了解问题。 您要解决什么问题，为什么它很重要？ 它如何帮助业务增长？ 你讲的故事是什么？
2. 了解你的听众。 权力动态是您在入职期间没有接触到的组织中的无形力量。 利益相关者如何响应数据，他们更喜欢什么类型的数据？ 是什么让他们打勾？ 了解你的听众。 成为冠军。
3. 成长是一个团队的努力和长期的游戏。 对我来说，“增长黑客”与“快速致富”属于同一类别。 你听到关于成功者的故事，而其他数以百万计的失败者都被压制了。 幸存者偏差。 所见即所得的平台使个人贡献者只能做这么多。 知道什么在你的控制范围内，什么不在你的控制范围之内。 学习如何找到杠杆，无论是劳动力还是资本。

您如何处理定性和定量数据，以便它讲述一个公正的故事？

我的决策优先研究方法是 Behzod Sirjani 和 Douglas Hubbard 的结合。

对我来说，生活、商业和投资都是关于良好的判断和决策的。

因此，qual 和 quant 成为某些带有风险的决策的证据。

我认为通过应用信息经济学（DDCMM）的五个步骤：

1. 定义决策。
2. 确定你现在知道的。
3. 计算额外信息的价值与不做决定的成本。 （如果没有，请转到步骤 5。）
4. 衡量信息价值高的地方。 （返回步骤 2 和 3，直到不需要进一步测量。）
5. 做出决定并采取行动。

选择研究方法（步骤 4）本身就是一个优先步骤。

了解您的受众以及哪些证据会增加做出决定的信心，然后定义最佳方法。

避免在没有首先定义哪种类型的证据对您的决定更有用的情况下默认“让我们运行研究方法 X”。

注意你的听众——有时利益相关者会对客户采访或轶事做出更好的反应。

值得一提的是，我最有影响力的实验是源于质量研究的假设，更具体地说是快乐的用户访谈。

您为优化团队设置了什么样的学习计划？ 你为什么采取这种特定的方法？

我们的实验章节是由 10 名具有成长意识的人组成的小组，他们是喜欢被数据证明是错误的终身学生。

七十年的优化经验相结合，都来自多个背景。

除了您对分会仪式和同行评审的期望之外，我们的团队还拥有 Reforge。

我们要求所有人都参加实验深度潜水和成长系列。

对于高绩效团队来说，拥有共同语言是一种被低估的超能力。

您希望消失的最烦人的优化神话是什么？

实验？ 呃..你的意思是CRO，对吧？

这就是我的想法，分四个步骤：

1. 有基本的构建块（战略、工具和技术、流程、人员）
2. 这有助于塑造治理结构（混合、集中、分散）
3. 必须具备这样的条件才能使实验文化蓬勃发展（AB 测试飞轮）
4. 并且根据您的组织结构（例如以产品为主导），设置不同的工作流程 - 对于 iTech 媒体、OKR 计划、CRO 和安全网，请在此处阅读更多信息。

作为一个行业，我们最好摆脱这种错误的二分法。

我们可以做得更好。

希望我们对 John 的采访将有助于指导您的实验策略朝着正确的方向发展！

什么建议最能引起你的共鸣？

请务必继续关注我们与 CRO 专家的下一次采访，他将带领我们了解更高级的策略！ 如果您还没有，请查看我们对Gursimran Gujral 、 Haley Carpenter 、 Rishi Rawat 、 Sina Fak 、 Eden Bidani 、 Jakub Linowski 、 Shiva Manjunath 、 Andra Baragan 、 Rich Page 、 Ruben de Boer 、 Abi Hough和我们最新的采访亚历克斯·伯克特。