マインドマップシリーズのテスト：CROプロのように考える方法（パート14）

公開: 2022-05-21

「ポジティブ」ジョン・オストロフスキーへのインタビュー（ポジティブ実験）

CROで成功するには、優れた判断力と意思決定能力が不可欠です。 John Ostrowskiにとって、最適化とは、問題を理解し、対象者を知り、成長をチームの努力にすることです。

彼は、実験によって結果の指標をある程度改善できると信じていますが、必ずしも努力する価値があるとは限りません。 単に数字を見るだけでは不十分です。機会費用、リスク、およびその他の要因を考慮する必要があります。 「ジュースを絞る価値がある」（優先順位付けとも呼ばれる）時期を知ることは、実験者が直面する最大の課題の1つです。 これは、意思決定の信頼性を高めるために定性的および定量的データを使用する必要がある場所です。

ジョンは、これまで読んだことのない、CROへの斬新なアプローチを提供します。

飛び込みましょう…

ジョン、あなた自身について教えてください。テストと最適化を始めたきっかけは何ですか？

ブラジルから米国、ハンガリー、ポーランドへ。機械エンジニアからデータアナリスト、実験者、成長メンターまで。

どこで何をしていても、私はオプティマイザーでした。

ツールは進化しました。

リーン生産方式はリーンスタートアップになりました。

シックスシグマは製品成長のフレームワークになりました。

継続的な改善であるカイゼンは、共通の分母としてとどまりました。

フルデジタル化の転換点は、ハンガリーに戻ったときのビジョンでした。「工場に通勤することなく、どこからでもノートパソコンの前で作業する世界を想像してみてください…」

最適化して何年になりますか？意欲的なテスターとオプティマイザーに推奨するリソースはどれですか。

業界の時代では、約9年で何かを最適化しています。特に約5年間、オンライン最適化の取り組みを実行します。

私が覚えている最初の実験は、生産ライン間の異なる公差について学ぶために、異なるセットアップの2台のコールドスタンプ機の間でした。楽しい時間。

リソースに関しては、1つのコース、1つの本、1つのポッドキャスト、および1つのニュースレターをお勧めします。

オンラインコース：

ReforgeのExperimentationDeepDiveは、最適化ゲームを戦略的なレベルに引き上げます。

本：

私はロニーコハビのオンライン信頼できる実験を十分に推薦することはできません。それはあなたにそれを読むだけであなたに超能力を与えます。

ポッドキャスト：

GuidoのCROカフェにある無数の金塊。

ニュースレター：

ポジティブエクスペリメントニュースレターの恥知らずなプラグイン。インターネットの私のコーナーで、成長実験、経済的自由、ポジティブさについての考えを共有しています。

5語以内で答えてください：あなたにとって最適化の規律は何ですか？

絞る価値のあるジュースを抽出します。

—ビジネスにとって価値が何を意味するかを定義することは、それ自体が演習であることに注意してください。

最適化を開始する前に人々が理解しなければならない上位3つのことは何ですか？

「問題を解決するのに1時間あれば、55分で問題について考え、5分で解決策について考えます。」

問題を理解します。 あなたは何を解決しようとしていますか、そしてなぜそれが重要なのですか？それはビジネスの成長にどのように役立ちますか？あなたが話している話は何ですか？
あなたの聴衆を知っています。パワーダイナミクスは、オンボーディング中にさらされていない組織の目に見えない力です。利害関係者はデータにどのように対応し、どのような種類のデータを好みますか？何が彼らをカチカチさせるのですか？あなたの聴衆を知っています。チャンピオンになりましょう。
成長はチームの努力であり、長期的なゲームです。私にとって、「成長ハック」は「ギャンブル詐欺」と同じカテゴリーに属します。あなたは成功したものについての話を聞きます、そして失敗した他のすべての数百万は抑制されます。生存バイアス。 WYSIWYGプラットフォームでは、個々の寄稿者ができることはそれほど多くありません。何があなたのコントロールの範囲内にあり、何がそうでないかを知ってください。労働であれ資本であれ、レバレッジを見つける方法を学びましょう。

偏りのないストーリーを伝えるために、定性的および定量的データをどのように扱いますか？

私の最初の研究アプローチは、BehzodSirjaniとDouglasHubbardの組み合わせです。

私にとって、人生、ビジネス、投資はすべて、適切な判断と意思決定に関するものです。

したがって、クォールとクォンツは、リスクを伴ういくつかの決定の証拠の一部になります。

私は応用情報経済学（DDCMM）の5つのステップを通して考えます：

決定を定義します。
あなたが今知っていることを決定します。
決定しないコストに対する追加情報の価値を計算します。（ない場合は、手順5に進みます。）
情報価値の高いところを測定します。（さらに測定する必要がなくなるまで、手順2と3に戻ります。）
決定を下し、それに基づいて行動します。

調査方法の選択（ステップ4）は、それ自体が優先順位付けのステップです。

あなたの聴衆とどのような証拠が決定を下すための自信を高めるかを知ってから、最良の方法を定義してください。

どのタイプの証拠があなたの決定により役立つかを最初に定義せずに、デフォルトで「調査方法Xを実行しましょう」に設定することは避けてください。

聴衆に注意してください–時には、利害関係者は顧客のインタビューや逸話によりよく反応するでしょう。

私の最も影響力のある実験は、質の高い調査、より具体的には幸せなユーザーインタビューから生まれた仮説であったことは言及する価値があります。

最適化チームのためにどのような学習プログラムを設定しましたか？そして、なぜこの特定のアプローチを採用したのですか？

私たちの実験の章は、データによって間違っていることが証明されることを愛する生涯学習者である10人の成長志向の個人のグループです。

70年の最適化の経験を合わせて、すべて複数のバックグラウンドから。

チャプターセレモニーやピアレビューから期待できることとは別に、私たちのチームにはReforgeがあります。

実験ディープダイブと成長シリーズの両方を通過するようにすべての人にお願いします。

共通の言語を持つことは、パフォーマンスの高いチームにとって過小評価されている超大国です。

あなたが望む最も厄介な最適化の神話は何ですか？

実験？えーと、CROのことですか？

これは私が4つのステップでこれをどのように考えるかです：

基本的な構成要素（戦略、ツールと技術、プロセス、人）があります
ガバナンス構造の形成に役立つもの（ハイブリッド、集中型、分散型）
実験の文化が繁栄するためには、それが整っている必要があります（ABテストフライホイール）
また、組織構造（製品主導など）に応じて、さまざまなワークフローが設定されます。iTechMedia、OKRイニシアチブ、CRO、およびセーフティネットについては、こちらをご覧ください。

業界として、私たちはこの誤った二分法から離れたほうがよいでしょう。

私たちはもっとうまくやることができます。

次に実行する適切なテストを見つけるのは難しい作業のように感じることがあります。上記のインフォグラフィックをダウンロードして、インスピレーションを見つけるのが困難になったときに使用してください。

うまくいけば、ジョンとのインタビューがあなたの実験戦略を正しい方向に導くのに役立つでしょう！

どのアドバイスがあなたに最も共感しましたか？

さらに高度な戦略を紹介してくれるCROの専門家との次のインタビューにご期待ください。 まだ行っていない場合は、 Gursimran Gujral 、 Haley Carpenter 、 Rishi Rawat 、 Sina Fak、 Eden Bidani 、 Jakub Linowski 、 Shiva Manjunath 、 Andra Baragan 、 Rich Page 、 Ruben de Boer 、 AbiHoughのインタビューをご覧ください。アレックスバーケット。