マインドマップシリーズのテスト：CROプロのように考える方法（パート16）

ライアン・トーマスへのインタビュー

CROの世界には、人々が盲目的に従う傾向のある多くのベストプラクティスがあります。 たとえば、「少なくとも2週間はテストを実行する必要があります」、または「同じページで一度に1つのテストのみを実行する必要があります」。

この記事では、Koalatativeの共同創設者であるRyan Thomasが、これらのベストプラクティスを破棄することがいつ、なぜ理にかなっているのかを考えるように人々に呼びかけています。 そして、実際に最も重要なことに焦点を当てること：顧客との会話が上手になり、顧客の動機と懸念を理解すること。

ライアンは、テスト期間や同時テストの数は非常に状況に応じて設定されるべきではないと考えています。

現実の世界では、コンバージョン率の最適化には厳格なルールがほとんどないため、常に教義に挑戦し、実践することで学びましょう。

さて、インタビューに移りましょう…

ライアン、あなた自身について教えてください。 テストと最適化を始めたきっかけは何ですか？

私は2010年代初頭から、ブログの投稿を読んだり、ビデオを見たりして、CROに漠然と慣れていました。 構築しているWebサイトにいくつかの概念を適用しようとしましたが、実際に大規模に実行できるプロジェクトには関与していませんでした。

その方向にキャリアをシフトするように私を刺激したものの1つは、スティーブ・ブランクの本「スタートアップオーナーズマニュアル」と「エピファニーへの4つのステップ」を読んだことでした。内部チームの仮定とバイアス。

分析データ、定性的調査、およびCROでのテストの組み合わせは、Webサイトでそれを行うための完璧な方法のように思われました。 スタートアップだけでなく、組織は非常に大きくなり、ほとんどが「建物」内で生成された意見に基づいて運営されているように見えるため、外部の顧客中心のデータ情報に基づいた視点を提供する機会がたくさんあります。

最適化して何年になりますか？ 意欲的なテスターとオプティマイザーに推奨するリソースはどれですか。

私は2017年にCROに特化することを決定し、CXLの認定コースに登録したため、CXLを修了するとすぐに代理店側に採用されました。 それは基本的に業界のトップへの直接のカタパルトでした。 そこにはたくさんのコースがありますが、実際にCXLと比較できるコースはないので、オプティマイザーを目指すための確かな出発点として絶対にお勧めします。

しかし、1つのリソースを選択する必要がある場合、それは顧客です。 実際に顧客と話をし、顧客の動機、ニーズ、ためらい、および顧客の考え方を理解することができれば、特定のツールと方法論について学ぶためのコースは、まさにアイシングです。 あなたが最初にこの考えに慣れたとき、それはほとんど浮気のようです。

あなたが売り込もうとしている人々と関わっているなら、最も難しいビジネスの謎のいくつかへの答えはほんの1つか2つの質問です。

5語以内で答えてください：あなたにとって最適化の規律は何ですか？

ウェブサイトのパフォーマンスのための山登りアルゴリズム。

最適化を開始する前に人々が理解しなければならない上位3つのことは何ですか？

1. 定量的データに表示されるものは、実際のユーザーの行動よりも追跡設定のアーティファクトである可能性が高くなります。
2. 500％の上昇が見られ、テスト計画とサンプルサイズに関する情報がないケーススタディは、合計BSです。
3. CROの世界には、絶対に挑戦すべき教義がたくさんあります。 「少なくとも2週間はテストを実行する必要がある」、「同じページや指標に対して一度に1つのテストのみを実行する必要がある」などです。 ほとんどすべてが文脈に依存し、物語には常にもっと多くのものがあり、これらの貿易の規則のいくつかには正当な根拠があるかもしれませんが、それらのどれもが石に設定されるべきではありません。 したがって、最初は教義に従ってください。ただし、学習するにつれて、これらのルールをいつ、なぜ破るべきかを理解する必要があります。

偏りのないストーリーを伝えるために、定性的および定量的データをどのように扱いますか？

定量的データは何が起こっているかを示し、定性的データはその理由を示します。

私は通常、分析を調べてさまざまなレポートを調べ、興味深いものを見つけたら、セグメントとセカンダリディメンションを適用してドリルダウンし、トラッキング設定をチェックして、実際のユーザーの行動であるかどうかを確認します。

追跡の問題が除外されたら、調査結果を説明する手がかりがないか関連するページを確認し、ユーザー/顧客の視点を得るために定性的なデータ収集を設定します。

それだけでもバイアスを排除するためのかなり良いスタートですが、仮説をテストするために実験を実行すると、はるかに近くなります（バイアスを完全に排除することはできません）。

このためのもう1つのヒントは、私が「ナイーブ評価」と呼んでいるものです。 プロジェクト開始時のあなたの素朴さは実際には本当に貴重なリソースです。そのため、Webサイト、顧客、およびビジネスについて学びすぎる前に、それを利用するようにしてください。 事業のことしか知らない方がお客様のように考えやすいので、プロジェクトのできるだけ早い段階で最初の軽い監査をしたいと思います。

最適化チームのためにどのような学習プログラムを設定しましたか？ そして、なぜこの特定のアプローチを採用したのですか？

私たちのチームはまだ小さいですが、一般的に、私たちの新入社員はすでにCROに関するいくつかのコースを受講しています。 したがって、最初の学習は、Koalatativeで作成したコンテンツに基づいて行われます。このコンテンツは、他のすべてのコースやコンテンツのノイズをカットし、CROのさまざまなトピックにアプローチする方法についてより高度なビューを提供するように設計されています。

彼らが私たちが物事や私たちのプロセスについてどう考えるかについての基本を理解したら、学ぶための最良の方法はそれを行うことです。 そのため、クライアントコールに参加させてから、一度にCROパズルのピースの所有権を取得させます。 キャリアとしてCROに転職したいと考え、多くのコースを受講したが、自分が何であるかを適用する方法がないため、CROを定着させるのに苦労している有能で意欲的な人々がた​​くさんいます。学ぶ。

あなたが望む最も厄介な最適化の神話は何ですか？

そのCROは、私たちが行っていることの悪い名前であり、変更する必要があります。 このアイデアを推進する多くの著名な声があり、ほとんどまたはすべての場合、特定の製品やツールを推進するための意図的な戦略的物語、または差別化の戦術にまでさかのぼることができます。

CROは、何年にもわたるあいまいさの後でようやく主流の注目を集めており、詐欺的な方法でそれを行っている人々がいることは確かですが、それらの人々に任期を与えて最初からやり直すのは間違った方向への一歩のようです新しい用語が何であれ、意識を高めます。 それを前に進めれば、同じサイクルが続くだけなので、優れた実践を促進し、CROを正しい方法で行う方法について実践者を教育するのは業界の白い帽子次第です。

うまくいけば、私たちのインタビューがあなたの実験戦略を正しい方向に導くのに役立つでしょう！

どのアドバイスがあなたに最も共感しましたか？

さらに高度な戦略を紹介してくれるCROの専門家との次のインタビューにご期待ください。

まだ行っていない場合は、CROの伝説的なGursimran Gujral 、 Haley Carpenter 、 Rishi Rawat 、 Sina Fak、 Eden Bidani 、 Jakub Linowski 、 Shiva Manjunath 、 Deborah O'Malley 、 Andra Baragan 、 Rich Page 、 RubendeBoerへのインタビューをご覧ください。 、 Abi Hough 、 Alex Birkett 、 John Ostrowski 、そして最新のRyanLevander 。