実験チームをスピードアップ: 3 人の実験プロからのヒント

公開: 2022-10-25

Netflix、Google、Amazon、Booking.com などの企業が実験で大成功を収めているのに、自分の会社で試してみると、水に沈んだ金床のようにうまくいかなかったのはなぜだろうと思ったことはありませんか?

あるいは、それほど悪くはなかったのかもしれません。代わりに、「2 桁のリフトはどこにあるのですか?」と自問することがよくあります。特に、テストツールに 6 桁を支払った場合はなおさらです。 おい！

大きなツールは大きな結果を意味するはずですよね? あまり。実験は、A/B テストツールよりもチームに関するものです。

#teamovertools

ツールは、それを使用する脳と同じくらい優れたものになることができます. 部下が悪いと言っているのではなく、実験への投資を最大限に活用するために、彼らにもっと多くのことを与えることができます。

そこで、チームが実験プログラムに革命を起こすために必要な後押しを一貫して与える方法と、実際に話をした専門家からのヒントを紹介します。

隠れる

ツールよりもチーム — 新しい実験時代の時代精神
実験チームを訓練する方法は?
- 適切な実務家を雇う、FIRST
- それらに投資するという考え方を身につけてください
- オンボーディングはチェックリスト以上のものです
- オンボーディングを超えてトレーニングを拡張します。当たり前！
  - 1. 組織の価値観に「継続的な学習」を追加する
  - 2. ショー & テル
  - 3. 教えて学ぶ
  - 4. サードパーティの学習オプションをテーブルに置く
  - 5.学習過程を積極的に管理する
  - 6. 専門家の助けを求める
結論

ツールよりもチーム — 新しい実験時代の時代精神

むかしむかし、企業は実験プラットフォームに 100,000 米ドルを投資し、それをマーケティングインターンに引き渡しました。

この練習から何が生まれたと思いますか？

という感想

A/B テストとは、ボタンやフォームなどのサイト要素をいじることであり、（どういうわけか）より多くの人々を非常に利己的な「じょうご」に押し込みます。
コモディティ化されたCROです！実験誰？
最適化は厳密すぎて正しく行うことができません。私たちは皆、「統計的有意性」のスタンプを付けて、今では信頼できる直感に基づいた意思決定の骨抜きバージョンで間に合わせる必要があります。

要するに、誰も結果を見ない月額 250 米ドルのリテイナー SEO に似たものであり、検索エンジン最適化の名声は、ことわざの「XYZ は死んだ」と「バズワード」の泥沼に引きずり込まれています。

ありがたいことに、ツールを手に入れることが旅の終わりではないことにブランドは気づきつつあります。それは始まりにすぎません。

ある開業医はそれを正しく理解できません：

何人かの開業医でさえ、自分のデバイスに任せて苦労する可能性があります。特に、後のセクションで説明する資質やスキルを持っていない場合はなおさらです。

実際、実験チームの理想的な構造は、層状に積み重なったテーマです。マヌエル・ダ・コスタはそれについて詳しく書いています：

彼は投稿の後半でさらに次のように述べています。

賢い人々の優れた仕事を要約すると：

最適化/実験 — この部門を何と呼びたいとしても、データ駆動型の戦略をサポートし推進する部門には、経営陣の賛同が必要です。トップの誰かの熱狂的なサポートが必要です。
そして、実験の「作業」はテスト以上のものです。これには、調整、コミュニケーション、サイロの解消、テストの伝道が含まれます。
もちろん、10 人の実験チームと一緒にパーティーに来る必要はありません。ただし、A/B テストの成功を定義するのはチームであることを理解する必要があります。ツールではありません。

始めたばかりの場合は、Alex Birkett がスムーズに溝に滑り込む方法を提案しています。

実験プログラムを開始するときは、代理店またはコンサルタントと協力してください。 社内でできると思っていることは知っていますが、おそらくできるでしょう。 しかし、多くの場合、外部の専門家によって最もよく解決される技術的、文化的、およびプロセスの問題があります。
あなたの成長責任者のような人か、技術的ノウハウと戦略的知識を兼ね備えた人にエージェンシーを管理してもらうことをお勧めします。
規模を拡大するにつれて、最終的には、組織の残りの部分が独自の実験を実行する際に教え、可能にし、サポートする「センターオブエクセレンス」を持つことを目指す必要があります。 そうしないと、実験の専門家が自分のチームですべてを実行することになり、ボトルネックになります。 このセンターオブエクセレンスは、多くの場合、実験技術スタックを構築または管理し、リソースと時間をチームの立ち上げと実行を支援し、オフィスアワーとトレーニングセッションを主催し、質問に答えてトラブルシューティングを行います。

オムニシエントデジタル、アレックスバーケット

プログラムやビジネスの規模に関係なく、クロスファンクショナルチームに勝るものはありません。 トレードオフまたは危険信号は、チームに責任はあるが権限がない場合、関係なくお役所仕事があり、機能しないことです。 しかし、ジャーニーや成長レバー (チャネルではなく) に焦点を当てた「連合」スクワッドのグループは、私のお気に入りの設定です。 たとえば、収益化に焦点を当てたチームに対して、獲得に関する目標ツリーに焦点を当てたチームです。
ベン・ラベイ、スピーロ

全体として、各 CRO プログラムはいくつかの重要な課題に直面しています。

そして、どのツールを購入するかに焦点を合わせても、それらのいずれも解決されません。

実験チームを訓練する方法は?

実験チームのトレーニングは、雇用から始まります。従業員ではない人をトレーニングすることはできませんが、正しい態度で誰かを獲得していることを確認する必要があります.

しかし、それはほんの一歩です。このプロセスは、新人研修段階以降にまで及びます。そこでは、継続的な改善を大切にすることを組織の文化にする必要があります。実験チームのトレーニングについて詳しく見ていきましょう。

適切な実務家を雇う、FIRST

ドラゴンを訓練する方法とほとんど同じです。

正しい気質から始めましょう！

ジェレミー・エパーソンは、高機能開業医の 6 つの特徴について次のように述べています。

ドラゴンはあなたを燃やすことができます。反抗的な CRO プラクティショナーも同様です。

彼らは確立されたプロセスに従わず、コミュニケーションを阻害する可能性があります。

彼らは、(新しい) プロセス、実験結果、および学習を文書化することに熱心ではないかもしれません。インサイトはゲームの名前です。学んでいないのに、なぜテストをしているのですか? 最も価値のある仮説のいくつかは、反復に値するものです。

彼らはデータ分析に批判的思考をもたらさないかもしれません。彼らはそれを行う方法を知らないかもしれません。あるいは、主観的なストーリーテリングの粒度に逆らうことは難しいため、先入観に基づいて脳にパターンやつながりを考え出させることを単に好むかもしれません。

21 人の専門家に尋ねたところ、彼らが他の実務家に重視するスキル (および考え方) の内訳は次のとおりです。

実験と統計の基礎に基づいている : 実験を実行し、基本的な統計を適用して結果を解釈し、すべてのテストから洞察を抽出する方法を知り、理解しています。
リーダーシップとコミュニケーションスキル: 利害関係者との連携に優れています。実験を信じ、それを伝道し、正しい期待を設定します。テストと結果で冷静に。数字の背後にあるストーリーを語ることができます。
調査スキル: チャンピオンのように量的および質的調査を処理し、適切な質問をし、適切な問題に対して適切な調査方法を使用することができます。
データ駆動型: 本能と創造的なアイデアを持っていますが、常にデータで検証できます。
共感的 : 顧客とユーザーを理解し、頻繁に彼らの立場に立つよう努力します。たとえば、最も効果的でビジネスに影響を与える方法でデータを伝達するために、この取り組みを利害関係者に向けることもできます。
回復力: テストが失敗した場合でも、実験への信頼を失うことはありません。それ自体は失敗ではありません。テストを正しく実施することで、何かが機能しないことを検証できます。
プロセス指向:システム、プロセス、ワークフロー — 優れた実践者は、それらに夢中になる必要があります。長期的な成功のためには、しっかりしたシステムが必要です。
好奇心旺盛:心を開いて、新しいことを見つけて学ぶことに熱心です。継続的に質問することは、アイデアや仮説を検証するための基礎です。
仮説とアイデアを生み出すことができる : 質問をするだけでなく、ターゲットユーザーを定義し、問題を述べ、解決策を提案し、結果を述べ、実験の目標を定義することができますか?
細部への気配り: これはほぼすべての履歴書に見られますが、特に CRO では、注意を払わないと見過ごされ、最適化の機会を失う可能性があります。
開発者スキル: プロレベルのスキルは必要ありません。ビジュアルエディターで許可されているよりも深くテストできるように、いくつかの基本的な知識が重要です。そして、開発チームが支援するのを待っているホールドアップが多すぎることはありません.
創造的で起業家的 : 非常に多くのベストプラクティスと「試行錯誤された」方法が世の中にあるため、何か新しいことを行い、健全な判断で根本的に異なるアイデアを試すことに魅力を感じる人が必要です。
実験に興味がある : 実験に興奮していない (または、少なくとも気にかけている) 場合、長く続けることはほとんどありません。そして、あなたはロングライドのためにこれにいる必要があります.
批判的思想家/分析家: データについて批判的に考える… 「データはこう言っています。 なんで？ 調べてみましょう」「そのように機能しますが、なぜですか？ 調べてみましょう」 . それは自然なテスターになります。

これらのチェックボックスにチェックを入れる人を雇ってください。

(注:これらはすべて 1 人ではなく、チームで行う必要があります。)

次に、CRO チームがあなたに挑戦できるようにします。実験の DNA そのものが、挑戦的な仮定と暴れ回る HiPPos を飼いならすことにあるからです。

適切な個人にそのレベルの影響力を与えることで、組織内に実験の文化を広めるのに役立ちます。

慈善活動とデータに基づく堅牢な思考は、どちらも家庭から始まります。 Jeremy Epperson はこのことを理解しています。

それらに投資するという考え方を身につけてください

あなたがそれに取り組んでいる間、その人々がより多くのことをするのを助けるプロセスに投資してください：

集中
生産的
明確に定義された実験フレームワークの範囲内で、自由に反芻し、考え、混乱させることができます。

これは実験にとって非常に重要であり、実験の成熟度の 4 つの柱のうち 3 つが人とプロセスに関係している必要があります。

プロセスと説明責任
文化
専門知識

Sina Fak は、人々とプロセスを、実験プログラムの成功に最も貢献する 10 の特徴に分類しました。それらをチェックしてください：

これらの 10 の特徴は、Netflix、Google、Microsoft などで見られる結果を生成する実験プログラムを実行するためのガイドとなる可能性が非常に高くなります (もちろん、適切なツールと技術スタックを使用することは別として)。

1 から 5 に注目すると、上の円グラフでも同じ性質が見られます。

それに加えて、彼らの成長を支援するという考え方があれば、上に行くしか方法はありません。結局のところ、How to SaaS の Shiv Narayan の言葉を借りれば、優れたチームのビルディングブロックは次のようになります。

チームに参加する才能のある人々を見つけ、説得し、採用する
協力するための刺激的なビジョンを中心にチームを調整する
チームが成功するために必要なすべてのサポートとリソースをチームに提供する
チームメンバーのスキル、考え方、能力のレベルアップを支援する
課題と成長の停滞期を通じてチームメンバーを指導する
チームメンバーの成長を助ける適切な環境と文化を構築する
1 ～ 6 人を危険にさらし、指導できない人を排除する

プロセスといえば、Speero は実験を強化するためのオペレーティングシステムを構築しています。彼らはニュースレターで最高の Miro ボードとテンプレートを提供しています。 eXperimental Revolutionに参加してください。

オンボーディングはチェックリスト以上のものです

オンボードの方法は、永続的な印象を残します。実際、ほとんどのチームメンバーのチャーンはオンボーディングで始まります。

オンボーディングにはさまざまな種類がありますが (SOP とより実践的な学習アプローチ)、私たちが話をした 3 人の専門家は全員、最初の 90 日間の重要性を強調しました。ここで詳細に説明します... 注目すべき特定のバケットは次のとおりです

重要なコンテキストの要約
リソースへのアクセス権の付与 (SoP、ビデオ、トレーニング)
チームメンバーから斬新なアイデアを引き出す
探求する力を与える（チームの残りのメンバーが彼らの背中を持っていることを知る）

以下は、新しいチームメンバーの新鮮な視点を活用するための Alex Birkett のアドバイスです。

実験は企業ごとに異なるため、彼らが安心できるようにするための主な方法は、必要なすべてのコンテキストを最も消化しやすい形で提供することです。 重要な戦略的イニシアチブは何ですか? どのような課題がありましたか? また、これらの課題を乗り越えるために、この個人には何が期待されていますか? この人が会って知り合うべき主要なチームメンバーは誰ですか? 業務を遂行する際に守らなければならない厳格なガードレールは何ですか? そして、この個人の 30-60-90 日の計画と期待は何ですか? 透過的かつ事前に行う必要があります。
そして、もちろん、テストツール、定性調査ツール、分析、Slack チャンネル、社内メールニュースレター、会議など、必要なものすべてにアクセスできるようにします。彼らは、組織の理解を促進するために、できるだけ早く関与しました。
最後に、私の過小評価されているヒントとして、この新入社員からできるだけ多くの斬新なアイデアを得ることです。 彼らは新鮮な目でやって来るので、あなたよりもあなたのプロセスやプログラムの問題をよりよく診断することができます. このフィードバックをできるだけ早く入手してください。 彼らは最終的にあなたの会社のクールエイドを飲むでしょう. 実験のアイデアだけでなく、運用と拡張を改善する方法に関するアイデアも取り入れます。
アレックス・バーケット

新しいチームメンバーをすぐにフライホイールに乗せることは、Ben Labay の提案です。

SOPは退屈です。 最善の方法は、彼ら自身のヒーローの旅を始めることです。 彼らをフライホイールに乗せる意味: 顧客の問題と機会について質問するのに役立つ調査タスクまたは一連の既存の調査を彼らに与えます。 これは、旅の最初の部分である問題/動揺を明らかにするのに役立ちます。
よし、これで品質の問題が解決したので、彼らに解決策を考え出してランク付けしてもらいましょう。
ブーム、今それを指定します。 あなたが持っているかもしれないすべての楽しいテスト文書/SOPを使用して、介入の話をしてください.
次に、テストと学習の部分で、彼らはそれが実行されているのを確認し、結果を分析します。その後、決定とコミュニケーションで、そこでの最終段階も自分のものにします。
最終的に、彼らはオンボーディングトレーニングの一環として独自のフライホイールを「所有」します。 やって学ぶ。
ベン・ラベイ

代理店 ConversionAdvocates での典型的な 90 日間のオンボーディングはどうですか?

質問するのに最適な人物はジェレミー・エパーソンです。 彼はチームトレーニングの作成、改良、および標準化に 70 時間の個人的な時間を費やしてきました。 なんで？

人がカギだから！

高度に構造化された 90 日間のオンボーディングがあります。 流れは次のとおりです。
初日は時間ごとにリストされています：

すべての会議が一覧表示されます
トレーニング資料は毎週解析されます
週に 1 時間は、直属のマネージャーと新しくオンボーディングされたチームメンバーとの間の生産的なセッションに費やされます。 これは通常、次のような質問に対応します。

どこで立ち往生していますか？
何の助けが必要ですか?
どのようなトレーニングについてサポートが必要ですか?
毎週、CRO のさまざまな側面に関するトレーニングを実施しています。 たとえば、テスト仮説が実装中に課題であることが判明した場合、開発者はこの課題を直属のマネージャーにどのように伝えて、クライアントに適切な期待を設定できますか?
SoP は、新しくオンボーディングされたチームメンバーをガイドし、通知し、権限を与えるために存在します。
ジェレミー・エパーソン

オンボーディングを超えてトレーニングを拡張します。当たり前！

厳格なオンボーディングプロセスの後、新入社員を最初のプロジェクトに送り出すのが一般的です。あなたは親切で、彼らをあなたのL&Dに入れるかもしれません。

しかし、最高のパフォーマンスを発揮する実験チームでは、最低限のことを行うか (「ねえ! 使用するかどうかわからない CXL ミニ学位にアクセスできます」 )、チームトレーニングのゴールドスタンダードを設定するかを選択できます。これは次のようになります。

はい、Jeremy のプロセスは、オンボーディングと継続的なサポートとトレーニングの提供において素晴らしいものです。あなたの会社 (この場合はほとんどの会社) にとって、継続的な教育はその中間のどこかに位置します。

中間には次のものを含めることができます。

オンボーディング後 6 か月間の 1 対 1 のミーティング
独自のニーズ、スキル、習熟度に合わせてカスタマイズされた個人開発計画
実験タスクの SOP
ガイダンスとブロック解除を提供できる CRO チームの誰にでも直接アクセスできます。
改善に役立つツール、書籍、トレーニングの払い戻し

Alex、Ben、Jeremy を除く 3 人の (その他の) 専門家に話を聞き、チーム教育に関する意見をまとめました。彼らの洞察は、通常のオンボーディングプロセスを超えて実験チームのトレーニングを拡張するために実行できる 6 つのステップの基礎を形成します。

1. 組織の価値観に「継続的な学習」を追加する

「あってよかった」という感じです。

しかし、Ben と Jeremy の両方が、回答の中でこの核となる信条に触れています。クルージングの文化は、卓越した文化と共存することはできません。

チームが常に好奇心や改善なしで行われてきたように、必要なことだけを行う場合、彼らは素晴らしいものを生み出すことはありません. そして、それは通常、組織内で物事が行われる方法を反映しています。文化はあなたが思っている以上に重要です！

Speero には、次のようなメカニズムがあります。
ブッククラブ — CRO 業界に関する、または CRO 業界に関連する優れた書籍に焦点を当てる
月に 1 回のワークショップセッション「Learning Fridays」
テスト、SOP、新しいフレームワークなどについてチームに教えることを目的とした、さまざまな人々による毎週の「見せて教える」セッション。
「昇格と教育」に関する特定の価値観。私たちは各価値観に専用の Slack チャンネルを用意することでこれを強化しています。各価値観のどこかで証拠が緩んでいるのを誰かが目にするたびに、それぞれの価値観にメッセージを自動送信する価値の絵文字が追加されます。チャネル。
これにより、私たちがいつ自分の価値観を実践しているかを有機的に認識することで、チームは価値を強化することができます。また、毎月チームメイトを指名し、私たちが寄付する慈善団体を選ぶことができる「Living Our Values Everyday (LOVE)」賞もあります。へのわずか50ドルの寄付。 これは形だけのジェスチャーですが、私たちの価値を後押しするメカニズム「システム」の一部であり、「教育」もその 1 つです。
ベン・ラベイ

ジェレミーもそうでした。

ClickUp には、チームメンバーがアクセスできる実験学習リポジトリがあります。
毎週、個人的な学習と開発のために 2 時間を確保しています。 これは、私たちの開業医の契約に組み込まれています。
また、ビジネスのあらゆる側面を文書化し、それらをビデオとチェックリスト形式の文書で SoP に変換しました。
人々が質問をして答えを得ることができるさまざまなトピックについて、さまざまなチャネルがあります。 次に、これらのチャネルのメッセージが取得され、ClickUp のリポジトリに配置されます。
ビジネスコーチを招待して、ギャップがないかプロセスと文化を監査します。
当社の中核となる企業価値と 12 のチームヒューリスティックスは、日常業務に組み込まれています。
「何かを見て、何か言って」—QA の問題やクライアントの不満など—チームの誰かが何かがおかしいと感じたら、それを伝えなければなりません。
ConversionAdvocates、最高成長責任者、Jeremy Epperson 氏

ここでのパターンは、成長における団結、絶え間ない共有、卓越性の文化を頻繁に強化することです。

2. ショー & テル

前述した価値ある CRO の資質の 1 つは、「実験に興味がある」ことです。時々、これはチームのすぐそばで発火し、育成されます。

誰かに実験に興味を持ってもらい、トレーニングを強化するための内なるエネルギーを持たせるにはどうすればよいでしょうか? アレックスのように、見せて伝えます。

興味がない人に何かを学ぶよう強制することはできないので、私の最初の仕事は、人々に実験に興味を持ってもらうことです。 そのための最も簡単な方法は、彼らを実験に参加させることです。 時間と余裕がある場合は、文字通り誰かが実験を行うのを手伝うのが最善の方法です。 最初にテストを開始したときに得たドーパミンのヒットを覚えていますか? 最初に優勝したのはいつですか？ 同じ感覚を誰かに与えれば、彼らはすぐに CXL インスティテュートのコースを独学で受講するようになるでしょう。
誰かが自分のテストを実行するのを手伝えない場合は、実験のアイデアを募集する投稿を投稿してください。 Slack のユーザーに、どんなアイデアがあるかを手動で尋ねます。 次に、それらをロードマップに入れ、アイデアを提供した人にすべての功績を認めます。
人々が興味を持ったら、教育システムに参加させることができます。これには、毎週のニュースレターの読み上げと毎週の実験会議の読み上げ、オフィスアワーセッション、コースとトレーニング資料、会議とイベント、およびドキュメントが含まれます。
アレックス・バーケット

その後、次のものを宣伝することもできます…

3. 教えて学ぶ

継続的な教育の「Show & Tell」の側面を覚えていますか?

まあ、「見せている」人には、インセンティブを用意する必要があります。ナッジ。 Rishi Rawat はそれを「Teach & Learn」と呼んでいます。

かなり単純なプログラムがあります。 それは学びと教えと呼ばれています。 仕事が行われているので、私たちは常に新しいことを学んでいます。 これらの洞察の一部は、チームと共有する必要があります。 2 週間に 1 回、チームミーティングがあり、各メンバーがそれぞれの仕事から学んだことを共有します。
Rishi Rawat、摩擦のない商取引 (テストマインドマップシリーズから引用)

学生時代、これは試験前に勉強したことを固めるためのトリックでした。同僚が理解できるように概念を説明できれば、さらに理解が深まり、忘れにくくなります。

4. サードパーティの学習オプションをテーブルに置く

これまでの推奨事項のほとんどは、知識を深めるために組織プロセスと学習リポジトリに依存していましたが、(まだ) 社内に完全なリソースを持っていない可能性がある企業にとって、Reforge のようなものへのアクセスを実践者に提供することは、セーフティネットであり、彼らが高く評価する動機となります。 .

私たちの実験の章は、成長志向の 10 人の個人のグループであり、データによって間違っていることが証明されるのが大好きな生涯学習者です。
複数のバックグラウンドを持つ 70 年間の最適化の経験。
チャプターセレモニーとピアレビューから期待できるものとは別に、私たちのチームにはReforgeがあります.
Experimentation Deep Dive と Growth Series の両方を体験してください。
共通言語を持つことは、パフォーマンスの高いチームにとって過小評価されているスーパーパワーです。
John Ostrowski、プリンシパルグロースエクスペリメント、 iTech Media

5.学習過程を積極的に管理する

だから過小評価。

だからこそ、マヌエル・ダ・コスタが彼の実験チーム構造に「オーケストレーター」を組み込んだことを称賛します。オーケストレーターが個々の成長の軌跡を「管理」することを意図していないことは理解していますが、実践者が次の大きなアイデアを追求する際に組織化し、平凡なことを追跡する必要があるという事実を認めています。

ツールが役立ちます！

テストの基本的な領域に関する SOP があります。 最終的には、年月が経つにつれて、ある種の独自の「テストバイブル」ができあがるでしょう。 私は現在、Roam Research や Obsidian などのツールを使用して、スペースで読んだ記事の考えを結び付け、特定のトピックに関する自分の考えや議論を発展させた後、それらをチームと共有しています。
私たちはすべてのクライアントに Airtable を使用していますが、社内でもさまざまなスワイプファイルタイプを構築しています。
学習は常に私にとって最も重要なことの 1 つであり、ひいては私の小さなチームです。 当然のことながら、知識欲や向上心など、適切な性格の資質を備えたチームメンバーが必要です。 これは、テストに対して持つべき態度と同じであり、「継続的な改善」タイプの考え方です。
Ryan Levander、Rednavel Consulting

6. 専門家の助けを求める

最後になりましたが、CRO エージェンシーは実験を行っています。彼らのノウハウを活用してください。

これは、彼らがジャンプスタートしてフライホイールに油を注ぐコラボレーションであり、世界クラスの実験プログラムを構築して維持するのに役立ちます. または、改善が必要な分野とスキルアップが必要なチームメンバーに焦点を当てる、よりケースバイケースのエンゲージメントです。できるだけ速くに。

私自身がエージェンシーの創設者であり、クライアントに常に伝えていることの 1 つは、ツール、テンプレート、トレーニングホイールに私たちを使用することです。 私たちは開かれた本です。 キーワードの優先順位、コンテンツの角度の決定方法、パフォーマンスの問題が発生するまでに必要な 301 リダイレクトの回数、このブログ投稿でこの CTA が選ばれた理由など、なんでもお聞かせください。
エージェンシーはこのようなことを日々行っており、このようなことに対して驚くべき答えを持っているはずです. そうでない場合は、もっと強く押すか、別の代理店を利用してください。 私のような多くの機関は、このようなことを積極的に行っています。 しかし、そうであったとしても、ブランド側はより多くの知識とフレームワークを求めるべきです。 それがエージェンシーから最大限の価値を引き出す方法です。すべての秘密を盗もうとするのです。
アレックス・バーケット

Speero の Ben もチャイムを鳴らします。

私たちはたくさんのチームを訓練します。 ワークショップを開催したり、CXL を開催したり、コンサルティングを行ったりしています。自分自身で学んだことをクライアントの組織に実装しています。 フィードバックシステムです。
ベン・ラベイ

社内プログラムで CRO および A/B テスト機関を最大限に活用する方法についてのガイドを作成しました。

結論

実験ツールの出力は、提供する入力によって制限されます。そして、誰が入力しますか？あなたの人々。チームのトレーニングと教育に投資することは、プログラムの他のどの側面よりも、実験プログラムと旅に多くのことをもたらします。

彼らは、あなたのツールを使って、岩から水を汲み出すよりも優れた成果を上げられる、より強力な立場に立つことができます (適切な A/B テストツールを選択することは依然として重要です)。

卓越性と絶え間ない改善の文化に移行することで、成長を促進することができます。この記事でまとめたエキスパートのヒントに従ってください。