A / Bテストエージェンシーと連携する方法（そしてすべての成長目標を達成する）

難しい真実：A / Bテストをアウトソーシングしても、成長が保証されるわけではありません。

こんなに簡単だったらいいのにと思います。 世界クラスの専門家であっても、間違った期待と間違った方向性が混ざり合うと、多くの場合、無駄なコラボレーションにつながります。

反対に、A/Bテスト機関と協力するためのよりスマートで生産的な方法があります。 これは、CROの専門家と協力することにあなたを惹きつけたサクセスストーリーの背後にある秘密のソースです。

この記事では、その秘密のソースを紹介します。これは、最高のCROまたはA/Bテスト機関と協力して提携するための明確なステップバイステップの青写真です。 最後に、CRO代理店と協力して、すべての成長目標を達成する方法を理解します。

掘り下げましょう…

A/Bテストエージェンシーに参加する4つの大きな理由

これらの4つの理由に飛び込むと、コラボレーションの星評価がわかります。 これをコラボレーションインデックスと呼んでいます。

このために、CROエージェンシーのオンボーディングで成功を収めるために不可欠なコラボレーションのレベルを計画しました。これらは、これら4つの理由（またはメリット）のそれぞれに関連しています。

これらのメリットを確保するには、パートナーシップにある程度のコラボレーションをコミットする必要があります。 それがこれらの星が表すものです。

たとえば、A / Bテストビルドの支援を探しているだけの場合、コラボレーションは必ずしも網羅的である必要はありませんが、それでも存在する必要があります。 それが2つ星を獲得する理由です。

これで解決したので、次に進みましょう。

1. A/Bテストビルドの支援

コラボレーション：

最適化プログラムが特定の時点まで成熟している場合、最初から最後まで操作全体を実行しているのは間違いなく孤独なオオカミではありません。 エンジニアと開発者が必要です。

しかし、ここでの問題は、ほとんどの最適化部門に専任のエンジニアと開発者がいないことです。

テストに自信があるという仮説を立てたときに、それらを実装するために開発チームにリソースを頼んだり借りたりしなければならない場合、効率が低下します。

さらに、「コーディング」の基本的な側面は同じですが、製品の開発とテストの構築は、考え方の転換を必要とする2つの非常に異なるコンテキストです。

したがって、プログラムをスケーリングするためのテストを正常に設定する以外のことを優先する社内エージェントに依存しないでください。 実験プログラムに敏捷性を注入するより良い戦略があります…

アウトソーシング。

この設定では、これは望ましいだけでなく論理的でもあります。 エージェンシーには専任の開発チームがあるだけでなく、ビルドを専門としています。これには、ConvertパートナーのBrillMarkとEchoLogyxが社内の取り組みを効果的に10倍にすることも含まれます。

テストプログラムを何倍にも増やしたいクライアントは、外部機関を参加させることを模索する必要があります。 私の経験によると、社内チームとのテストプログラムをどれだけ増やすことができるかには限界があります。 たとえば、内部チームがA / Bテストの開発とQAでサポートできるリソースに基づいて、月に2つのテストを開発し、それを月に10のテストに増やしたい場合は、代理店を利用することをお勧めします。その専用のサポートを提供できるのは誰か。

Tasin Reza、Echologyx

2.テレメトリによる支援

コラボレーション：

適切なデータ収集チャネルを設定し、バイアスを排除することに関して定性的および定量的データを処理することの重要性について、私たちは多くのことを話しました。

A / Bテスト機関は、異なるプラットフォームが同じイベントまたはアクションに対して異なる数値を報告する理由を理解しています。 彼らは、この不一致がどれほど有害であるかを把握し、社内チームがこれを最終的なテスト結果への影響に変換するのを支援できます。

この貴重な洞察がなければ、データソースが重要な指標についてしばしば意見が一致しない場合に、どのようにして結果を信頼できるでしょうか。

Chad Sandersonが述べているように、異なるデータ入力が結果の出力で自分自身を調整すると信じることは素朴です。 A / Bテスト機関は、この非常に必要とされているデータリテラシーを組み合わせています。

これは、Alex Birkett（以下に引用）が代理店と協力して、A/Bテストの結果に必要な整合性を追加する理由の一部です。 ご想像のとおり、テストビルドの支援を得るだけでなく、さらに多くの共同入力が必要です。

私がA/Bテスト機関と協力してきたほとんどの場合、実験開発と品質保証のみを支援するためにA/Bテスト機関を雇いました。 これは、ほとんどの組織の制限リソースがエンジニアであるという一般的な事実によるものです。 アウトソーシングされたA/Bテスト開発エージェンシーを使用することで、質の高いエクスペリエンスのスループットを向上させることができました。また、使用しているプラ​​ットフォームでの作業に慣れているため、実験が適切に設計されているという事実を信頼できます。

最近、私はフルサービスの会社にA / Bテストの開発と、テレメトリと顧客調査という2つのボトルネックを支援してもらうことを検討しました。 適切なデータパイプラインを設定するのは難しいので、A / Bテスト会社にこれを行わせると、インセンティブがうまく調整されます（彼らは明らかにその価値を適切に評価したいので、適切な分析を設定する必要があります）。 そして、私が自分で多くのことを行ったとしても、顧客調査は常に不足しています。 より良い、そして専門家は時々アクセスするのが難しいツールを持っています。

OmniscientDigitalの共同創設者であるAlexBirkett

次の理由は、テレメトリの支援のためのアウトソーシングと同じくらい多くのコラボレーションが成功のために必要です。

3.顧客調査の支援

コラボレーション：

顧客調査は、間違いなく、信頼できる仮説を立てる上で最も費用がかかり、時間がかかり、退屈な側面です。 しかし、証拠の階層が示唆するように、それは制御されたオンライン実験（A / Bテスト）が置かれる基盤です。

ここでうまくいかないことがいくつかあります：

• 社内チームには、適切な顧客調査の質問を構成するためのノウハウがありません。
  
  彼らは、定量的データによって明らかにされた問題を調査するのではなく、誤解を招き、偏見を持ち、最終的には既存の意見を検証しようとしている可能性があります。
  
  外部の研究者は、この金鉱を掘るのにより中立的な視点をもたらすでしょう。

• 社内チームには、真の専門家だけができる驚くべき一連の視点に没頭するための帯域幅がありません。
  
  探求するすべての角度は何ですか？ 豊かで多様な経験から引き出すことなく、このレベルの視点でより良い仮説をどのように作成しますか？

4.福音宣教実験の支援

コラボレーション：

はい、実験のバイインはCスイートから行う必要があります。

ここでは、マヌエル・ダ・コスタが語る「送金」が非常に重要です。 ビジネスのDNAに埋め込まれている実験は

• 「より多くの」勝利テストがもたらすという約束に対する熱意の一部。
• CROプログラムの初期におけるこれらの異なる成功が、メトリックの最適化から会社の意思決定サポートになるまでにどのように構築できるかについての一部の理解。
• 「実験は交渉の余地がない」という部分は、本能よりも科学的な実行可能性を積極的に選択するリーダーシップからの使命です。

代理店を乗船させることが各部分にどのように貢献するかを次に示します。

• テストは、プロセスとQAにおける豊富な経験から恩恵を受けています。 Convertの社内データは、代理店がより重要なテストを実施していることを示唆しています。
• 彼らは、テストの展開の技術的側面を処理し、チェンジメーカーに全社的な実験の影響について声を上げる自信を与えます。 彼らが組織全体の教育を支援することは害にはなりません。
• 彼らは、業界や業種を超えた実験の力を証明した実績があるため、Cスイートのバイインの初期段階で実験のリードを支援することができます。 必要となる可能性のある最終的なロビー活動は、成熟したPOVの恩恵を受けます。

A/Bテストエージェンシーをオンボーディングする大きな理由について説明しました。 ここで、A/Bテストを外部委託する間違った理由を示します。

アウトソーシングする3つの本当に悪い理由

1.あなたはあなたの実験がALL.THE.TIMEに勝つのを見たいです。

あなたはあなたが値する実験結果を得る。

この投稿とそのコメントは証拠です：

代理店を乗せて勝者を探すと、彼らは勝者を探します。 そして、学習や最終的な影響を決して促進しない勝利テストのポートフォリオを持つために、データクエリから結果の解釈まですべてに影響を与える100の微妙でそれほど微妙ではない方法があります。

結果：おそらく、代理店でA/Bテストを実行することはあなたのことではないと宣言するでしょう。 しかし、あなたはあなたが探しているものを正確に手に入れているでしょう–勝利テスト。

エージェンシーはパートナーでなければなりません。 彼らは、実際に収益とパフォーマンスを妨げている問題を調査する自由を持っている必要があります。 特に、実験を構築するだけでなく、研究と設計を行うように契約している場合はなおさらです。

2.エージェンシーの「直感」を活用して、数学的テストの手抜きをしたい

実験は科学的プロセスに従います。 したがって、科学者（A / Bテスト機関の経験を読んでください）を利用して、勝利への最短ルートを見つける正確な方法はありません。

代理店に参加するとき、あなたは彼らにユニークな挑戦を提示しています。 彼らがこう言うことができる状況ではありません。 これは通常機能するものです。 それをしましょう。"

潜在的なクライアントがCRO/実験で彼らと一緒に働くことについて私たちに近づくとき、彼らはしばしばそのニッチまたはセクターでの私たちの過去の経験について尋ねます。 たとえば、高級旅行ブランド/高額家具/金融サービスなどを扱った経験はありますか？

これは実験が何であるかを非常にしっかりと誤解しています。

あなたがブランドやクリエイティブエージェンシーを雇うなら、彼らはあなたがテストするつもりはないかもしれない何かをデザインするために彼らの直感と創造力を使うでしょう。 したがって、あなたはあなたが購入している直感と創造性の種類と、それらがあなたの聴衆を「獲得する」かどうかを知る必要があります。 あなたは誰かがあなたの顧客にテストされていないコミュニケーションをすることを信頼しています。

逆に、実験の全体的なポイントは、最終的にはビジネスにおける科学的方法の複製であり、次の方法で意見、偏見、直感を取り除くことです。

a）調査とデータを使用してアイデアを策定する

b）実際の顧客とそれらのアイデアをテストし、

c）あなたが行うより大きなことは、あなたがそれらを行う前に効果的であることが証明されるように、学習に基づいて構築する

あなたは、セクターの過去の「経験」ではなく、正しく実行するために多くの専門知識を必要とするプロセスと方法を購入しています。

私たちは、あなたのセクターや顧客の誰かの意見ではなく、データによって導かれます。

Jonny Longden （Test Everythingニュースレター経由）

A / Bテスト機関の直感を活用することを計画していて、問題を診断したり、CROの成功へのより統合されたロードマップを提供したりするときに完全に暗闇を感じない場合は、明確なコミュニケーションとフローシステム。

3.社内でテストすることに情熱を注ぐつもりはなく、エージェンシーを永遠の松葉杖として望んでいる

代理店を参加させることを、社内でより優れたものに踏み込む機会とは見なしていません。 あなたはいくつかの勝利テストを獲得するかもしれません-そしてそれらは実際のビジネス上の利益に変換されるかもしれないし、変換されないかもしれません-しかし一つ確かなことは確かです：一貫した実験は決して成功しません。

実験は戦術にはなり得ません。 PPCのように、それは他の部門から離婚して実行され、（まだ）生き残る可能性があります。

テストを実行する真の力は、すべてのチームメンバーが仕事で重要な決定を行う方法を再構成することにあります。 とにかく実験し、それを「リスクを冒す」ものとして提出することを理解することです。 これらのリスクとギャンブルの根底にある健全な科学的構造を持つことは、企業を先見性、機能しているもののより明確なもの、そして最も重要なことに一貫した成功へと駆り立てるものです。

あなたとあなたのCROエージェンシーが短期的および長期的に適切に適合していることを確認することは、測定基準を満たし、期待を超えることに成功する相乗的な関係を構築するための鍵です。

A/Bテスト機関と連携するためのシンプルな青写真

1.明確にする

代理店を参加させる理由を知りたいと思います。 プログラムとビジネスの両方で、改善に努めるKPIを選択します。

それらのより高い目標を達成するために、マクロレベルのビジネス目標とミクロレベルの目標が常に存在する必要があります。 テストチームは、研究とイノベーションを通じてこれらの包括的な目標に焦点を当てる必要があり、それをテストすることができます。

ここで重要なのは、これをビジネスの利害関係者に伝えることです。つまり、実験によってビジネスが正しい意思決定を行うのにどのように役立つか、期待されるKPIの達成に向けてです。 実験のロードマップは、これに基づいて作成する必要があります。 ただし、同時に、ロードマップは緊急のビジネス要件をサポートするのに十分な柔軟性を備えている必要があります。 そして最後に、専任チームのサポートを受けてこれを推進する専任の人が必要です。

タシンレザ

ここでは注意してください。 プログラムのみに関連するKPIを使用すると、テストが増え（テスト速度が速くなり）、バグを使用してデプロイされるテストが少なくなり、デプロイにかかる時間が短くなります。 これらはすべて、健全なプログラムの素晴らしい兆候です。

しかし、実験機が何を削り取るのか、つまり解決すべき問題が明確でない限り、最適化は成功しますが、会社を前進させることはできません。

明確にしないと、製品/サイト戦略（ビジネスに影響を与えるKPIを推進する）と実験戦略（活気のあるCROプログラムを促進するKPIを推進する）の間にギャップが生じます。

このギャップを埋めるために、ユーザーエクスペリエンスの学習と改善に重点を置いてください。 収益指標を監視するときは、トンネルビジョンを開発したり、実験が実際に何であるかを見失ったりしないようにしてください。

予算に依存するプログラムの場合、ROIの観点からも報告する必要があります。

MicrosoftStoreの実験プログラムマネージャーであるTimMehtaは、Speeroとのこのインタビューで、リーダーシップがイノベーションに重点を置いている場合に役立つと共有しました。これにより、潜在的な収益の言葉を話しながら、実験から得た洞察の観点からROIを示すことができます。潜在的な収益損失は指標を回避しました。

そして、「勝ち」と「負け」を共有するだけではいけません。 これらの用語は、CROの領域外で同じことを意味するものではありません。 代わりに推奨事項として提示された場合、それはより適切に解釈され、貴重なビジネス上の決定に変換されます。

2.利害関係者を特定する

実験プログラムの実行方法が完全に明確であれば、代理店を紹介する方が簡単です。 開始してエラーが発生したときに修正するのを待つ必要はありません。 それは効果がなく、費用がかかります。

代わりに、RACI割り当てマトリックスを使用して、最初からプロセスを合理化します。 このチャートは、関係する各利害関係者のプロジェクトにおける主要な目的、マイルストーン、タスク、および責任を計画するのに役立ちます。

また、主要な利害関係者（つまり、常に情報を入手する必要がある利害関係者）を把握する方法でもあります。

RACIは、プロジェクトをどのように構成するかを説明する頭字語です。

• 責任–タスクの完了または意思決定の責任は誰にありますか？ これは通常、人々のグループです。

• 説明責任–誰がタスクを承認し、マイルストーンが完了したことを確認しますか？ 誰がタスクを完了する責任者にタスクを割り当てますか？ これは通常、プロジェクトリーダーであり、最終的な決定を下せるようにするための唯一の役割です。

• 相談–プロジェクトのタスクについて誰に相談する必要がありますか？ タスクを完了するために、誰がタスクに入力する必要がありますか？

• 情報提供–プロジェクトのステータスについて誰に通知する必要がありますか？ 進捗状況の更新が必要であるが、日常の入力は必要ないのは誰ですか？

実験プロジェクトでRACIチャートを作成して使用する方法について説明しました。 コミュニケーションを整理するためにどのように使用されるかの例を次に示します。

エージェンシーが何をしているのかを知らされなければならない利害関係者と、その仕事が直接影響を受ける利害関係者に焦点を合わせます。 代理店のオンボーディングは、通常の業務を中断する必要がないためです。

経験豊富なCRO代理店を雇う場合は、RACIマトリックスを使用して、専門知識を持った人を見つけて結果を出し、将来の問題にさまざまな解決策をもたらすことができるようにしてください。

3.オンボードウェル

新しいチームメンバーをオンボーディングするのと同じように、エージェンシーをオンボーディングすることを考えてください。 あなたは彼らが簡単に始めるために必要なリソースを準備しなければならないことを知っています。

あなたが以前に一緒に働いたことがないかどうか彼らが知らないことがたくさんあります。 例：サイトの内部動作とさまざまなユースケース、優先順位マトリックスなど。では、その知識をどのように伝えることができますか？

彼ら（エージェンシー）は、優先順位マトリックス、スプリント計画、立ち上げに使用するQAチェックリスト、設計チームなど、プログラムのパラメーター内で作業する方法を知っていることが不可欠です。 幸いなことに、これのほとんどは大部分が自動化されており、誰でもアクセスできるAirtableに配置されています。

アレックスバーケット

クライアントは、最適化する必要のある内部Webサイトやアプリについて外部の人々が知っていることを忘れていることに気づきました。 内部チームはウェブサイト自体と非常に緊密です。 彼らは、ウェブサイトが提示するすべての異なるシナリオ、ユースケース、および異常の詳細を知っています。 また、外部機関の誰かが必ずしも自分のWebサイトについて同じ深さの知識を持っているとは限らないことを忘れることもあります。 これは、初期段階で代理店にいくつかの課題を提供する可能性があります。 最初にCROプログラムでビジネスを支援するために必要な内部知識を共有することは非常に重要です。 そうすることで、エージェンシーは、テストのアイデアを考え出したり、テストを開発してQAしたりするときに、何を期待し、何を考慮すべきかを知ることができます。

タシンレザ

ゼロから始める場合は、代理店にビジネスを理解するために必要な時間を与え、以下を作成します。

• カスタマーリサーチハンドブック
  
  これは、顧客が誰であるかについての貴重な洞察を代理店に提供する内部ドキュメント/データベースです。 フォーカスグループ、インタビュー、電子メール調査、分析分析から収集されたデータに加えて、データに裏付けられた理想的な顧客プロファイルと人口統計情報が含まれます。

• 優先順位マトリックス
  
  すべてをテストすることはできません。 彼の記事のDavidMannheimによると、ほとんどのプログラムは以下によって制限されています。
  
  • 組織でのテストの目的
  • トラフィックの可用性
  • 希望する変更
  • 利用可能な時間

テストのアイデアの海では、実装するテストと後で何を残すかを決定するシステムが必要です。 あなたがこれを理解したならば、あなたの機関も知る必要があります。

• Q＆Aチェックリスト
  
  テストが完了したら、結果の正確さをどのように検証しますか？ テストの実行には多くのステップが含まれます。つまり、問題が発生する可能性のある複数のタッチポイントがあります。
  
  結果を検証するために行われたことを反映するために実行する手順を共有する必要があります。 使用できるQ＆Aチェックリストがあるので、最初から始める必要はありません。

• 初歩的な学習リポジトリ
  
  これは、過去のテストに関するデータとドキュメントを保持する場所です。 ここに記載されている情報は、将来のテストの有効性と品質を卓越したレベルに向上させることができます。
  
  学習リポジトリがない場合は、実験プログラムの成功を後押しする可能性のある洞察を失うことになります。

では、なぜあなたはあなたのビジネスを理解し、これらのリソースから情報を吸収するためにあなたの代理店に時間を与える必要があるのですか？ プロセスは実験の成熟度の柱だからです。 いくつかの基本ルールを作成することは、厳格なオンボーディングの重要な側面です。 お見逃しなく。

4.信頼を確立する

彼らにフラットで負けたテストを報告する自由を与えてください。 実行するテストのほとんどが失われることを理解してください。 これは素晴らしいです、なぜですか？ うまくいかない可能性のあるものを積極的に排除し、大きなプラスの影響をもたらす可能性が高い変更、機能、および決定に向かって進んでいるためです。

勝利についてしか聞いていない場合は、洞察の90％を失うことになります。 10回のテストのうち9回は通常失敗であるためです。

また、フラットテストを見るたびに代理店が説明しなければならない場合、彼らは自分たちのサービスが他の場所でより価値があると感じるでしょう。少なくとも、実験とその可能性を理解している代理店はそうするでしょう。

あなたはそれを望まない。 代わりに、あなたはあなたのコミュニケーションをゲームに持ち込み、信頼を築きたいのです。 方法は次のとおりです。

• 代理店とオープンにコミュニケーションする

話し、聞いてください。 組織の目標と、代理店との関係に期待することについて話します。 そして、彼らがあなたとあなたのチームに期待することを聞いてください。

これらの要求と意見を必ず認めてください。 その後の会議中であっても、プロジェクトが進行するにつれて、彼らのフィードバックやアイデアがチームにとって価値があることを彼らに知らせてください。

懸念がある場合は、正直に表現してください。 多くの場合、CROエージェンシーはこれらの懸念に精通しており、健全な方法でそれらに対処する方法を知っています。 また、安全な経路を目標にマッピングするのにも役立ちます。

それは、物事が曖昧で、正しい道を進んでいることを知っているときに、いつでも振り返ることができるものです。

• 相互に有益なコミュニケーション目標を設定する

代理店と提携するときはいつでも、明確なコミュニケーションの期待を設定する必要があります。 これには、コミュニケーション媒体、会議の時間と頻度、話し合いのポイントなどが含まれます。

これらを事前に定義しておくと、長期的には作業プロセスがスムーズになるだけでなく、その確実性が信頼を育みます。 どちらの当事者も何を期待できるかを知っているので、リラックスして他の義務を果たすことができます。

しかし、もう1つあります。これを設定して、最後まで実行するだけではありません。 意図したとおりに機能していることを確認するために、時々チェックする必要があります。 たとえば、重要な情報を時間どおりに入手しているかどうかを代理店に問い合わせてください。

PS：何かを変更する場合は、他の利害関係者に知らせてください。

• チャンピオンのような衝突を処理する

私たちはバラ色の乗り物を楽しむのが大好きですが、実際には、衝突が発生します。 あなたがマイクロマネジメントをしているなら、あなたは対立を支持してあなたのオッズを積み重ねています。 細かく管理しないでください。

しかし、CRO代理店と意見が一致しない場合は、どうしますか？

あなたの内なる人事マネージャーを導き、プロのようにそれらの難しい会話を処理します。 それらの瞬間は、あなたが勝つための「あなた対エージェンシー」コンテストではないことを理解してください。 代わりに、それはあなたのパートナーであり、あなたには共通の目標があります—最適化（または何か他のもの）による成長です。

目標について彼らを安心させ、一緒にそれを再訪し、そこからあなたの道を進んでください。

何かを変える必要がありますか？ その変更により、プロジェクトの当初の目標に近づくことができますか？ 誤解したことはありますか？ それとも、もっとよく説明できることがありますか？

このような瞬間にさらに質問をすると、解決にかかる時間を節約できます。

最後に、あなたは信頼を得るために信頼を与えます。 あなたの代理店が最善の仕事をして結果を出すことを信頼してください。そうすれば、彼らはその信頼をあなたに戻す可能性が高くなります。

このようにCROパートナーと関係を築くと、組織の枠を超えて彼らを興奮させる質の高い関係を育むことができます。

5.抽出学習

学習リポジトリを構築します。 以前のテストからの洞察を手放して、QAチームが壊れたキャンペーンをより迅速に診断する機会を拒否する余裕はありません。

また、プロセスと結果を上司に報告するプロセスをスムーズにし、テストの速度を上げるのにも役立ちます（実験履歴全体にアイデアが散りばめられているため）。

しかし、これは、アクセス可能で適切に構造化されている場合にのみ価値があります。 生産的な学習リポジトリは、次のようにすべての学習を文書化することから始まります。

1. テストからのすべてのメタデータを記録します

テストタイプ、テストを実行したページ、タッチポイント、オーディエンス、および成長表面積を強調表示します。 この情報、仮説、指標、結果をメタデータスコアカードに凝縮します。

これを実験リポジトリツールに保存します。 開始時に、Googleスライド、Notion、またはAirtableを使用して、この情報を保持および共有できます。

2. さまざまな学習スタイルを記録する

誰もがあなたが情報を保存することを好む方法のファンになるわけではありません。 テキストで成功する人もいれば、画像や動画などのビジュアルが好きな人もいます。 以前のテストからの学習を記録するときは、可能な場合はスクリーンショットと画面記録を追加してください。

3. テストにタグを付ける

リポジトリを通過する人は誰でも、テストの目的を即座に特定できるはずです。 それは反復的でしたか、それとも混乱しましたか？ それとも、最適化またはイノベーションのためでしたか？ 実験プログラムに適したタグを作成し、それらを使用してテストを並べ替えます。

この学習リポジトリは、あなたとあなたのCROエージェンシーにとって非常に貴重です。 彼らはあまり多くの質問をすることなくあなたの実験プログラムの歴史を探求することができます。

また、問題をすばやく診断したり、さらに良いことに、すでに行ったテストに時間を無駄にしない計画を立てることもできます。

また、実験プログラムを組織内の他のプロセスとは別のエンティティとは考えないでください。 他のチームメンバーは、あなたのエージェンシーが行っていることに参加する必要があります。 それは、エージェンシーの専門家がテストについて考え、アプローチする方法をエミュレートして吸収できるように、1対1で編成するときです。

これらの1：1は実験文化の促進に不可欠ですが、集約されたデータやレポートへのアクセスと一致させる必要もあります。

これは、CROエージェンシーの専門家の経験を活用する1つの方法です。 もう1つの方法は、最適化チーム（集中型または分散型CoE）の構成に関する意見を求めることです。 専門家は先見性と先例を持っているので、実験のロードマップに基づいて正しい方向にあなたを動かすことができます。

結論

生産性を最大化するためにCROエージェンシーと協力する方法がわかったので、できるだけ少ない摩擦で成長目標を達成し始めることができます。 自分の進歩を疑う場合もあるかもしれませんが、十分なコラボレーションを提供し、適切な期待を持っている限り、パートナーシップは実り多いものになります。