テスト予算の大部分をどこに投資する必要がありますか?
公開: 2021-07-01つまり、A / Bテストプログラムの予算があり、最初に何に投資すればよいかわからないということです。
それは道具ですか? 代理店? それとも、テストチーム全体ですか?
長期的な利益を得るために、最初にチームに投資することをお勧めします。 才能のあるドライバーがいないと、有益な結果が得られるツールはありません。 そして、エージェンシーはただもっと費用がかかるでしょう。
ただし、すべてのオプションを検討したい場合は、戦略と目標を比較検討し、どちらがそれらに最も適しているかを確認する必要があります。
探検しましょう…
- 代理店を雇うべきですか、それとも社内でCROを運営するべきですか?
- A / Bテストチームにいくら投資しますか?
- 独自のCROを実行したい場合はどうなりますか? A / Bテストの予算をどこに投資する必要がありますか?
- 1.最初にA/Bテストツールを入手する
- 2.専用のテスターを雇って投資する
- 3.そしてそれらを訓練しなさい!
- 4.学習保管庫とテスト文化を作成する
- 5.プロセスを合理化します
- フェーズ1:予備的な洞察を収集する(問題や機会を発見するため)
- フェーズ2:テスト計画を作成し、実現可能性を証明する
- フェーズ3:プロジェクトのより詳細な計画を作成します
- フェーズ4:テストを起動して実行します
- フェーズ5:テストレポートを作成する
- 6.データ品質を向上させる
- 7.テストチームにサポートを追加します
- 8.他のチームへのテストの構築を開始します
- 9.カスタマーエクスペリエンス測定ツールを追加する
- 10.実験を収益に結び付けるという罠を回避する
- 結論
代理店を雇うべきですか、それとも社内でCROを運営するべきですか?
正直なところ、それは異なります。
エージェンシーは経験があり、テストプロセスのほぼ全体をオフロードできるので素晴らしいです。
月に約10,000人以上の訪問者がいて、現在のキャンペーンでできるだけ早くリフトを確認したい場合は、予算があれば代理店と協力するのが最善の選択です。
A / Bテストチームにいくら投資しますか?
あなたはおそらくCROの知識を持っていると主張するFiverrの人々を見つけることができますが、私は明確に操縦します。
平均費用は、フリーランサーの場合は月額2千ドルから、小規模な代理店の場合は月額8千ドル、専任チームを擁する一流の代理店の場合は月額25千ドルです。
ここには、実際に推奨される代理店の全リストがあります。
確かに、代理店は安くはありませんが、覚えておいてください。CROは需要が高く、スキルの高い役割であり、長期にわたってほぼ保証されたROIを備えています。
実際、私たちのデータは、社内チームと比較した場合、同じ量のキャンペーンを実行している間、エージェンシーは平均してより多くの勝利テストを取得する傾向があることを示しています。 これは、彼らが「最大の勝利を最初に」のプロセスに従い、あなたに最大の影響を与えることができる場所についてより多くの経験を持っているためです。
その経験は合計され、結果をすばやく得るのに役立ちます。
小さな行動や改善に焦点を合わせているために苦労するかもしれない初心者のテスターとは対照的です。
関連:2021年の43の必須CROツール(CROエージェンシー向けに検証済み)
ただし、代理店が常に最良の選択であるとは限りません。 チームが「成熟」すると、社内の結果は本当に前進する可能性があります。 そうすれば、より多くのデータに基づいて行動し、オーディエンスと製品を知っているデータ主導の企業になるという理由だけで、社内テストからより高いROIが得られる可能性が高くなります。
あなたはそれがあなたの成長にどれほど影響を与えることができるかを見るためにCROにビジネス全体で焦点を合わせているBooking.comのような会社を見る必要があるだけです。
Harvard Business Reviewは、Booking.comがどのようにして世界最大の旅行宿泊施設プラットフォームになったのかについてのケーススタディを、すべてテストから書きました。
代理店を雇うための2k〜25kがない場合はどうなりますか? 今日だけでなく、オーディエンスからの情報に基づいてすべてのアクションを実行する「データドリブン」になりたい場合はどうでしょうか。
次に、CROを社内で実行し始めたいと思うでしょう。
社内テストは、次の場合に開始するのに最適な場所です。
- 代理店よりも少ないコストで、現在のテストをさらに強化したいと考えています。
- 代理店の基準を満たしていない可能性のあるSMBです。 (トラフィック/予算など)
- 時間の経過とともに拡張および成長し、全社的なテスト文化を構築する機能が必要な場合。
始めたばかりの場合は少し混乱する可能性があるため、このガイドでは、A/Bテストの予算をどこに費やすべきかについて説明します。
独自のCROを実行したい場合はどうなりますか? A / Bテストの予算をどこに投資する必要がありますか?
これはすべて主観的なことですが、これは、A / Bテストの予算があり、会社のCROを開始し、そこから得られたROIと洞察を使用してさらに投資したい場合に従う正確なプロセスです。
私はこのリストをいくつかの基準に基づいています:
- テストを実行するための主なニーズまたは優先順位は何ですか?
- 次のステップに進む前に、何が必要ですか?
- そこにある最も「成熟した」企業に基づいて、テストチームを成熟させるために、どのような習慣、ツール、およびプログラムに投資する必要がありますか? (ゲームをリードし、年間5億ドルを実行している人、主にデータ駆動型であるため)。
CROの観点から成熟度が何を意味するのかわからない場合は、あなたの会社がCROにどれほど複雑または投資しているかについて話します。 基本的なテストを始めて実行している人から、その結果に基づいてあらゆる選択を行う会社まで。
それぞれの部分、なぜそれが重要なのか、そしていつそれに投資するのかを説明します。
それでは、すべてを分解しましょう…
1.最初にA/Bテストツールを入手する
あなたがこれまでに投資できる最も重要なことはあなたの人々です。 ただし、ツールなしではテストを実行できませんよね?
理想的には、次の3種類のツールを検討しています。
- 現在のデータを追跡するためのサイトの分析。 これは、GoogleAnalyticsまたはその他の場合があります。 (注:テストを開始する前に、現在のコンバージョン率を追跡し、売り上げがどこから来たかを確認できるようにする必要があります。)
- Convertアプリなど、人々が取っている正確なアクションを測定できる定量的テストツール。 それは、誰がどのような行動をとったか、そしてそれがどのように改善または減少したか、あるいは単に変化をもたらさなかったかについての数字をあなたに与えるでしょう。 これがないと、何もテストできません。 それを使用すると、賢い選択を始めることができます。
- Hotjarなどのデータを理解するための定性的ツール。 これにより、オーディエンスを調査したり、マウスを動かした場所を確認したり、クリックに問題があるかどうかを確認したりできます。最良のシナリオは、情報を定量ツールと直接統合するQAツールを入手することです。
CROとは、結果を測定し、問題を把握し、それらを修正および改善しようとすることです。 データを追跡および測定できない場合は、それを行うことはできません。
今でもツールにお金を払う必要があり、ツールにはさまざまなコストとさまざまな追加機能があります。 ここでは、A / Bテストツールの購入方法と、A/Bテストツールのコストについて説明します。
(現在のツールに多額の費用がかかっているかどうかを分析する方法や、契約の途中で新しいプロバイダーに切り替える方法も示します。)
したがって、最初にツールを使用しますが、どのツールもそれを使用する人と同じくらい優れていることを忘れないでください…
2.専用のテスターを雇って投資する
実行するテストの大部分は失敗します。
何がうまくいくか、何がうまくいかないかを証明し、損失を避けながら段階的に勝つことができるので、それは悪いことではありません。
テストを実行する専任の従業員がいることで、より多くのことを実行し、より多くを学び、より速く成長する機会が得られます。 ちなみに、その知識を使用して、製品やエクスペリエンスを改善することもできます。
ただし、テストを始めたばかりの多くの企業は、現在の従業員の役割にそれを追加しようとしています。 マーケティング担当者をプロジェクトから外して、1%のテスターに変えないでください。
これが、ほとんどの人がCROが自分たちのために機能しないと考える理由です。 彼らはいくつかのテストを実行し、間違ったことに焦点を合わせたり、データを間違って読み取ったりしました。
ここでくしゃくしゃにしないでください。 テスターを社内で入手できれば、それはあなたが行うことができる最高の長期投資の1つであり、テスターなしではこれ以上先に進むことはできません。
3.そしてそれらを訓練しなさい!
#teamovertools
結局のところ、 A / Bテストツールは、それを使用している人々と同じくらい優れています。 設定したパラメータに従って、常にランダムにユーザーを割り当てます。 そして、それはあなたのために勝者を呼びますが、成功したA / Bテストを実行するために、統計の基礎をしっかりと理解することが最善です。
Trina Moitra、Convert.com
テスターを入手したら、時間をかけてトレーニングしてください。 実行できるテストと取得できる洞察はすべて、テスターの経験にかかっています。
それがなければ、彼らは:
- 設定が間違っている、
- テストのアイデアを見つけるのに苦労し、
- テスト不可能な仮説を考え出し、
- 十分な時間テストを実行しないでください、
- データを間違って読み、勝利を逃し、
- それを間違って読み、敗者を実装し、
- 間違ったことをテストするか、さらに悪いことに、
- 彼らがすべきことをテストしないでください…
…もっと。 発生する可能性のある最も一般的なA/Bテストの間違いとその修正方法のリストをまとめました。
すべてが期待どおりに機能するわけではありません。 ウェブサイトのデザインに関するベストプラクティスは機能しますが、常に機能するとは限りません…
初心者のテスターは、これをテストしていないか、テストしたとは思わないかもしれません。 特定のページでキャンペーンを実行しているだけで、このデータをチェックしていない可能性があります。 これが、テストのすべての詳細を学ぶために彼らを訓練することが非常に重要である理由です。
では、どこでトレーニングできますか?
純粋にCROおよびA/Bテストに焦点を当てたCXLインスティテュートによる素晴らしいプログラムがあります。
補足: Convertのお客様になると、CXLトレーニングにアクセスできるようになります。
それは信じられないほど詳細で、そこにいる最も賢いテスターの何人かによって作られました。 私はそれを強くお勧めします。
これにより、テスターはテストのすべての要素を理解できるだけでなく、最初に取り組む大きな影響領域と、違いを生むテストの種類に優先順位を付けることができます。
テスターがこれらすべてを理解すると、確実なA/Bテスト戦略を設定するのに役立ちます。
TL; DR
時間をかけてトレーニングに投資し、チームメンバーをスキルアップしてください。 彼らが学べば学ぶほど、彼らはより良くなり、あなたにとってより良いリターンを得ることができます。
覚えておいてください:データが何を意味するのか誰も知らなければ、データは無意味ですよね?
4.学習保管庫とテスト文化を作成する
これは、規模を拡大し、組織化し、マネージャーからの賛同を得て、ミスを迅速に解決し、社内でテスト文化を構築したい場合に重要です。
これについては別の投稿で話しましたが、ここで簡単に要約します。 学習リポジトリは、過去のすべてのテストのデータベースです。
それが示している:
- これまでに実行した各テスト、
- テストしていたページ、
- あなたの仮説は何でしたか、
- テストと変更内容(コントロールとバリエーションを含む)
- 結果として生じるリフト、ドロップの変化、またはそれが同じままである場合は、
- 平均注文額の変化。 (プラスの利益が得られ、マイナスの場合は、それをライブにプッシュしないことによって節約されたお金を示します。)
- それらの結果についてのあなたの考え。 (それは新しい洞察などにつながりましたか?)
あなたのサイトで何かが壊れていますか?
過去の問題を含むリポジトリがあると、チームは問題をより迅速に見つけて修正するのに役立ちます。
新しい人を訓練したいですか?
すべての学習を1つの場所にまとめることで、テスターは過去のテストから学ぶことができます。
より良いバイインを手に入れよう!
このような情報を提示することで、上司にテストを行い、CROの価値を証明することが容易になります。
テスト文化を構築する
バイインと言えば、これらのテストを使用して、テストの企業文化を構築することもできます。 並べて撮影したショットと仮説をチームと共有し、どちらが最も効果的かをチームが推測できるかどうかを確認します。 後で結果を共有します。
これにより、人々はCROに興奮します。 特に、大多数の人がテストが失敗したと信じている場合、それが勝ったことを確認するためだけに。 これは、すべてが意見に関するものではないことを理解するのに役立ちます。
また、彼らが考えもしなかったかもしれない分野で彼らが改善するのを助けることができます! (特定の単語や角度がオーディエンスとよりよく結びついていることがわかった場合、カスタマーサポート、コピーライティング、広告チームがすべてこれと、それがもたらす可能性のある影響について知ったと想像してみてください。)
しかし、偏見を完全に取り除き、会社に長期的なテスト文化を作り出すには、興奮だけでは不十分です。
実験文化の展開に経営幹部(最終的な意思決定者)を関与させる場合ほど効果的ではありません。
ご覧のとおり、サイロ除去テストは、非常に異なるスキルセットを必要とするため、あまりうまく機能しません。 しかし、経営陣と緊密に協力してテストの確かな理由を明らかにすると、徐々に彼らは永続的なテストとデータ主導の意思決定手法を採用するようになります。
これらのテストをどのように提示し、管理に勝つことができますか?
GuessTheTestと呼ばれるモデル化できる素晴らしいサイトがあります。
これは、テスターがアイデアを得るのに役立つと同時に、仮説スキルの向上にも役立つように設計されています。 このサイトは複数のA/Bテストを表示することで機能し、読者はどのバリアントが勝つかを推測できます。
彼らは定期的にさまざまなA/Bテストを備えており、クリックすると、何人の人がそれを正しくまたは間違って推測したかの結果だけでなく、テストの背後にあるデータ、実行されたもの、および勝者とどのように変換されたかを確認できます。
それは私たち自身の意見に挑戦するのにも役立つので、テスターにとって非常に役立ちます。
これは、自社でそのテスト文化を構築するためにできることと同じであり、費用はかかりません。 GuessTheTestのようにWebサイトを構築する必要はありません。 代わりに、リポジトリに入れている画像や情報を使って、すでに行っていることを簡単に共有できます。
コントロールとバリアントを記載した会社の電子メールを送信し、勝ったと思うものに投票するように人々に依頼します。 次に、テストの結果、仮説、および洞察を記載したフォローアップメールを送信します。
この演習では、必ず管理チームを関与させてください。 または、少なくとも最初から結果まで、ストーリーを伝えます。 彼らに、いかに間違った意見があり得るかを見てもらいましょう。 それがどのようにそのテスト文化の構築に役立つのか、そしてそれがまったく異なる分野のチームにどれほど役立つのか、あなたは驚かれることでしょう。
では、リポジトリを構築する方法は?
コンピューター上のフォルダーのように単純な場合もあれば、GrowthHackersの「Experiments」のようなプラットフォームを見る場合もあります。 これは、学習リポジトリとプロジェクト管理ツールを1つにまとめたものです。
5.プロセスを合理化します
あなたができる最も価値のあることの1つ:
- テストを改善し、
- それらの頻度と量を増やし、
- エラーを削除し、
- そして、テストあたりのコストを下げます…
…テストシステム全体を合理化するためのシステムとプロセスを設定することです。
テストしたいものの仮説と構成から、事前テストのセットアップ、それをライブでプッシュする方法、テスト中に何をするか、そして後に何をするかまで。
繰り返す要素ごとにシステムとSOP(標準の操作手順)を構築すると、テストプログラム全体が改善されるだけでなく、成功の可能性が高まります。
なんで?
各テストは、人為的エラーの可能性が少なくスムーズに実行されると同時に、より高速に実装されます。 それはお互いに有利な状況です。
もちろん、問題は、これを行う企業がほとんどないことです。 実際、CXLの業界レポートの状態で何度も登場します。
しかし、それらを一日中運営している機関は?
または、テスト文化を拡大する内部チームですか?
これらは、常にシステムの構築にできるだけ早く焦点を当てているものです…
これらも簡単に作成できます。
各テストで何をするかを計画し、新しいテストごとにフォローするドキュメントを作成します。 ボックスにチェックマークを付けるだけで、すべてが完了したことを確認できます。
たとえば、次のような簡単な実験テストプロセス(Ben Labayのフェーズゲートテストフレームワークに基づく)から始めることができます…
フェーズ1:予備的な洞察を収集する(問題や機会を発見するため)
顧客と市場での地位を理解することから始めます。 これらの洞察を収集するには、調査や投票、利害関係者へのインタビュー、ユーザーテストなどを実行して、顧客と市場を調査します。
回答を得たい主な質問は次のとおりです。
- お客様/ユーザーのニーズを満たしていますか?
- 私たちのターゲットオーディエンスは私たちをどのように認識していますか?
- 市場における当社のブランドの位置付けは何ですか?
- これらの問題/機会について、すでにどのようなデータを収集していますか?
- 製品、マーケティング、またはサービスで何を変更する必要がありますか?
これらは、簡潔な問題ステートメントを思い付くように導きます。 測定する指標とその達成方法が明確になります。 また、問題の問題や機会が追求する価値があるかどうか、または後で延期できるかどうかを評価することができます。
この初期評価から得た洞察は、提案された仮説を使用して調査の要約を作成するのに役立ちます。
これを使用して、経営幹部の利害関係者から賛同を得ます。経営幹部は、テストとビジネス目標の整合性に参加する必要があるためです。
これは私たちを次の段階に導きます…
フェーズ2:テスト計画を作成し、実現可能性を証明する
このフェーズでは、幹部からのサポートを獲得するためのテストの実現可能性を主張します。
彼らは、潜在的な結果の価値がそれを実現するために必要なリソースをどのように正当化するかを見たいと思うでしょう。
この段階で答えたい質問は次のとおりです。
- テストを実行するにはどのようなリソースが必要ですか?
- どのような重要な変更を行う必要がありますか?
- これは他のプロジェクト/テストに影響を与えますか?
- KPIとは何ですか?また、KPIはどのように成功を示しますか?
- 考えられる結果は何ですか?
これらの質問に対する回答を、テストの最低限の範囲を説明するドキュメントに要約します。 おそらくスプレッドシートで理解しやすいことを確認してください。そうすれば、それを使用して管理者から承認を得ることができます。
承認を得たら、計画に進むことができます…
フェーズ3:プロジェクトのより詳細な計画を作成します
ここで、全員がプロジェクトに参加します。 経営幹部は、コストへの影響と期待される結果のバランスに同意する必要があります。 また、部門の枠を超えた利害関係者は、参加する準備ができている必要があります。
これを達成するために、これらの質問に答えるプロジェクトのより詳細な計画を準備します。
- テストを完了するために必要なデータ/情報は何ですか?
- どこでどのようにテストを実行していますか?
- 成功を示す指標は何ですか?また、それらをどのように測定していますか?
- 考えられる結果の概要を示す決定木を用意しましたか?
プロジェクトに関係するすべての人から完全な調整を得るための計画で、これらすべてを結び付けます。 これは、学習保管庫への貴重な追加にもなります。
すべての利害関係者が計画全体に参加しているときに、テストを開始できます。
フェーズ4:テストを起動して実行します
すべてが順調に進んでいることを確認するためのチェックを実行しながら、このフェーズでテストを開始します。 単一または複数のQAおよびQCチェックと毎週のパフォーマンスチェックを実行します。
このフェーズで必要な明確さは、次のように答える必要があります。
- テストは前のフェーズの計画に従って構築および実行されていますか?
- データを収集し、意図した方法で報告していますか?
- テストプロジェクトのタイムラインは順調に進んでいますか?
- このテストが他のプロジェクト/テストに与える可能性のある影響を解決しましたか?
- 全員がまだ進捗状況に関与していますか?
問題として何かが目立つ場合、または必要な変更がある場合は、インシデントログに記録してもらいます。
幹部の利害関係者に報告し、テストがどのように実行されているかを知らせます。 計画通りに進んでいますか? また、正確にデータを収集し、レポートを作成していますか?
これは次の段階の到来を告げるでしょう…
フェーズ5:テストレポートを作成する
この最終フェーズでは、テストの結果として行われた分析、結果、洞察、および決定を詳述したテストの完全なドキュメントを準備する必要があります。 これは、テストアーカイブと学習保管庫の一部になります。
このテストレポートに含めるものは次のとおりです。
- テストが目標を達成したかどうか
- あなたが得た洞察のためにどのような即時の修正が行われたか
- テストの範囲外で何か新しいことを発見した場合、および
- テスト結果に触発された重要な決定
テストの詳細なドキュメントに加えて、重要な情報を一目で提供するテストのスコアカードを作成すると便利です。
今、あなたがしなければならないのは、次のテストのために5つのフェーズを繰り返すことです。
6.データ品質を向上させる
より多くのトラフィックと結果を取得し始めたら、より詳細なレポートのために分析プラットフォームを切り替えることをお勧めします。
月に1,000万人の訪問者が来たら、Google Analytics 360にアップグレードできます(わかっていますよね?…すごい)
または、AdobeAnalyticsやHeapなどのリアルタイムのクロスチャネルツールを検討し始めることもできます。 (どちらもConvertアプリと直接統合されます。)
これらのツールは、より正確なデータを提供し、ユーザーの行動を理解するのに役立ち、標準のGAでは不可能なことをテストおよび追跡することもできます。
それだけでなく、CRMやその他のツールにもプラグインします。
7.テストチームにサポートを追加します
これまでのところ、おそらくテストツールの一部であるWYSIWYGエディターを使用しているだけです。
ただし、より高速でクリーンなコードを使用して、より複雑なテストの実行を開始したい場合は、Javascript開発者を雇う価値があります。
このようにして、開発者が自分の好みのツールとワークフローを使用してテストを行い、コードを追加の膨張なしにテストツールに直接アップロードすることができます。
そしてボーナス?
テストは引き続きツールを介して実装されるため、これにより、すべてのセグメンテーションおよび測定機能を使用できるようになり、勝者が見つかると自動的に停止することもできます。
(開発者を使用している人々に見られる1つの問題は、ツールをバイパスするか、独自のテストプラットフォームを構築することです。これは機能しますが、開発者がテストを設計し、終了したらオフにして、勝者を実装する必要がある場合は、次のようになります。問題。)
8.他のチームへのテストの構築を開始します
より多くのテスト、追跡データ、および経験を実行しているので、さまざまなチーム間でテストを実装することを試みる絶好の機会です。
もはや販売だけでなく、製品やトラフィックなど。改善が可能なチーム。
覚えておいてください:それは必ずしも大きな勝利ではなく、小さな勝利の集合体です。 数百の領域で1%の伸びは、会社の運営方法に大きな違いをもたらす可能性があります。
各チームで誰かのトレーニングを開始するか、人々を連れてきて、それらの領域でのテストを管理するためのトレーニングを行うことができます。 通常は、ゆっくりと始めて、新しいチームに刺激を与え、サポートを提供するためのロールモデルとしてコアテストチームを使用するのが最善です。
すべてのチームを一度に構築しようとしないでください。
重要なのは、もう1つのチームを構築して成功させ、次のチームに移ることです。 テスト文化を構築したい場合は、各チームが独自に実行して効率的にできるようにする必要があります。
9.カスタマーエクスペリエンス測定ツールを追加する
Speero(CXLの代理店)は最近、2020年から2021年にすべてCROを実行している210の異なる企業からのフィードバックに基づいて、CROの成熟度に関するレポートを作成しました。
彼らの目標は、さまざまな実験プログラムの詳細と、プログラムの成熟度が結果にどのように影響するかを把握することでした。
いくつかのことが私には本当に際立っていました:
- 最も成功している企業はデータ主導型です。 彼らは意見ではなくテストデータに基づいてすべての選択を行います。
- 彼らは結果を全社的に共有し、テスト文化の構築を支援します。
- そして、彼らはカスタマーエクスペリエンス測定を実装している企業のほんの一部です。
誰もがカスタマーエクスペリエンスを測定するわけではないのには理由があります。 コンバージョン率を改善していないという点で、CROについて話すときに思い浮かぶことではありません。 ただし、QAおよびQuantタイプのテストに使用するのと同じ方法を使用して、より詳細に、より高い売上、リピート売上、および保持を追加するすべての関連する側面を追跡、測定、および改善しています。 (コンバージョン率に直接影響を与える可能性のあるすべてのもの)。
多くの場合、カスタマーエクスペリエンスの測定には、より具体的な追跡が必要ですが、これを行うと、金銭的価値をカスタマーエクスペリエンスの向上と同等にすることができます。
それだけでなく、長期にわたる保持を追跡することもできます。 (新しい顧客を呼び込むよりも、現在の顧客により多くの売上を上げる方がはるかに有益です。)
では、これには何を使用できますか?
このプロセスは実際には非常に大きいため、常に採用されるとは限りません。
理想的には、顧客がサイトを離れて製品を受け取った後でも、カスタマージャーニー全体に沿ってインタラクションおよびフィードバックシステムを作成します。 これには、人的要素と調査などのためのいくつかの追加ツールが必要です。
一部のエージェンシーはCXを専門としているため、それらを使用して開始することができます(またはそれらを使い続けることができます)。
または、Qualtricsなどのツールを検討し始め、プログラムを社内で構築することもできます。
CXは学習曲線のある新しいトピックですが、特にそれをCROテストにフィードバックする場合は、大きなメリットがあります。
10.実験を収益に結び付けるという罠を回避する
「このテストを実行し、洞察を使用してその決定を下したので、Xの金額を稼ぐことができます」と言いたくなります。 その結論は現実を無視します。
世界は私たちが望むほど単純ではありません。 非常に多くの要因が物事の結果に影響を与えるため、特定の結果が展開されたときに一貫して繰り返されると考えるのは現実的ではありません。
それでは、なぜ一部のA / Bテストツール、エージェンシー、およびCRO実践者は、依然としてA/Bテストを収益予測に結び付けているのでしょうか。
答えは簡単です。それは刺激的で、多くの場合、賛同を集めます。
しかし、これは人々を失望させ、A/Bテストへの信頼を失わせる簡単な方法です。 そして、それが人々が収入を報告するツールにお金を送り込むことに誤って引き付けられる理由です。
そのようなツールに年間10万ドルを費やすことが大きな間違いである理由は次のとおりです。
現実の世界には多くの不確実性があります。
テスト結果が正確に繰り返されない理由はたくさんあり、無視してはいけません。 市場の変化、顧客の行動の変化、競争の変化、予算と価格は変動します。 将来は、必ずしもテストを実行したときと同じになるとは限りません。
結果を外挿して来年かそこらの収益の増加を予測すると、ROIの計算が単純化されすぎて、間違った予測が行われる可能性が高くなります。
テストの本当の目的は、前進するための決定を下すことです。
テストは、収益よりも目標と洞察に関係しています。 より良い決定を通知することは、A/Bテストの焦点であるべきです。 これにより、意思決定者は、見上げる魅力的な収益数を持ち、失望するリスクを負うよりも、成長と利益に向けてより自信を持って進むことができます。
しかし、具体的な収益目標が実験の虹の終わりにない場合、人々に興味を持ってもらうのは難しいことがよくあります。
代わりに何をしますか?
実験に関する会話を、予測される収益から実験しないコストに向けて引き出します。 何もしなかった場合の損失はどうなりますか?
また、テストプロジェクトの成功を、特定の目的に関する特定の決定を行う際の信頼度として組み立てます。 これは、期待される収益の増加から焦点を移すだけでなく、利害関係者を最適化プログラムの正しい焦点に合わせるのに役立ちます。
それでも数字が必要な場合は、範囲を指定してください。 実験は結果を得る確実性のパーセンテージを示すだけなので、これは数を求める人々をなだめるための賢い方法です。 たとえば、結果が4.55%の上昇を示した場合、利害関係者に3.2〜5.9%の上昇を期待するように伝えます。
結論
だからあなたはそれを持っています。 始めたばかりのときにA/Bテストの予算を費やして投資する正確な方法と、時間をかけて規模を拡大してさらに投資する方法。
このガイドを使用して、テストの成熟度の旅のどこにいるかを把握し、不足している手順を実装してさらに成長するのに役立てたり、今日から始めるためのガイドラインとして使用したりできます。
ConverttoFindOutを使用してデモを予約します。
デモをリクエストする