上級デジタル マーケターに推奨される A/B テスト スタック
公開: 2019-10-23クイックリンク
- トランザクション & カスタム メール
- アンケート
- ユーザーテスト
- ビジネス・インテリジェンス
- 統計的有意性計算機
- ウェブ分析
- ユーザー分析
- クリック後のランディング ページ
- ヒートマップ
- A/B テスト
- WordPress A/B テストプラグイン
- 結論
A/B テストの背後にある概念は単純です。 コンテンツの 2 つのバージョンを相互に比較して、どちらのパフォーマンスが優れているかを判断します。
分割テストを実行した結果、あなたのビジネスとウェブサイトは、より多くのリードとより高いコンバージョン率の恩恵を受けます.
私の名前は Lars Lofgren です。Quick Sprout で会社を経営する前は、Growth でキャリアをスタートさせました。 KISSmetrics と I Will Teach You To Be Rich のグロース ディレクターとして、私は個人的に主要な目標を達成する責任を負い、A/B テスト プログラムを実行して各 Web サイトのコンバージョンを改善しました。
これまでのキャリアで何百もの A/B テストを実施してきました。
どちらの会社でも、コンバージョン率が 2 倍、3 倍になりました。 具体的には、KISSmetrics での毎月のリード フローを 4 倍にし、I Will Teach You To Be Rich で毎月 40,000 リードを生み出すリード生成マシンを構築しました。
マーケティングのキャリアの中で、私は利用可能なテストに関連するほぼすべてのソフトウェアを試してきました。 驚くべきものもあれば、そうでないものもありました。 A/B テスト プログラムを再び立ち上げるとしたら、これらは私が信頼できる 11 のツールです。
A/B テストに最適なツール
A/B テストに必要なツールにはさまざまな種類があります。 テストを実行するための単一のツールをはるかに超えています。 該当するすべてのカテゴリを見てみましょう。
取引メールとカスタムメール
トランザクション メールを適切にテストするには、メールの作成と分析を完全に制御する必要があります。 SendGrid は、このタイプのコントロールを提供します。 MailChimp などのより一般的なメール ツールは十分に堅牢ではなく、マーケティング オートメーション ツールの多くでさえ十分に柔軟ではありません。 開発者が完全に制御できる電子メール ツールを使用することをお勧めします。
Sendgrid にはいくつかの A/B テストが組み込まれていますが、制限があります。
Sendgrid の魔法は、組み込み機能から来るものではありません。 これは、開発者が完全に制御できるため、メールとファネル全体を A/B テストできることに由来します。 完全に制御できるようになったら、必要なテストを実行できます。
第一に、私は個人的に件名やクリックスルー率をわざわざテストしたことはありません。 ビジネスに重大な影響を与えるものではありません。 第二に、コンテンツのテストは問題ありませんが、私は完全に異なる電子メール ファネルをテストすることを好みます。 それが私の最大の勝利を見つけた場所です。 そのため、組み込みのテスト UI を無視して、メール全体に Sendgrid を使用しています。
私の A/B 電子メール テストのほとんどは、実際にはホールドアウト テストです。 テスト グループの 50% にメールを送信し、残りの 50% には何も送信しません。 そのメールの真の影響を確認できます。
アンケート
SurveyMonkey は、オンライン アンケートの業界標準です。 これを読んでいるほぼ全員が、プラットフォームを通じて何らかのアンケートに回答したことがあります。
とても使いやすいので、SurveyMonkey が気に入っています。 ほぼすべての人が使い慣れているため、ユーザーは自分のソフトウェアを使用して快適に調査を行うことができます。
「アンケートを A/B テスト スタックの一部と見なすのはなぜですか?」と疑問に思われるかもしれません。
アンケートの回答は、A/B テストの成功につながる洞察を促進します。 テストを実行する前に、定性調査から始めます。 顧客をよく理解すればするほど、A/B テストで勝者を見つける可能性が高くなります。
貴重な定性的な洞察を収集するには、次のヒントを念頭に置いてください。
- 調査を過度に複雑にしないでください。 あなたが本当に知る必要がある5から10の質問をすることに集中してください.
- 質問の大部分は、顧客が抱えている問題に集中してください。
- 回答者にとって本当に良い直感が得られるまで、自由回答形式の質問から始めます。
詳細なガイダンスについては、ここにすばらしい調査のヒントがたくさんあります。
ユーザーテスト
A/B テストで成功するための定性的な洞察を得るもう 1 つの優れた方法は、ユーザー テストを使用することです。 これらの実験に最適なツールは UserTesting です。
最初に行う必要があるのは、対象ユーザーを選択することです。 UserTesting のパネルを通じて、独自のオーディエンスを使用したり、特定のターゲットに接続したりできます。 このプラットフォームを使用すると、人口統計やその他の要因を正確に把握して、実験に最適なユーザーを見つけることができます。
次に、5 人または 10 人のユーザーを選択して、オンボーディング プロセスまたは Web サイトでのその他の従来のユーザー フロー アクションを実行します。 UserTesting は、これらのユーザーがコンテンツを操作しているビデオを提供します。 その結果、主な摩擦点を特定して、A/B テストで成功することができます。
これは、A/B テストの成功の宝庫です。 サインアップまたはオンボーディング フローでこれらのいくつかを実行することを強くお勧めします。 私は常に、後で大きな勝利につながる主要な摩擦点を見つけます。 KISSmetrics では、追跡する必要のあるすべてのデータをマッピングすることがいかに難しいかを学びました。 次に、オンボーディングを刷新し、より構造化して、すべてのデータを段階的に説明できるようにしました。
ビジネス・インテリジェンス
本格的な A/B テスト プログラムが必要な場合は、すべてのデータとレポートを社内に持ち込む必要があります。 これを効果的に行うには、何らかのデータ ウェアハウスが必要です。 これが設定されたら、(私の意見では) ビジネス インテリジェンス レポートに最適なツールである Tableau を実装できます。
私が Tableau を好む理由は、完全に制御でき、必要なレポートを生成できるからです。 必要なクエリ、レポート、ビジュアライゼーションを正確に把握しているため、すべてを思いどおりに構築できます。
ただし、残念なことに、誰かがそれを管理し、必要なレポートを作成する必要があります。これはフルタイムの仕事です。 また、どのようなレポートが必要かを知るために、エグゼクティブ レベルの専門知識も必要になります。 従来の BI アナリストはレポートを作成できますが、どのレポートと指標がビジネスにとって最も重要かを知りません。 これらすべてが急速に高価になります。
このソリューションは万人向けではありません。 適切に実行するための専門知識と予算がある場合にのみ、この方法を使用してください。
統計的有意性計算機
スキル レベルに応じて、統計的有意性の計算には 2 つのツールが推奨されます。
簡単な電卓
Neil Patel の A/B Significance Calculator は、最も簡単なオプションです。 必要なのは、各バリエーションの訪問者数とコンバージョン数を手動で挿入することだけです。
次に、計算機は、テストが結論を導き出すのに十分有意であったかどうかを判断します。
高度な電卓
より高度なオプションについては、AB Testguide Calculator が最適なソリューションです。 このツールは、計算に含めるより多くのパラメーターを提供します。
この計算機を使用すると、仮説を選択して信頼水準を選択できます。 テストの結果でさえ、より高度です。 このツールはグラフを表示するだけでなく、観測された検出力、p 値、z スコア、差の標準誤差などの他の統計データも表示します。
これは、多くのテストを行った場合、または統計のバックグラウンドを持っている場合にのみ意味をなす追加の詳細の集まりです. これが複雑すぎる場合は、より単純な計算機を選択してください。
これらを使用する理由
ほとんどのテスト ツールは統計的有意性を計算しませんか?
私が学んだ教訓が 1 つあるとすれば、それは新しいツールを盲目的に信頼することではありません。 A/B テスト ツールが信頼できると確信できるまで、統計的有意性の計算を再確認してください。 統計的有意性を計算する方法はたくさんありますが、これを台無しにするのも簡単です。
そのため、新しいテスト ソフトウェアを使用するときは常に、計算が確実であることが確実になるまで、上記の計算機のいずれかを使用します。
ウェブ分析
トラフィック分析の王者である Google アナリティクスに他なりません。
Web サイトの A/B テストを行うには、トラフィックのダイナミクスを理解する必要があります。特に、次のことを理解する必要があります。
- トラフィックが最も多いのはどのページですか?
- どのトラフィック ソースが増加または減少しているか?
- 最も多くのトラフィックをもたらすページは?
A/B テストを行う予定のページに十分なトラフィックがあることを確認するためだけに Google アナリティクスを使用する場合でも、インストールする価値は十分にあります。 また、完全に無料で、世界クラスのツールです。
ほぼすべてのサイトにインストールされているのには理由があります。 データの品質、レポートとインサイトの量、そして完全に無料であるという事実により、Google アナリティクスは他社の追随を許しません。
以前は、Google アナリティクスのプロファイルを大幅にカスタマイズしていました。 ただし、現在のところ、設定に触れることはめったになく、組み込みのレポートに依存しています。 だから私はあなたが同じことをすることをお勧めします。
ユーザー分析
2 つ目の分析ツールを入手する理由Google アナリティクスだけでは不十分ですか?
何年も経った今でも、Google アナリティクスはトラフィック分析に優れています。 はい、現在はユーザー追跡機能を備えていますが、そのために設計されたことはありません. 真のユーザー分析に使用するには、Google アナリティクスのパワー ユーザーである必要があります。
そのため、ユーザー アナリティクスと顧客データ用の私のお気に入りのツールは、ユーザー ファネルを簡単に追跡できる Amplitude です。
ほとんどの A/B テスト プログラムは通常、サインアップとオンボーディング ファネルに重点を置いています。 テストするボリュームが十分にあるだけでなく、これらの目標到達プロセスの小さな改善がビジネスに大きな影響を与える可能性があります.
目標到達プロセスをテストするときは、毎月モニタリングして、目標到達プロセスが着実に改善されていることを確認します。 A/B テストは 1 つの結果を報告する場合がありますが、毎月の KPI は完全には一致しません。
Tableau のようなデータ ウェアハウスとビジネス インテリジェンス ツールをすべて使用することにした場合は、ユーザー分析ツールを完全にスキップできます。 ビジネスがインフラストラクチャ全体を構築する準備ができていない場合、ユーザー分析ツールはその中間の適切なステップであることがわかりました。
クリック後のランディング ページ
広告後のクリックについては、たまたま「A/B テスト」や「ビルダー」を備えたオールインワン ソフトウェアではなく、ランディング ページのエクスペリエンスに特化した専用のソリューションが必要です。 これは特に、各キャンペーンに独自のポスト クリック ランディング ページが必要であり、その過程で各ページを A/B テストする場合に当てはまります。 Instapage は、すべてのキャンペーンのランディング ページの作成をスケーリングするのに役立つだけでなく、A/B テストが組み込まれています。成功を見つけたら、すぐに開始できます。
私のマーケティング プログラムは、常に大量のランディング ページで終わります。 トラフィックが最も多いページの A/B テストを行っていない場合は、収益が見込めません。
ヒートマップ
顧客調査では、「人々の言うことに注目するのではなく、彼らの行動に注目する」という共通のアドバイスがあります。 そのため、ヒートマップは定性的な洞察を得るためのもう 1 つの優れたデータ収集リソースです。 ヒートマップは、人々の行動をよりよく理解するのに最適です。 さらに、それらは非常に理解しやすいです。
ユーザーが何をクリックし、どこまでスクロールし、どこにマウスを移動するかを知ることで、最適化のためのあらゆる種類のアイデアが生まれます。これは、A/B テストのアイデアの宝庫です。
Instapage にはプラットフォームにヒートマップが組み込まれており、クリック後のランディング ページの 3 つすべてを実行できます (下の画像はクリック マップのみです)。
また、メイン サイトでもヒートマップを実行する必要があります。 その場合は、Crazy Egg をお勧めします。
ホームページ、価格設定ページ、オンボーディング フローでヒートマップを実行します。 予想外に多くのクリックを獲得したアイテムや、もっと注目されると思っていたのに注目されなかったアイテムを探します。 次に、人々が気にしないものを強調せずに、人々が望むものを強調するテストのアイデアを思いつきます.
CXL には、ヒートマップの使用方法に関するすばらしいヒントがたくさんあります。
A/B テスト
A/B テストツール自体はどうですか? ホームページ、オンボーディング フロー、および製品をテストするための最適なオプションは何ですか? 私の意見では、VWO:
VWOには、月額199ドルからの堅実なA / Bテスト製品があります. 年間数万ドルを簡単に支払うことができる他のツールと比較して、VWO ははるかにアクセスしやすくなっています。 1ドルあたりの価値は非常に高いです。
VWO を使用すると、複数の分割テストを同時に実行できます。 コードを編集せずに A/B テストを実行できるビジュアル エディターもあります。 見出しなどの要素をテストするのに最適です。 コード エディターを使用して、テストに高度な変更を加えることもできます。 コード エディターは大幅に改善されています。
WordPress A/B テスト
WordPress は世界で最も人気のある CMS ですが、WordPress サイト全体で A/B テストを実行するのは大変です。 プラットフォームは間違いなくこれ用に設計されていません.
そのため、WordPress の A/B テストには Nelio のようなプラグインを使用する必要があります。
注意してください。 このテストを行う前に、サイトを整頓したいと考えています。 すべてをクリーンアップしないと、数え切れないほどのプラグインの競合が発生し、サイトは有効なテストに十分な速さでテスト バリアントを提供できなくなります。 WordPress はサイト全体のテスト用に設計されていないため、A/B テストがプラグイン、テーマ、および不十分に構築されたサイトと競合するのは簡単です.
まず、優れた Web ホストを入手してください。 バリアントの提供を遅らせる低速のホストは、ユーザーが変更に気付くことがないように、最も避けたいことです。 次に、WordPress テーマをクリーンアップし、不要なプラグインを削除します。 これにより、プラグインの競合が減少し、気付かれないように十分に速くテストが提供されます。
WordPress サイトがクリーンアップされ、ロード時間が高速になったら、Nelio をインストールし、それを使用してサイト全体の A/B テストを実行します。 メール購読へのコンバージョンを増やすために、ブログで多くのテストを実行していました。
結論
真の A/B テスト プログラムを効果的に実行するには、一連のツールが必要です。 複数の会社で何百ものツールを自分でテストし、何百ものテストを行った結果、上記のスタックが好きです。なぜなら、それらはデジタル マーケティングのさまざまな領域に焦点を当てており、すべてのカテゴリで「最適」なツールは 1 つもないからです。
検討しているホットな新しいツールがある場合は、これらのいずれかを自由に交換してください。 私の一般的なルールは、ユーザー記録や調査ツールのように、開始と停止が簡単なツールを頻繁に試すことです。 しかし、分析などのインフラストラクチャ ツールについては、信頼性が高く、何年も頼りにできるものを選びます。
著者について
Lars は現在、QuickSprout の CEO です。 それ以前は、I Will Teach You To Be Rich および KISSmetrics で成長担当ディレクターを務めていました。