ポップアップのA/Bテスト：ポップアップをより効果的にする方法

ポップアップはいたるところにあります。

Amazon、Pinterest、Adidasなどの最大のブランドのいくつかはポップアップを使用しています。 実際、それらを逃れるのはかなり難しいです。

今日は少なくとも半ダース見たと思います。 残念ながら、人気があるのはポップアップだけではありません。 最高のポップアップを作成するための「ハック」も同様に横行しています。

これが重要です：あなたはあなたの競争のために働いたことから絶対に学ぶことができます、しかし盲目的な信仰はあなたの訪問者を遠ざけてあなたにいくらかの深刻なお金を払うでしょう。

ポップアップ：煩わしさまたは必要性？

CROの専門家やマーケターからいくつかのホットなテイクがあります。

ああ、彼らは吸う。 彼らは絶対的に最悪です-人々は「それを設定し、それを忘れる」と考えるので、それは戦略です。

SpeeroのShivaManjunath

ポップアップは一般的に迷惑です。 ただし、マーケティング担当者はある方法でそれらを作成するため、ユーザーはそれらを煩わしいよりも価値があると感じます。

Spaceliftのプロダクトデザイナー、Arek Nowakowski

しかし、その質問に対する正しい答えは、それが依存するということです。

ポップアップは、他のチャネルと比較して優れた結果をもたらす可能性があります。または、まったく悪い動きになる可能性があります。 ポップアップがある場合とない場合でテストページを分割するまで、確実にわかりません。

ポップアップが悪いラップを取得する本当の理由は、悪いユーザーエクスペリエンスです。 SparkToroのマーケティング担当副社長であるAmandaNatividadが最近経験したことは次のとおりです。

悪いユーザーエクスペリエンスは、次のようなユーザーの行動の変化につながる可能性があります。

そして、彼らが彼らの経験を台無しにするのを防ぐためにポップアップブロッカーをインストールする人々（それがあなたがポップアップを調べるときの理由です、これらの広告ブロッカーはグーグルでとても高いランクにあります）。

ポップアップは依然として煩わしいものになることを認識しておく必要があります。 しかし、彼らは誰にとっても迷惑である必要はありません。

Speero株のShiva：

適切に行われると、それらはターゲットにされ、そして価値があります。 すべての人にサービスを提供すると、全体的なエンゲージメント率と全体的な提出数が増える可能性がありますが、品質は大幅に低下する可能性があります。 また、これらのタイプのポップアップに対する「有害な」影響を追跡する人もいません。

それが他の二次およびガードレールの測定基準に悪影響を与えるかどうかを知る必要があります。

ガードレールメトリックは、違反した仮定について実験者に警告するように設計された重要なメトリックです。 ガードレールの指標は、スピッツァー（2007）が「情報に基づいた行動を起こす能力」と呼んでいるものを提供します。 治療効果によってガードレールの指標が予期せず移動した場合は、結果の信頼性を下げるか、ユーザーや組織に危害が加えられる可能性がある場合は実験を中止することをお勧めします。

Ronny Kohavi、A/Bテストコンサルタント

さまざまなタイプのポップアップ（ポップアップコンバージョン率付き）

史上初のポップアップ広告が1990年代後半にTripodに表示され、その発明者であるEthan Zuckermanは、インターネット上で解き放たれた迷惑行為について謝罪しました。 その激動の歴史を通して、ポップアップはマーケティングのパリアになる段階を経てきました。

もともとは、すべての詐欺サイトに悪用されることに対する輝かしい新しいものと見なされていましたが、ポップアップは、ハンドスピナーよりも早く不明瞭になりました。 ポップアップブラインド（またはバナーブラインド）は、ユーザーがそれらを煩わしいものと見なさなかったことを意味しました。ユーザーはそれを免れ、すぐに無視しました。

ポップアップは、死者の中から復活させ、その煩わしさを諺の利益のために利用することに成功した、精通したA/Bテストマーケターのおかげで新たな命を吹き込みました。

表示されるさまざまな種類のポップアップを次に示します（例とコンバージョン率のベンチマークを含む）。

エントリポップアップ

エントリのポップアップは、Webサイトの訪問者がページにアクセスした直後に表示されます。 ページ全体の表示をブロックするもの（ウェルカムマットポップアップとも呼ばれます）もあれば、画面の中央（ライトボックス）に表示されるものもあります。 たとえば、Wishpondはこれら両方のタイプを次々に使用します。

これらはユーザーにすぐに行動を起こさせるのに効果的かもしれませんが、これを最初のポップアップに設定すると、ユーザーが即座にバウンスする可能性もあります。

ここでの秘訣は、マイクロコミットメントを使用することです。

マイクロコミットメントは、メールのオプトインエンゲージメント率に大きな影響を与える可能性があります。 ユーザーに[はい]をクリックするだけで割引を受けられます。 その小さなはいの後、彼らは無意識のうちに彼らが興味を持っているに違いないと信じており、彼らがポップアップに従事し続けるので一貫性を保ちたいと思うでしょう。 これにより、フォームに記入する際の摩擦が少なくなり、より多くの賛同と意思決定の頭脳が必要になります。 それはコミットメントと一貫性の原則です。

EnaviのCEO兼創設者であるAnthonyMorgan

クリックでアクティブ化されたポップアップ

これらのポップアップは、ユーザーがリンクをクリックすると表示されます。 それらははるかに邪魔にならず、しばしば役に立ちます。

たとえば、AmazonのAlexaの製品ページを見てください。 「Alexaで何ができるかを確認」をクリックすると、詳細情報を含むポップアップが表示されます。

ソース

クリック起動ポップアップは、買い物客が自由に探索し、必要なときに詳細情報を提供できるため、eコマースストアではかなり一般的です。

終了意図のポップアップ

これらのポップアップは、訪問者がサイトを離れようとしたときにトリガーされます。アヴェマリアは、カートを放棄する前にコンバージョンを達成します。

モバイルでは、誰かがすばやく上にスクロールするか、戻るボタンを押すと、これらがトリガーされます。 Elauzは、ランディングページを離れようとする初めての買い物客に15％の割引を提供します。

時限ポップアップ

時間指定のポップアップは、指定された期間が経過した後にのみ訪問者に表示されます。 そのメッセージをどのくらい後に表示する必要がありますか？ 繰り返しますが、これはA/Bテストを行う必要があるものです。

相撲からのこのポップアップは良い例です。 投稿を少し読んだ後に表示されます。

どのタイプのポップアップがより適切に変換されますか？

最新のコンバージョン調査が終了しました。

Sumoは2019年に20億のポップアップ例を分析し、これが彼らが見つけたものです：

• 最高のパフォーマンスを発揮するポップアップの上位10％で、平均コンバージョン率は9.28％でした。
• 100ブランドのうち3ブランドで、コンバージョン率が11％を超えるポップアップが表示されました
• すべてのポップアップのコンバージョン率は平均3.09％でした

注：トラフィックの多いサイトでは、コンバージョン率が低下します。 したがって、3.09％は少数のように見えるかもしれませんが、100,000人の訪問者が3,000回のコンバージョンを獲得できます（これはまったく悪いことではありません）。

TestGuideの創設者兼CEOであるDaveEvangelistiの実際の例を次に示します。

あるウェブページでは、「計算されたコンバージョン率」（特定のページにユーザーを集めることに基づく目標）を1.38％増やすことができました。 これは重要ではないように聞こえるかもしれませんが、何千人もの人々がいる場合、1.38％が実際に針を動かすことができます。

Sleeknoteは、2020年に10億を超えるポップアップを精査し、次のように発見しました。

• 画像のあるポップアップのコンバージョン率は3.80％でしたが、画像のないポップアップのコンバージョン率は2.07％でした。
• 8秒の遅延後に表示されるように設定されたポップアップの変換率は3.62％であり、前後に表示されるポップアップよりも変換率が高くなっています。
• 2つの入力フィールドを持つポップアップは3.31％と高いコンバージョン率を示しました。これは、1.08％のコンバージョン率を持つ3つのフィールドを持つポップアップと比較して優れていました。

Sleeknoteと同様に、OptiMonkは2021年にユーザーのポップアップを分析して、調査結果を公開しました。

• 平均コンバージョン率は11.09％でした
• ポップアップの上位10％の平均コンバージョン率は42.35％でした
• デスクトップの平均コンバージョン率は9.69％、モバイルの平均コンバージョン率は11.07％でした。
• カート放棄ポップアップのコンバージョン率は17.12％でした

注：これらのベンチマークは、テストされた独自の調査と形成された仮説に基づいており、直接比較するために使用することはできません。 しかし、これらの結果は、どの要素をテストする必要があるかについてのより良い洞察を与えることができます（以下でより詳細に掘り下げます）。

A / Bテストポップアップ：実行する必要がありますか？

2つの仮定を捨てるようにお願いしています。

1. ポップアップがあなたの業界や競合他社のために機能するからといって、自動的にポップアップがあなたのために機能することを意味するわけではありません。
2. 何かがうまくいくからといって、それが改善できないという意味ではありません。

確実に知るには、ポップアップをA/Bテストする必要があります。

これは相撲の例で、相撲がどれだけの違いを生むことができるかを示しています。

バージョンBは、すべての「ベストプラクティス」に従っているため、パフォーマンスが向上していると思われるかもしれませんが、実際には、最初のポップアップのパフォーマンスが30％向上しています。

ポップアップのA/Bテストと分割テストとは何ですか？

A / Bテストでは、1つ以上の要素への変更をテストできます。 要素を追加、削除、または変更し、変更を追跡して、それらがどのようにコンバージョンを促進するかを確認できます。

ポップアップをA/Bテストするときは、ほぼ同じバージョンを2つ作成し、バリアント（またはチャレンジャー）を元の（コントロール）と比較します。

ほとんどの人は分割テストとA/Bテストを混同していますが、これらは2つのまったく異なるコンバージョン率の最適化手法です。

分割テストまたは分割URLテストでは、トラフィックを均等に分割して、異なるURLでホストされている2つのまったく異なるバージョンに訪問者を送信します。 これは、どのバージョンが最高のパフォーマンスを発揮するかを特定するのに役立ちます。

ポップアップが適切かどうかを理解したい場合は、分割テストが最適な方法です。 同じメリットと価値を提供するために、コピーやキューなどの要素を組み合わせたポップアップが他のページに積み重ねられた1つのページ。

マークス＆スペンサーを例にとってみましょう。 ポップアップを使用してメーリングリストを作成する代わりに、ページの下部に訪問者が購読できるセクションがあります。

ポップアップが訪問者を怖がらせていないことがわかった場合は、一度に1つの変更を加えて、一連の実験を通じてA / Bテストの効果を分離し、ビジネスに何が役立つかを学習します。

BreezeのGrowthHackerであるFaizanFahimは、A/Bテストのポップアップでよくある間違いを避けることを推奨しています。

• 同じポップアップを2回表示しないでください。 ユーザーがポップアップを一度無視して閉じたため、ユーザーを侮辱していますが、Webサイトには同じポップアップが表示されています。
• ポップアップを、訪問者が表示しているページに関連付けられるようにします。
  
  
  • 訪問者がカートページにいる場合は、割引を表示します。
  • 訪問者が比較ページを表示している場合は、「トライアルの開始」ポップアップを表示します。
  • 訪問者が記事を長時間読んでいる場合は、購読ポップアップを表示します。

SpaceliftのプロダクトデザイナーであるArekNowakowskiは、別のよくある間違いに対して警告しています。

フェスティバルやイベント中にA/Bテストを実行することは避けてください。 お祭りや休日を中心にお客様の行動は変化します。 ビジネスが通常のときにすべてのA/Bポップアップテストを実行します

ポップアップA/Bテスト：変更するさまざまな要素

コンバージョン調査を終了する限り、ポップアップのほぼすべての要素をテストできます。

テスト計画を開始する前に、ユーザーの行動を調査し、レビューをマイニングし、チケットをサポートし、訪問者のリプレイを監視し、現在のメトリックを分析します。 これはあなたの仮説の基礎を形成するので、あなたはあなたのビジネスを傷つける可能性のある変更を恣意的に行っていません。

とはいえ、A / Bテストされる最も一般的な要素は、コピー、トリガー、配置、CTAテキスト、およびさまざまな種類のポップアップです。

トリガーの時間

Sleeknoteの調査によると、8秒が目標とするスイートスポットですが、テストしない限り、確実に知ることはできません。

しかし、ほとんどの専門家は1つのことに同意しているようです。訪問者がページにアクセスしたらすぐに、ポップアップを表示するのは良い考えではありません。

時間ベースのトリガーは、他のユーザーを怒らせずに、適切なユーザーをターゲットにしていることを確認するためのAグレードの方法です。

シヴァ・マンジュナス、スペロ

Wise Popの顧客の1人は、次のポップアップを使用して3つの異なる遅延（10、20、および40秒）をテストしました。

彼らのテストでは、オファーを表示するのに最適な時間は10秒後であることが明らかになりました。

遅延が長くなると、ポップアップが表示される人が少なくなるため、サブスクリプション率は高いものの、収集される電子メールの数は多くありませんでした。

誤検知の餌食にならないように注意してください。 ガイドを読んで、A / Bテストの結果を正しく解釈し、改善するのに役立ててください。

位置

ポップアップをページの先頭に配置する必要がありますか？ウェルカムマットを使用して画面全体またはライトボックスを覆いますか？

ソース

または、ページの横にあるポップアップや、邪魔にならないスクロールインポップアップを試してみてください。

ブログ記事でスクロールトリガーポップアップを使用することは、ユーザーにコンテンツの詳細を読むように説得するための良い方法です。 これにより、ニュースレターに参加するように人々を説得できます。ニュースレターには、役立つヒントや最新のブログコンテンツへのリンクが含まれています。

BarBendの最高マーケティング責任者（CMO）、Josh Pelletier

Getsitecontrolのページには、ページの表示をブロックしない2つの邪魔にならないポップアップがあります。

PSポップアップの位置を考えるときは、モバイルとデスクトップのエクスペリエンスも考慮に入れる必要があります。 Sleeknoteは、モバイルポップアップがデスクトップ（3.11％）と比較してコンバージョン（5.8％）を増加させることを発見したため、モバイルに細心の注意を払ってください。

携帯電話のポップアップは、利用可能な画面領域やモバイルユーザーエクスペリエンスの他の側面を考慮して設計する必要があります。

VPNoverview、デジタルマーケティングマネージャー、Veronica Miller

コピー

適切なコピーを使用すると、顧客に行動を起こさせたり、試みを完全に無視したりすることができます。

コピーは非常に重要であり、針を数パーセント移動させることができます。 私たちは常に異なるコピーを試します。 ポップアップブロッカーの見出しとテキストを変更し、30％の改善に達しました。 サインアップが必要になる可能性のある予約を無効にする、より積極的な停止ポップアップから、ソーシャルプルーフとルームメイトファインダーアプリがもたらす価値を強調するポップアップに移行しました。

Diggz.co、CEO兼創設者、Rany Burstein

コピーの見出しを変更したり、長さを変更したり、パワーワードを使用したりすることで、マイクロ実験を実行できます。

Paperbellで、Laura Roder（創設者）は、見出しが最大のリフトがある場所であることに気づきました。

ヒートマップとクリックマップを使用して、訪問者がコピーをどのように操作し、何が注目を集めるかを知ることができます。

学習できるもう1つの例は、eコマースマーケティングエージェンシーであるContrastからのものです。

コントラストのクライアントのために、マイクロイエス仮説の周りにランディングページ固有の電子メールポップアップを実行しました。

ほとんどの店舗では、「メールを送信するとx％オフになります」などのポップアップが表示されます。 このアイデアをテストするために、別のバリアントを実行したかったのです。 人間の心理学を利用するように言い回しを変更しました。

次のメッセージを実行しました：「今日の注文を20％節約しますか？」 誰がこれにノーと言うのでしょうか？

これを実現するために、2つのボタンがあります：はい/いいえ

–はい、次のステップに進んで電子メール情報を入力します。

–いいえ、ポップアップを閉じます

このA/Bテストにより、メールオプション率を3.3％の収集から9.1％に引き上げることができました。 」

エリオット・デビッドソン、コントラストの創設者兼ディレクター

オファー

オファーのさまざまな割引、リードマグネット、および配送情報を比較します。

ウェブサイトへのアクセス時にポップアップを介してリピーターに送料無料を提供することをテストしたところ、そのターゲットオーディエンスのeコマースコンバージョン率が73％向上したことがわかりました。 適切なオファーと適切なオーディエンスを組み合わせることが重要です。ポップアップが共鳴するだけでなく、ポップアップが収益に積極的に貢献するためにも重要です。 オファー戦略は、必ずしも価格ベースである必要はありません。 FSA / HSAページでは、FSAまたはHSAカードを使用して製品を購入する方法の詳細をお客様が要求できるように、6％のサインアップ率があります。

Medcline.comのCRO、Jonathan Finegold

OptiMonkの顧客であるSwissWatchExpoは、カート放棄コピーの2つのバージョンを作成して、どのメッセージが望ましい結果をもたらすかを確認しました。

バージョンAは、最後のアイテムが利用可能であり、コンバージョン率が17％増加したことをユーザーに知らせることで、FOMOを呼び出しました。

バージョンBは、割引とわずかに異なるメッセージを提供し、30％以上のコンバージョン率をもたらしました。

召喚状（CTA）

召喚状ボタンの色、コピー、サイズ、配置をテストできます。

CTAのコピーを確認することが特に重要な場合があります。 提供しているものとCTAの間に断絶がある場合、ユーザーはコンバージョンに至る可能性が低くなります。

下のポップアップで、「はい、ヒントを送ってください」ではなく「購読」と表示されている場合はクリックしますか？

おそらくそうではありません。 CTAが約束と一致していることを確認してください。 そして、あなたはこれを衝撃と畏怖の機会として使うことができます。

Klientboostのニュースレター登録フォームをご覧ください。

通常の「購読」の代わりに、「これを後悔するかもしれない」が注目を集めています。

また、ユーザーがポップアップを閉じるために使用するテキストを追加またはテストすることもできます。

「無料の拡張機能を拒否します」をクリックすると、ユーザーに無料の拡張機能を試すように求めるCoScheduleの終了インテントポップアップを閉じることができます。

製品ページで終了意図のポップアップをテストし、独自のクーポンコードで追加の割引を提供し、7％のサインアップ率を見つけました。 この場合、オファー戦略は大きな影響を及ぼし、10％オフのクーポンが2回以上実行され、送料無料のクーポンオファーも実行されました（オファーの電子メールの開封率も18％増加しました）。

Medcline.comのCRO、Jonathan Finegold

ゲーミフィケーション

ゲーミフィケーションされたポップアップは、ユーザーが報酬と引き換えに行動を起こすように動機付けます。

Optimonkの調査によると、「ラッキーホイール」または幸運のホイールのコンバージョン率は13.23％でした。

しかし、そこで止まる必要はありません。 カードのポップアップを「ギフトを選ぶ」または「スクラッチする」こともできます。

ソース

ソース

Medclineは、従来の「ニュースレターへの登録」オファーと比較して、懸賞を実行することにより、キャプチャ率を12％向上させることができました。

もう1つの優れた例は、これらの結果の後にクライアントにゲーミフィケーションされたポップアップのみを使用するRossKernezからのものです。

2種類のゲーミフィケーションポップアップをテストしました。 1つは、賞品のポップアップを獲得するためにホイールを回転させることであり、もう1つは、10ユーロのバウチャーを獲得したかどうかを確認するためにボックスを選択することでした。

以前の最高のコンバージョン率は8％でした。 ゲーミフィケーションされたポップアップのいずれかをテストしたところ、コンバージョン率は最低14％に跳ね上がりました。

オンライン戦略のチーフコンサルタント、Ross Kernez-Ross Kernez Consulting

ポップアップをA/Bテストするときに追跡するのに最適な指標

A / Bテストのアイデアでは、これらの結果を達成した方法と理由の両方を理解する必要があるため、テストの勝者または敗者を額面どおりに受け取ることはできません。

そこで、メトリックが役立ちます。

メトリックは、ビジネス目標に対するA/Bテストの影響を測定するのに役立つ単一のデータ型です。

しかし、どの方法で追跡するかを決定しますか？

追跡する必要があるものもあれば、ポップアップの種類に依存するものもあります。

ポップアップの種類（eコマースや電子書籍などのクーポン）に応じて、できるだけ上流の指標にアクセスするようにしています。 常に「トリガー」率を追跡する必要があります（これがエンゲージメント指標の分母になるため）。 ただし、「ポップアップクローズ」や「送信率」などを追跡することは非常に重要です。 それをヒートマップ/セッション記録のトリガーで創造的にすることと組み合わせると、より多くの洞察が得られます！ ノイズでトリッキーになりますが、出口率などのボーナスポイント（たとえば、ポップアップを見た人を含めない限り、出口率は適切に定義されない場合があります）。

シヴァ・マンジュナス、スペロ

社内のA/Bテストの専門家であるKarimNaufalは、一般的な指標が引き続き適用されることに同意しています。

はい、コンバージョン率は、たとえばポップアップボタン自体、および終了Xについて測定する必要があります。ただし、バウンス率またはドロップオフ率を測定することは適切です（フラストレーションが発生しますか？）。 また、ポップアップを閉じるまでの時間を測定することもおそらく関連性があります（どのくらいの関心を獲得しましたか？）。

カートに追加などの他のクリックメトリックは、洞察に満ちたままです。 しかし、追跡するのに最適なのは、収益を測定する誰もが認める訪問者あたりの収益メトリックです。これには、コンバージョン率と平均注文額に関する情報が含まれています。

ユーザーエンゲージメントを測定するもう1つの非常に便利な指標は、ユーザーあたりのセッション数です。

しかし、Medcline.comのCROであるJonathan Finegoldは、収益を追跡する必要があるとは考えていません。その理由は次のとおりです。

私たちのブログの場合、収益は主要なKPIではありません。登録率は、オーガニックトラフィックからの電子メールキャプチャを最大化することを目標としているためです。 同様に、eコマースの設定でも、マージンではオファーが不採算である可能性があるため、収益が常に最良のメトリックであるとは限りません。したがって、適切なKPI、この場合は、マージンドルの変化率である可能性があります。

簡単に言うと、A/Bテストまたは分割テストのポップアップを表示するときに確認する必要がある指標は次のとおりです。

• 変換速度
• クリック率
• バウンス率
• ドロップオフ率
• ユーザーあたりのセッション
• カートに追加
• 訪問者1人あたりの収益
• ポップアップが閉じました
• 提出率

GoogleアナリティクスとShopifyをConvertなどのA/Bテストプラットフォームに接続して、これらすべての指標を正確に測定します。

そのプロセスがどのように見えるかの例を次に示します。

たとえば、ポップアップがユーザーを引き付けるまでの時間をテストする場合、ヒートマップとGoogle Analyticsデータを調べて、ユーザーがポップアップを閉じる速度を見つけます。

15秒以内であれば、約86％の閉鎖率が得られ、バウンス率の増加にも貢献していることがわかりました。 ポップアップのタイミングがユーザーがサイトにアクセスしてから15〜45秒の間にある場合、閉鎖率は61％に低下し、バウンス率は14％低下しました。

時間を1分に設定すると、クロージャ率がさらに5％低下し、バウンス率が6％低下しました。 さらに、1分が設定時間である場合、CTAボタンとの相互作用は40％増加しました。 他の2つの間隔では、CTAクリック率にほとんどまたはまったく変化が見られませんでした。

CTAボタン内のテキストをテストしている場合は、CTAのCTR％を確認します。 時間修飾子を使用してより直接的で具体的な言語を使用すると（例：現在、今日）、クリック率が14％増加しました。

CircleIt Inc.、成長マーケティング責任者、Joe Karasin

あなたが考えていなかったかもしれないもう一つの測定基準はあなたのビジネスに重大な影響を与える可能性があります。それはページ速度です。

A/Bテストのポップアップを追跡するのに最適な指標はページ速度です。

gifやビデオが埋め込まれたポップアップがページの速度を低下させても驚かないでください。 ポップアップはページと同じHTTPリクエストから読み込まれ、ページの速度に影響します。

ウォーターフォールチャートを分析することで、ページ上のポップアップの影響を計算できます。 Pingdom Testでページのバリエーションを実行し、ページ速度を比較します。 読み込み速度に大きな違いがある場合、テストはすでに失敗しています。ブラウジングエクスペリエンスがコンバージョン率に大きく影響するため、ウェブサイトの読み込み速度はポップアップの前に表示されます。

Arek Nowakowski、プロダクトデザイナー@ Spacelift

注：ガードレールの指標については前に簡単に説明しましたが、ポップアップをテストするときはそれらを覚えておくことが重要です。 これらは、パフォーマンスの低下がビジネスに大きな影響を与える可能性があるため、テスト時に低下させたくないコアメトリックです。

ポップアップをA/Bテストするときに留意するためのガイドライン

ポップアップのA/Bテストを開始する準備ができたら、次の推奨事項に従って、ポップアップの有効性を向上させます。

• テスト前の計算を実行して、適切なサンプルサイズであることを確認します。
  十分な数の人々のグループでテストを実行しないと、誤検知が本物であると信じるなど、間違いを犯すリスクがあります。 テスト前の計算を行って、考えている調整のサイクルを実行するための足がかりがあるかどうかを確認します。
  
  ヒント： A / Bテスト計算機を使用して、有意性、p値、検出力、サンプルサイズ、およびMDEの計算を実行します。
• トラフィックの多いサイトでは、小さなMDEを使用して多数の微細な変更を計画します。
  トラフィックが多い場合は、小さなMDE（最小検出可能効果）を使用して、微細な変化の完全なリズムをプロットできます。 ほとんどのポップアップ実験では、1桁の伸びしかありません。 したがって、このアプローチは、小さな変更がKPIの対応する調整にどのように関連するかを理解するのに役立ちます。 トラフィックが多いほど、検出できるリフトは小さくなり、結果を確認できます。
  
  注： MDEは、観察する価値のある最小の効果サイズであり、その下では、新しいバリアントを実装するためのコストや労力は価値がありません。
• ポップアップのパフォーマンスが良くない場合は、変更を組み合わせてください。
  ポップアップが重要視されていない場合は、いくつかの変更を組み合わせて、より大きなMDEで一度に展開します。 また、十分なトラフィックがない場合は、重要性に到達するために必要なトラフィックが少なくなるため、良い考えです。 改善の試みは、おそらく2桁の具体的な改善につながるはずであると想定されています。
• 最適化すればするほど、誤検知に注意してください。
  誤検知またはタイプIのエラーは、実際には何もないのに、コントロールとバリアントの間に違いがあることを示します。 それらを持つ可能性を実際に減らす1つの方法は、最初に上記のサンプルサイズ計算機を使用することです。
  
  ヒント：ミッションクリティカルな実験の場合、信頼水準を99％に設定して、このようなエラーが発生する可能性を1％に減らします。
  
  ポップアップが最適化されるほど、誤検知を無視するように注意する必要があります。

ConvertExperiencesアプリでポップアップをテストするA/B

Convertを使用すると、ストアのポップアップをA / Bテストし、上記のポップアップ要素のいずれかを変更して、サイトのコンバージョン率が向上するかどうかを確認できます。

一番良いところ？ UXチームの助けを借りずに、カスタムポップアップを追加できます。

ビジュアルエディタを使用して既存のポップアップをA/Bテストします

あなたのウェブサイトは稼働していて、Shopifyオンラインストアへの訪問者はあなたのホームページにアクセスしています。 では、ここからどこへ行くのでしょうか。

ステップ1：新しいコンバージョンエクスペリエンスを作成します。

ステップ2：ポップアップを含むShopifyストアのURLをロードします。

ステップ3：マウスでポップアップをクリックすると、アクションを実行してその形式を変更するためのビジュアルエディターメニューが表示されます。

変更のプレビューが完了したら、ビジュアルエディター内から[ライブプレビュー]オプションを使用して、新しいポップアップがどのように表示されるかを確認します。

これは新しいルックアンドフィールです。

新しいフォーマットに慣れたら、Shopify訪問者のエクスペリエンスをアクティブにして、2つのうちどちらがパフォーマンスが優れているかを確認します。

ConvertCustomEditorsを使用してバリエーションにポップアップを追加する

Shopifyテンプレートの一部ではないポップアップオファーをホームページに含めたい場合でも、心配はいりません。

カスタムCSS+HTML + JSエディターの変換を使用して追加し、A/Bテストを行うことができます。

ステップ1：新しいコンバージョンエクスペリエンスを再度作成します。

ステップ2：ポップアップを含めるShopifyストアのURLをロードします。

ステップ3：カスタムCSSおよびカスタムJavascriptオプションを使用して、ポップアップJavaScriptコードを追加します（オンラインで利用可能な多くのテンプレートを見つけるか、独自のコードを作成できます）。

この例では、https：//github.com/beeker1121/exit-intent-popupで利用できるポップアップを使用しました。

ステップ4：次に、変更を適用して保存します。

変更のプレビューが完了したら、ビジュアルエディター内から[ライブプレビュー]オプションを使用して、新しいポップアップがどのように表示されるかを確認します。

新しいポップアップに慣れたら、Shopifyの訪問者のエクスペリエンスをアクティブにして、オファーが違いを生むかどうかを確認します。

ポップアップは、A / Bテストを行わない場合にのみ、煩わしく、煩わしく、効果がありません。

データは、適切な使用、配置、タイミング、およびコピーにより、ポップアップを意味のあるアクションを推進する効果的な方法にすることができることを示しています。 実際、興味深い発見の1つは、ポップアップでオファーを使用したときに、他の点では同じであるWebサイト上の他のCTAよりも多くのインタラクションを受け取っていることがわかりました。

CircleIt Inc.、成長マーケティング責任者、Joe Karasin

「設定して忘れる」戦略から離れ、A/Bテストを採用します。

実験は、ユーザーが戦略にどのように反応し、調整を行い、望ましい結果をもたらすかを特定するのに役立ちます。

A / Bテストの際に人々が犯す間違いを避け、Convertのような適切なテストプラットフォームを選択する限り、顧客とブランドにとって双方にメリットのある状況を作り出すことができます。