Pop-up Pengujian A/B: Cara Membuat Pop-Up Anda Jauh Lebih Efektif

Pop-up ada di mana- mana .

Beberapa merek terbesar seperti Amazon, Pinterest, dan Adidas menggunakan pop-up. Bahkan, sangat sulit untuk melarikan diri dari mereka.

Kami berani bertaruh Anda melihat setidaknya setengah lusin hari ini. Sayangnya, pop-up bukan satu-satunya hal yang populer. "Peretasan" untuk membuat pop-up terbaik sama-sama merajalela.

Begini masalahnya: Anda benar-benar dapat belajar dari apa yang berhasil untuk pesaing Anda, tetapi keyakinan buta akan membuat pengunjung Anda pergi dan menghabiskan banyak uang.

Pop-Up: Gangguan atau Kebutuhan?

Kami memiliki beberapa hal menarik dari pakar dan pemasar CRO:

Oh, mereka menyebalkan. Mereka adalah yang terburuk – KARENA orang berpikir 'atur dan lupakan' adalah sebuah strategi .

Shiva Manjunath di Speero

Pop-up umumnya mengganggu. Namun, seorang pemasar menciptakannya dengan cara tertentu, sehingga pengguna menganggapnya lebih berharga daripada mengganggu .

Arek Nowakowski, Desainer Produk di Spacelift

Tetapi jawaban yang tepat untuk pertanyaan itu adalah bahwa itu tergantung.

Pop-up dapat memberikan hasil yang bagus dibandingkan dengan saluran lain atau menjadi langkah yang benar-benar buruk bagi Anda. Anda tidak akan tahu pasti sampai Anda membagi halaman pengujian dengan dan tanpa pop-up.

Alasan sebenarnya pop-up mendapatkan reputasi buruk adalah pengalaman pengguna yang buruk. Inilah yang dialami Amanda Natividad, VP Pemasaran di SparkToro baru-baru ini:

Pengalaman pengguna yang buruk dapat menyebabkan perubahan perilaku pengguna seperti ini:

Dan orang-orang memasang pemblokir pop-up untuk mencegah mereka merusak pengalaman mereka (itulah alasan ketika Anda mencari pop-up, pemblokir iklan ini berperingkat sangat tinggi di Google.)

Kita harus mengakui bahwa pop-up masih akan mengganggu. Tetapi mereka tidak harus mengganggu semua orang .

Shiva di Speero berbagi:

Ketika dilakukan dengan benar, mereka ditargetkan, MAKA menjadi berharga. Menyajikannya kepada semua orang mungkin memiliki tingkat keterlibatan dan pengiriman keseluruhan yang lebih tinggi, tetapi kualitasnya kemungkinan akan jauh lebih sedikit. Dan tidak ada yang pernah melacak efek 'merugikan' pada jenis pop-up tersebut .

Anda harus tahu bagaimana dan apakah itu berdampak buruk pada metrik sekunder dan pagar pembatas lainnya.

Metrik pagar pembatas adalah metrik penting yang dirancang untuk memperingatkan pelaku eksperimen tentang asumsi yang dilanggar. Metrik pagar pembatas memberikan apa yang disebut Spitzer (2007) sebagai “kapasitas untuk memicu tindakan berdasarkan informasi.” Saat efek Perlakuan tiba-tiba memindahkan metrik pagar pembatas, Anda mungkin ingin mengurangi kepercayaan pada hasil, atau menghentikan eksperimen dalam kasus yang dapat membahayakan pengguna atau organisasi .

Ronny Kohavi, konsultan pengujian A/B

Berbagai Jenis Pop-up (dengan Tingkat Konversi Pop-Up)

Iklan pop-up pertama kali muncul di Tripod pada akhir 1990-an dan penemunya, Ethan Zuckerman, telah meminta maaf atas gangguan yang ditimbulkannya di internet. Sepanjang sejarahnya yang bergejolak, pop-up telah melalui fase menjadi paria pemasaran.

Awalnya dilihat sebagai hal baru yang mengilap untuk disalahgunakan oleh setiap situs web scammy, pop-up tenggelam ke dalam ketidakjelasan lebih cepat daripada pemintal gelisah. Kebutaan pop-up (atau kebutaan spanduk) berarti bahwa pengguna tidak melihatnya sebagai gangguan—mereka menjadi kebal terhadapnya dan segera mengabaikannya.

Pop-up mendapatkan kehidupan baru berkat pemasar pengujian A/B yang cerdas yang telah berhasil membangkitkan mereka dari kematian dan menggunakan gangguan mereka untuk kebaikan pepatah.

Berikut adalah berbagai jenis pop-up yang akan Anda temui (dengan contoh dan tolok ukur tingkat konversi):

Masuk Pop-up

Munculan entri ditampilkan kepada pengunjung situs web segera setelah mereka mendarat di halaman. Beberapa memblokir seluruh halaman dari tampilan (juga dikenal sebagai pop-up tikar selamat datang) sementara yang lain muncul di tengah layar (lightbox). Misalnya, Wishpond menggunakan kedua jenis ini satu demi satu:

Meskipun ini mungkin efektif untuk membuat pengguna mengambil tindakan segera, menyetel ini menjadi pop-up pertama juga dapat menyebabkan pengguna langsung terpental.

Triknya di sini adalah dengan menggunakan komitmen mikro.

Komitmen mikro dapat berdampak besar pada tingkat keterlibatan keikutsertaan email Anda. Dapatkan pengguna untuk cukup mengklik ya untuk menerima diskon. Setelah ya kecil itu, mereka secara tidak sadar percaya bahwa mereka pasti tertarik dan ingin tetap konsisten saat mereka terus terlibat dengan pop-up. Ini menciptakan lebih sedikit gesekan bagi mereka untuk mengisi formulir yang membutuhkan lebih banyak dukungan dan kekuatan otak pengambilan keputusan. Ini adalah prinsip komitmen dan konsistensi .

Anthony Morgan, CEO dan Pendiri Enavi

Pop-up yang diaktifkan dengan klik

Pop-up ini muncul ketika pengguna mengklik tautan. Mereka jauh lebih tidak mengganggu dan sering membantu.

Ambil halaman produk Amazon untuk Alexa misalnya. Ketika Anda mengklik "lihat apa yang dapat dilakukan Alexa", sebuah pop-up dengan informasi lebih lanjut muncul.

Sumber

Pop-up yang diaktifkan dengan klik cukup umum di toko eCommerce karena memungkinkan pembeli untuk menjelajah sesuka hati dan menawarkan lebih banyak informasi saat mereka membutuhkannya.

Munculan niat keluar

Pop-up ini terpicu ketika pengunjung mencoba meninggalkan situs Anda—Salam Maria untuk membuat mereka berkonversi sebelum mereka meninggalkan keranjang mereka.

Di ponsel, ini dipicu ketika seseorang dengan cepat menggulir kembali atau menekan tombol kembali. Elauz menawarkan diskon 15% untuk pembeli pertama kali yang mencoba meninggalkan halaman arahan.

Pop-up berjangka waktu

Munculan berjangka waktu hanya muncul kepada pengunjung setelah jangka waktu tertentu. Seberapa cepat Anda harus menunjukkan pesan itu? Sekali lagi, itu adalah sesuatu yang harus Anda uji A/B.

Pop-up dari Sumo ini adalah contoh yang bagus. Itu muncul setelah Anda menghabiskan sedikit waktu membaca posting.

Jenis Pop-up Mana yang Berkonversi Lebih Baik?

Studi konversi terbaru telah selesai!

Sumo menganalisis 2 miliar contoh pop-up pada tahun 2019 dan inilah yang mereka temukan:

• 10% teratas dari pop-up berperforma terbaik mendapatkan rata-rata rasio konversi 9,28%
• 3 dari 100 merek memiliki pop-up dengan tingkat konversi di atas 11%
• Tingkat konversi untuk semua pop-up rata-rata mencapai 3,09%

Catatan: Tingkat konversi turun untuk situs dengan lalu lintas besar. Jadi, meskipun 3,09% mungkin tampak seperti angka yang kecil, 100.000 pengunjung dapat memberi Anda 3.000 konversi (yang tidak buruk sama sekali.)

Berikut adalah contoh nyata dari Dave Evangelisti, Pendiri & CEO, TestGuide:

Di satu halaman web, kami dapat meningkatkan "Rasio Konversi Terhitung" kami (ini adalah sasaran berdasarkan menyalurkan orang ke halaman tertentu) sebesar 1,38%. Meskipun ini mungkin tidak terdengar signifikan, dengan ribuan orang, 1,38% benar-benar dapat menggerakkan jarum .

Sleeknote meneliti lebih dari satu miliar pop-up pada tahun 2020 dan inilah yang mereka temukan:

• Pop-up dengan gambar memiliki tingkat konversi 3,80% sementara pop-up tanpa gambar memiliki tingkat konversi 2,07%.
• Pop-up yang disetel untuk muncul setelah penundaan 8 detik memiliki tingkat konversi 3,62% dan dikonversi lebih baik daripada pop-up yang ditampilkan sebelum atau sesudah
• Pop-up dengan dua bidang input melihat tingkat konversi yang lebih tinggi sebesar 3,31% yang lebih baik dibandingkan dengan pop-up dengan tiga bidang yang memiliki tingkat konversi 1,08%

Seperti Sleeknote, OptiMonk menganalisis pop-up penggunanya pada tahun 2021 untuk mempublikasikan temuannya:

• Tingkat konversi rata-rata adalah 11,09%
• 10% teratas pop-up memiliki tingkat konversi rata-rata 42,35%
• Tingkat konversi rata-rata untuk desktop adalah 9,69% dan 11,07% untuk seluler
• Munculan pengabaian keranjang memiliki tingkat konversi 17,12%

Catatan: Tolok ukur ini berasal dari penelitian asli dan membentuk hipotesis yang diuji dan tidak boleh digunakan untuk perbandingan langsung. Tetapi hasil ini dapat memberi Anda wawasan yang lebih baik tentang elemen mana yang harus Anda uji (kami akan membahas lebih detail di bawah).

Pop-up Pengujian A/B: Haruskah Anda Melakukannya & Bagaimana?

Kami meminta Anda untuk membuang dua asumsi:

1. Hanya karena pop-up bekerja untuk industri atau pesaing Anda, tidak secara otomatis berarti mereka akan bekerja untuk Anda.
2. Hanya karena sesuatu bekerja, tidak berarti itu tidak dapat diperbaiki.

Untuk mengetahui dengan pasti, Anda harus menguji pop-up A/B.

Berikut adalah contoh dari Sumo untuk menunjukkan seberapa besar perbedaan yang dapat dibuatnya.

Anda mungkin berasumsi bahwa Versi B berperforma lebih baik karena mengikuti semua "praktik terbaik" tetapi pada kenyataannya, pop-up pertama mengungguli 30%.

Apa itu Pengujian A/B & Pengujian Terpisah untuk Pop-up?

Pengujian A/B memungkinkan Anda menguji perubahan pada satu atau beberapa elemen. Anda dapat menambahkan, menghilangkan, atau memodifikasi elemen dan melacak perubahan untuk melihat bagaimana elemen tersebut meningkatkan konversi.

Saat pengujian A/B munculan, Anda membuat dua versi yang hampir identik dan mengadu varian (atau penantang) dengan versi asli (kontrol).

Meskipun kebanyakan orang menggabungkan pengujian split dan pengujian A/B, ini adalah dua teknik pengoptimalan tingkat konversi yang sama sekali berbeda.

Dalam pengujian terpisah atau pengujian URL terpisah, Anda membagi lalu lintas secara merata untuk mengirim pengunjung ke dua versi yang sama sekali berbeda yang dihosting di URL yang berbeda. Ini membantu Anda mengidentifikasi versi mana yang berkinerja terbaik.

Jika Anda ingin memahami apakah pop-up adalah ide yang bagus atau tidak, tes terpisah akan menjadi cara terbaik untuk melakukannya. Satu halaman dengan pop-up yang ditumpuk dengan yang lain dengan campuran elemen seperti salinan dan isyarat untuk memberikan manfaat dan nilai yang sama.

Ambil Marks & Spencer misalnya. Alih-alih menggunakan pop-up untuk membangun daftar email mereka, mereka memiliki bagian di bagian bawah halaman tempat pengunjung dapat berlangganan.

Jika Anda mengetahui bahwa pop-up tidak membuat pengunjung takut, buat perubahan satu per satu untuk mengisolasi efek pengujian A/B melalui serangkaian eksperimen untuk mempelajari apa yang berhasil untuk bisnis Anda.

Faizan Fahim, Growth Hacker di Breeze merekomendasikan untuk menghindari beberapa kesalahan umum saat pengujian A/B munculan:

• Jangan tampilkan pop-up yang sama dua kali. Ini menghina pengguna karena mereka mengabaikan dan menutup pop-up sekali, tetapi situs web masih menampilkan pop-up yang sama.
• Buat pop-up yang berhubungan dengan halaman yang dikunjungi pengunjung.
  
  
  • Jika pengunjung ada di halaman keranjang, tunjukkan diskonnya.
  • Jika pengunjung berada di halaman perbandingan, tunjukkan pop-up 'mulai percobaan' kepada mereka.
  • Jika pengunjung membaca artikel untuk waktu yang lama, tunjukkan pop-up berlangganan kepada mereka.

Arek Nowakowski, Desainer Produk di Spacelift memperingatkan kesalahan umum lainnya:

Hindari menjalankan pengujian A/B selama festival dan acara. Perilaku pelanggan berubah di sekitar festival dan hari libur. Jalankan semua tes pop-up A/B saat bisnis normal

Tes A/B Pop-Up: Elemen Berbeda untuk Diubah

Anda dapat menguji hampir setiap elemen dalam pop-up Anda selama Anda tidak melakukan riset konversi.

Pelajari perilaku pengguna, ulasan tambang, tiket dukungan, tonton tayangan ulang pengunjung, dan analisis metrik saat ini sebelum Anda memulai perencanaan pengujian. Ini akan menjadi dasar hipotesis Anda sehingga Anda tidak sembarangan membuat perubahan yang dapat merugikan bisnis Anda.

Meskipun demikian, elemen paling umum yang diuji A/B adalah salinan, pemicu, penempatan, teks CTA, dan berbagai jenis munculan .

Waktu Pemicu

Penelitian Sleeknote menunjukkan bahwa 8 detik adalah titik manis yang harus Anda tuju, tetapi sekali lagi, Anda tidak dapat mengetahui dengan pasti kecuali Anda mengujinya.

Tetapi sebagian besar pakar tampaknya setuju pada satu hal—bukanlah ide yang bagus untuk menampilkan pop-up kepada pengunjung Anda segera setelah mereka tiba di sebuah halaman.

Pemicu berbasis waktu adalah cara tingkat A untuk memastikan Anda menargetkan pengguna yang tepat tanpa mengganggu yang lain.

Shiva Manjunath, Speero

Salah satu pelanggan Wise Pop menguji 3 penundaan berbeda—10, 20, dan 40 detik—dengan munculan ini:

Pengujian mereka mengungkapkan bahwa waktu terbaik untuk menampilkan penawaran mereka adalah setelah 10 detik.

Penundaan yang lebih lama mengakibatkan lebih sedikit orang yang melihat pop-up sehingga meskipun tingkat berlangganan tinggi, jumlah email yang dikumpulkan tidak.

Pastikan Anda tidak menjadi korban positif palsu. Baca panduan kami untuk membantu Anda menginterpretasikan hasil pengujian A/B dengan benar dan menyempurnakannya.

Posisi

Haruskah Anda menempatkan pop-up Anda di awal halaman Anda, menggunakan tikar selamat datang untuk menutupi seluruh layar atau lightbox?

Sumber

Atau lebih baik lagi, coba pop-up di sisi halaman atau pop-up scroll-in yang tidak terlalu mengganggu?

Menggunakan popup yang dipicu gulir pada artikel blog adalah cara yang baik untuk membujuk pengguna agar membaca lebih banyak konten Anda. Ini akan membujuk orang untuk bergabung ke buletin Anda, yang akan berisi petunjuk bermanfaat dan tautan ke konten blog baru.

Josh Pelletier, Chief Marketing Officer (CMO) di BarBend

Getsitecontrol memiliki dua pop-up yang tidak terlalu mengganggu di halaman mereka yang tidak menghalangi tampilan halaman.

PS Anda juga ingin memperhitungkan pengalaman seluler vs. desktop saat memikirkan posisi pop-up. Perhatikan baik-baik seluler karena Sleeknote menemukan bahwa pop-up seluler meningkatkan konversi (5,8%) dibandingkan dengan desktop (3,11%)

Popup untuk ponsel harus dirancang dengan mempertimbangkan area layar yang tersedia serta aspek lain dari pengalaman pengguna ponsel.

Veronica Miller, Manajer Pemasaran Digital, tinjauan VPN

Salinan

Salinan yang tepat dapat membuat pelanggan Anda mengambil tindakan atau mengabaikan upaya Anda sepenuhnya.

Salinan sangat penting dan dapat menggerakkan jarum beberapa poin persentase. Kami mencoba salinan yang berbeda setiap saat. Kami telah mengubah judul dan teks pemblokir popup kami dan mencapai peningkatan 30%. Kami beralih dari popup stop yang lebih agresif yang meniadakan reservasi yang mungkin harus Anda daftarkan, ke popup yang menyoroti bukti sosial dan nilai yang dapat diberikan oleh aplikasi pencari teman sekamar kami kepada Anda .

Rany Burstein, CEO & Pendiri, Diggz.co

Anda dapat menjalankan eksperimen mikro dengan mengubah judul salinan, memvariasikan panjangnya, atau menggunakan kata-kata kuat.

Di Paperbell, Laura Roder (Pendiri) menemukan tajuk utama adalah tempat kebohongan terbesar.

Anda dapat menggunakan peta panas dan peta klik untuk mempelajari bagaimana pengunjung berinteraksi dengan salinan dan apa yang menarik perhatian mereka.

Contoh lain yang dapat Anda pelajari adalah dari Contrast, agen pemasaran eCommerce:

Kami menjalankan pop-up email khusus halaman arahan untuk klien Kontras di sekitar hipotesis mikro-ya.

Sebagian besar toko menjalankan pop-up seperti "jika Anda memberi kami email Anda, Anda bisa mendapatkan diskon x%". Kami ingin menjalankan varian yang berbeda untuk menguji ide ini. Kami mengubah kata-katanya untuk memasuki psikologi manusia.

Kami menjalankan pesan berikut: "Apakah Anda ingin menghemat 20% untuk pesanan Anda hari ini?". Karena siapa yang akan mengatakan tidak untuk ini?

Untuk mencapai ini, kami memiliki 2 tombol: Ya / Tidak

– Ya, lanjutkan ke langkah selanjutnya untuk memasukkan info email.

– Tidak, tutup pop-up

Melalui pengujian A/B ini, kami dapat mengambil tingkat opsi email dari pengumpulan 3,3% menjadi 9,1%. ”

Elliot Davidson, Pendiri & Direktur Kontras

Menawarkan

Bandingkan berbagai diskon, magnet timbal, dan informasi pengiriman dalam penawaran Anda.

Kami menguji penawaran pengiriman gratis melalui pop-up kepada pengguna yang kembali saat masuk ke situs web dan menemukan peningkatan 73% dalam rasio konversi e-niaga untuk audiens target tersebut. Memasangkan penawaran yang tepat dengan audiens yang tepat sangat penting, tidak hanya agar pop-up beresonansi tetapi juga pop-up yang berkontribusi positif pada laba. Strategi penawaran tidak selalu harus berdasarkan harga. Kami memiliki tingkat pendaftaran 6% di halaman FSA/HSA kami bagi pelanggan untuk meminta informasi lebih lanjut tentang cara membeli produk kami dengan kartu FSA atau HSA mereka.

Jonathan Finegold, CRO di Medcline.com

SwissWatchExpo, pelanggan OptiMonk, membuat dua versi salinan pengabaian keranjang untuk melihat pesan mana yang akan memberikan hasil yang diinginkan.

Versi A memanggil FOMO dengan memberi tahu pengguna bahwa mereka memiliki item terakhir yang tersedia dan melihat peningkatan 17% dalam rasio konversi.

Versi B menawarkan diskon dan perpesanan yang sedikit berbeda yang menghasilkan tingkat konversi 30%+.

Ajakan Bertindak (CTA)

Anda dapat menguji warna, salinan, ukuran, dan perataan tombol ajakan bertindak.

Mungkin sangat penting untuk memeriksa salinan CTA. Jika ada keterputusan antara apa yang Anda tawarkan dan CTA, kemungkinan besar pengguna tidak akan berkonversi.

Pada pop-up di bawah, apakah Anda akan mengklik jika tertulis "Berlangganan" alih-alih "Ya, kirimkan saya kiat-kiat itu"?

Mungkin tidak. Pastikan CTA sesuai dengan janji yang Anda buat. Dan Anda dapat menggunakan ini sebagai kesempatan untuk terkejut dan kagum.

Lihatlah formulir pendaftaran buletin Klientboost:

Alih-alih "Berlangganan" yang biasa, "Kami mungkin menyesali ini" menarik perhatian.

Anda mungkin juga ingin menambahkan atau menguji teks yang digunakan pengguna untuk menutup pop-up.

Munculan niat keluar CoSchedule yang meminta pengguna untuk mencoba ekstensi gratis dapat ditutup jika Anda mengklik "Saya menolak ekstensi gratis".

Kami menguji pop-up niat keluar di halaman produk kami, menawarkan diskon tambahan dengan kode kupon unik, dan menemukan tingkat pendaftaran 7%. Dalam hal ini, strategi penawaran memiliki dampak yang besar, dengan kupon diskon 10% berkinerja lebih dari dua kali serta penawaran kupon pengiriman gratis (kami juga menemukan peningkatan 18% dalam tarif buka email penawaran).

Jonathan Finegold, CRO di Medcline.com

Gamifikasi

Munculan yang digamifikasi memotivasi pengguna untuk mengambil tindakan dengan imbalan hadiah.

Penelitian Optimonk menemukan bahwa “roda keberuntungan” atau roda keberuntungan memiliki tingkat konversi 13,23%.

Tapi Anda tidak harus berhenti di situ. Anda juga dapat mencoba pop-up kartu "pilih hadiah" atau "goreskan".

Sumber

Sumber

Medcline mampu meningkatkan tingkat penangkapan mereka sebesar 12% dengan menjalankan undian versus penawaran tradisional “mendaftar untuk buletin kami”.

Contoh hebat lainnya datang dari Ross Kernez yang hanya menggunakan pop-up gamified untuk klien mereka setelah hasil ini:

Kami menguji 2 jenis pop-up gamified yang berbeda. Salah satunya adalah memutar roda untuk memenangkan hadiah pop-up dan yang lainnya adalah memilih kotak untuk melihat apakah Anda telah memenangkan voucher €10.

Tingkat konversi terbaik kami sebelumnya adalah 8%. Saat kami menguji salah satu dari pop-up gamified, tingkat konversi kami melonjak menjadi minimal 14% .

Ross Kernez, Konsultan Kepala untuk Strategi Online- Konsultasi Ross Kernez

Metrik Terbaik untuk Dilacak Saat Pengujian A/B Munculan

Anda tidak dapat menerima pemenang atau pecundang dari sebuah tes pada nilai nominal ketika A/B menguji ide karena Anda harus memahami bagaimana dan mengapa Anda mencapai hasil tersebut.

Di situlah metrik Anda masuk.

Metrik adalah tipe data tunggal yang membantu Anda mengukur dampak pengujian A/B terhadap tujuan bisnis Anda.

Tapi bagaimana Anda memutuskan mana yang akan dilacak?

Ada beberapa yang harus Anda lacak sementara yang lain bergantung pada jenis pop-up.

Bergantung pada jenis pop up (kupon untuk eCommerce, e-book, dll.), Saya mencoba untuk pergi ke lebih banyak metrik upstream sebanyak yang saya bisa. Anda selalu harus melacak tingkat 'pemicu' (karena itu akan menjadi penyebut Anda untuk metrik keterlibatan). Namun, hal-hal seperti 'popup closed' dan 'submission rate' sangat penting untuk dilacak. Menggabungkannya dengan menjadi kreatif dengan memicu peta panas/rekaman sesi akan memberi Anda LEBIH BANYAK wawasan! Poin bonus untuk hal-hal seperti tingkat keluar, meskipun mereka menjadi rumit dengan kebisingan (misalnya tingkat keluar mungkin tidak didefinisikan dengan baik KECUALI Anda termasuk mereka yang melihat pop up ).

Shiva Manjunath, Speero

Karim Naufal, pakar pengujian A/B internal kami setuju bahwa metrik umum masih berlaku.

Ya, Rasio Konversi harus diukur untuk tombol popup itu sendiri misalnya, dan X penutup. Tetapi mengukur rasio pentalan, atau rasio drop-off itu bagus (apakah itu membuat frustrasi?). Juga mengukur Waktu untuk Menutup munculan mungkin juga relevan (berapa banyak minat yang ditangkapnya?).

Metrik klik lainnya seperti Tambahkan ke Keranjang tetap berwawasan luas. Namun yang terbaik untuk dilacak adalah metrik Pendapatan per Pengunjung tak terbantahkan yang mengukur pendapatan, yang dengan sendirinya berisi informasi tentang Rasio Konversi dan Nilai Pesanan Rata-rata.

Metrik lain yang cukup berguna yang mengukur keterlibatan pengguna adalah Sesi per Pengguna .

Tetapi Jonathan Finegold, CRO di Medcline.com tidak percaya Anda harus melacak pendapatan, dan inilah alasannya:

Untuk blog kami, pendapatan bukanlah KPI utama, tingkat pendaftaran adalah karena tujuan kami adalah memaksimalkan tangkapan email dari lalu lintas organik. Demikian juga, bahkan dalam pengaturan e-niaga, pendapatan mungkin tidak selalu menjadi metrik terbaik karena pada margin, penawaran mungkin tidak menguntungkan, dan dengan demikian KPI yang tepat, dalam hal ini, mungkin tingkat perubahan margin dolar .

Singkatnya, ini adalah metrik yang harus Anda lihat saat pengujian A/B atau pop-up pengujian terpisah:

• Tingkat konversi
• Rasio klik-tayang
• Tingkat bouncing
• Tingkat drop-off
• Sesi per pengguna
• Masukkan ke keranjang
• Pendapatan per pengunjung
• Pop-up ditutup
• Tingkat pengiriman

Hubungkan Google Analytics dan Shopify Anda ke platform pengujian A/B seperti Convert untuk mengukur semua metrik ini secara akurat.

Berikut adalah contoh bagaimana proses itu mungkin terlihat:

Misalnya, saat menguji jumlah waktu sebelum munculan melibatkan pengguna, kami melihat peta panas dan data Google Analytics untuk menemukan tingkat di mana orang menutup munculan.

Kami menemukan bahwa apa pun 15 detik atau kurang menghasilkan sekitar 86% tingkat penutupan, dan juga berkontribusi pada peningkatan rasio pentalan. Jika waktu popup antara 15-45 detik sejak pengguna berada di situs, kami melihat tingkat penutupan turun menjadi 61%, dengan tingkat pentalan berkurang 14%.

Ketika kami mengatur waktu ke 1 menit, kami melihat tingkat penutupan turun 5% tambahan, dan tingkat bouncing berkurang 6%. Selain itu, interaksi dengan tombol CTA meningkat 40% ketika 1 menit adalah waktu yang ditentukan. Dua interval lainnya melihat sedikit atau tidak ada perubahan dalam rasio klik CTA.

Jika kita menguji teks di dalam tombol CTA, maka kita melihat CTR% dari CTA. Ketika kami menggunakan bahasa yang lebih langsung dan spesifik dengan pengubah waktu (mis: sekarang, hari ini), kami melihat peningkatan RKT sebesar 14%.

Joe Karasin, Kepala Pemasaran Pertumbuhan, CircleIt Inc.

Metrik lain yang mungkin tidak Anda pikirkan yang dapat berdampak signifikan pada bisnis Anda adalah kecepatan halaman.

Metrik terbaik untuk dilacak saat pop-up pengujian A/B adalah Kecepatan Halaman.

Anda tidak perlu heran jika pop-up dengan gif dan video yang disematkan memperlambat halaman. Pop-up dimuat dari permintaan HTTP yang sama dengan halaman, yang memengaruhi kecepatan halaman.

Anda dapat menghitung dampak pop-up pada halaman dengan menganalisis bagan air terjun. Jalankan variasi halaman Anda melalui Tes Pingdom, dan bandingkan kecepatan halaman. Jika ada perbedaan yang signifikan dalam kecepatan memuat, berarti pengujian Anda telah gagal. Kecepatan memuat situs web muncul sebelum munculan, karena pengalaman penjelajahan sangat memengaruhi tingkat konversi .

Arek Nowakowski, Desainer Produk @ Spacelift

Catatan: Kami telah menyebutkan secara singkat metrik pagar pembatas sebelumnya, tetapi penting untuk mengingatnya saat menguji pop-up. Ini adalah metrik inti yang tidak ingin Anda turunkan saat Anda menguji karena penurunan kinerja dapat berdampak besar pada bisnis Anda.

Pedoman yang Perlu Diingat Saat Pengujian A/B Pop-up

Saat Anda siap untuk memulai pop-up pengujian A/B, ikuti rekomendasi berikut untuk meningkatkan keefektifannya:

• Lakukan perhitungan pra-pengujian untuk memastikan Anda memiliki ukuran sampel yang tepat.
  Jika Anda tidak melakukan tes pada sekelompok orang yang cukup besar, Anda berisiko membuat kesalahan, seperti percaya bahwa positif palsu itu nyata. Lakukan perhitungan pra-tes Anda untuk memeriksa apakah Anda memiliki langkah kaki untuk menjalankan siklus penyesuaian yang ada dalam pikiran Anda.
  
  Tip: Gunakan kalkulator pengujian A/B kami untuk melakukan perhitungan signifikansi, nilai p, daya, ukuran sampel, dan MDE.
• Rencanakan sejumlah perubahan kecil dengan MDE kecil untuk situs dengan lalu lintas tinggi.
  Jika Anda memiliki lalu lintas tinggi, Anda dapat merencanakan irama penuh perubahan menit dengan MDE kecil (Efek Terdeteksi Minimum). Sebagian besar eksperimen munculan hanya menghasilkan peningkatan satu digit. Jadi pendekatan ini dapat membantu Anda memahami bagaimana perubahan kecil dapat berhubungan dengan penyesuaian yang sesuai dalam KPI. Semakin tinggi lalu lintas Anda, semakin kecil peningkatan yang dapat Anda deteksi dan yakini hasilnya.
  
  Catatan: MDE hanyalah ukuran efek minimum yang layak untuk kami amati, di mana biaya atau upaya penerapan varian baru tidak akan sepadan.
• Gabungkan perubahan jika pop-up Anda tidak berkinerja baik.
  Jika pop-up Anda tidak menarik, gabungkan beberapa perubahan dan luncurkan sekaligus dengan MDE yang lebih besar. Juga, ide yang baik jika Anda tidak memiliki lalu lintas yang cukup karena ini akan membutuhkan lebih sedikit lalu lintas untuk mencapai signifikansi. Asumsinya adalah bahwa setiap upaya perbaikan harus mengarah pada perbaikan nyata yang mungkin dalam dua digit.
• Waspadalah terhadap positif palsu semakin Anda mengoptimalkan.
  Positif palsu atau kesalahan Tipe I menunjukkan bahwa ada perbedaan antara kontrol dan varian, padahal sebenarnya tidak ada. Salah satu cara untuk benar-benar mengurangi kemungkinan memilikinya, pertama-tama gunakan kalkulator ukuran sampel seperti yang disebutkan di atas.
  
  Tip: Untuk eksperimen mission-critical, setel tingkat kepercayaan ke 99% untuk mengurangi kemungkinan membuat kesalahan seperti itu menjadi 1%.
  
  Semakin dioptimalkan pop-up Anda, semakin Anda harus berhati-hati untuk mengabaikan kesalahan positif.

Menguji A/B Pop-Up di Aplikasi Convert Experiences

Menggunakan Konversi, Anda dapat menguji A/B pop-up toko Anda dan mengubah salah satu elemen pop-up yang disebutkan di atas untuk melihat mana yang akan meningkatkan tingkat konversi situs.

Bagian terbaik? Anda dapat menambahkan pop-up khusus tanpa bantuan tim UX Anda!

Uji A/B Pop-up yang Ada dengan Editor Visual

Situs web Anda aktif dan berjalan, dan pengunjung toko online Shopify Anda mendarat di beranda Anda. Jadi, kemana kita pergi dari sini?

Langkah 1: Buat pengalaman Konversi baru:

Langkah 2: Muat URL toko Shopify Anda yang menyertakan pop-up:

Langkah 3: Klik pop-up dengan mouse Anda dan Anda akan melihat menu Visual Editor untuk mengambil tindakan dan mengubah formatnya:

Setelah Anda selesai dengan pratinjau perubahan seperti apa tampilan pop-up baru dengan menggunakan opsi Pratinjau Langsung dari dalam Editor Visual:

Ini adalah tampilan dan nuansa baru:

Setelah Anda merasa nyaman dengan format baru, aktifkan pengalaman bagi pengunjung Shopify Anda untuk melihat mana dari keduanya yang berkinerja lebih baik.

Tambahkan Pop-up pada Variasi Anda dengan Convert Custom Editors

Jika sekarang Anda ingin menyertakan penawaran pop-up di beranda Anda yang bukan bagian dari template Shopify Anda, jangan khawatir!

Anda dapat menggunakan editor Konversi CSS + HTML+ JS khusus untuk menambahkannya dan mengujinya secara A/B.

Langkah 1: Sekali lagi buat pengalaman Konversi baru:

Langkah 2: Muat URL toko Shopify Anda yang ingin Anda sertakan pop-up:

Langkah 3: Gunakan CSS kustom dan opsi Javascript kustom untuk menambahkan kode JavaScript pop-up (Anda dapat menemukan banyak template yang tersedia secara online atau kode Anda sendiri):

Untuk contoh ini, kami menggunakan pop-up yang tersedia di sini: https://github.com/beeker1121/exit-intent-popup

Langkah 4: Kemudian terapkan perubahan dan simpan.

Setelah Anda selesai dengan pratinjau perubahan seperti apa tampilan pop-up baru dengan menggunakan opsi Pratinjau Langsung dari dalam Editor Visual:

Setelah Anda merasa nyaman dengan pop-up baru, aktifkan pengalaman pengunjung Shopify Anda untuk melihat apakah penawaran akan membuat perbedaan.

Pop-up Mengganggu, Mengganggu, dan Tidak Efektif hanya jika Anda Tidak Mengujinya Secara A/B

Data menunjukkan kepada kita bahwa penggunaan, penempatan, pengaturan waktu, dan salinan yang tepat dapat menjadikan popup sebagai cara yang efektif untuk mendorong tindakan yang berarti. Faktanya, satu temuan menarik adalah ketika kami menggunakan penawaran di popup, kami melihat bahwa kami menerima lebih banyak interaksi daripada CTA lain di situs web yang sebaliknya sama.

Joe Karasin, Kepala Pemasaran Pertumbuhan, CircleIt Inc.

Menjauhlah dari strategi “atur dan lupakan” dan lakukan pengujian A/B.

Eksperimen dapat membantu Anda mengidentifikasi bagaimana pengguna bereaksi terhadap strategi Anda, membuat penyesuaian, dan mendorong hasil yang diinginkan.

Selama Anda menghindari kesalahan yang dilakukan orang saat menguji A/B dan memilih platform pengujian yang tepat seperti Convert, Anda dapat menciptakan situasi yang saling menguntungkan bagi pelanggan dan merek Anda.