26 Contoh Pengujian A/B untuk Menginspirasi Pengujian Anda Berikutnya
Diterbitkan: 2022-02-01Dalam perjalanan Anda ke pengujian A/B, Anda mungkin pernah bertemu langsung dengan kutipan populer tahun 2004 dari Jeff Bezos ini:
Jika Anda menggandakan jumlah eksperimen yang Anda lakukan per tahun, Anda akan menggandakan daya cipta Anda.
Itu semua baik dan bagus, tetapi bagaimana jika Anda tidak tahu apa yang harus diuji?
Anda tahu bahwa pengujian A/B mengungkap wawasan yang dapat diterjemahkan ke dalam pertumbuhan bisnis dan membuat rekor baru dalam menghasilkan pendapatan, tetapi masalahnya adalah ketika Anda duduk untuk menguji sesuatu di situs web Anda, halaman arahan, email, dll. dan kosong.
Di mana letak peluang untuk optimasi?
Untungnya, Anda bisa mendapatkan petunjuk dari orang lain. Ada contoh pengujian A/B dalam pemasaran yang ternyata berhasil dan membantu bisnis meningkatkan rasio konversi mereka.
Contoh-contoh ini dapat menjadi batu loncatan untuk perjalanan pengoptimalan tingkat konversi Anda sendiri — sesuatu untuk memicu rangkaian pemikiran yang akan membawa Anda lebih dekat ke hipotesis kemenangan Anda.
Saya menggali lebih dalam dan mengeluarkan yang terbaik dari mereka, diurutkan berdasarkan apa yang relevan bagi Anda; oleh industri atau saluran. Anda akan mendapatkan info tentangnya untuk membantu Anda menemukan pola pengujian A/B untuk memberi Anda ide pengujian dan menginspirasi kisah sukses Anda sendiri.
- Cara Mengekstrak Wawasan Maksimum Dari Contoh Pengujian A/B
- Contoh Pengujian A/B untuk Dipelajari dan Menginspirasi Pengujian Anda Sendiri
- Contoh Pengujian A/B B2B
- Materi Iklan Csek: Uji Tagline Beranda
- Highrise: Judul Halaman Pendaftaran
- Techinsurance.com: Konversi Halaman Arahan
- Contoh Pengujian A/B DTC
- NuFace: Tes Insentif
- Merek Kaca Buatan Tangan Mewah: Profitabilitas Pengiriman Gratis
- Toko Olimpiade Vancouver 2010: Pembayaran Satu Halaman vs Multi-Langkah
- Contoh Pengujian A/B E-niaga
- Lampenlicht.nl: Spesifikasi Di Bawah Gambar Produk
- Toko Perawatan Online: Menawarkan Panduan Pembelian
- Teks Tombol: Tambahkan ke Tas vs Tambahkan ke Keranjang
- Contoh Pengujian A/B LSM
- Kiva.org: Di Atas Halaman Landing Donasi
- John C. Cook: Teks vs Video
- Contoh Pengujian A/B SaaS
- Surat Kelas Bumi: Pengoptimalan Halaman Arahan
- HubSpot: Fitur Pencarian Situs
- Netflix: Karya Seni Video Unggulan
- Halaman Arahan Pengujian A/B
- Humana: Spanduk Halaman Arahan
- Brookdale Hidup: Elemen Visual
- Posisi Formulir Halaman Arahan
- Contoh Email Pengujian A/B
- Designhill.com: Gaya Judul Email
- Judul Email “Merry Christmas” vs “Happy Holidays”
- Microsoft: Skema Warna Email
- Contoh PPC Pengujian A/B
- Adspresso: Salinan Iklan Facebook
- Sony: Iklan Spanduk yang Dipersonalisasi
- Iklan PPC: Salinan CTA
- Contoh Shopify Pengujian A/B
- Oflara: Menu Mega
- BattlBox: Strategi Pemasaran Konten E-niaga yang Dipersonalisasi
- Peringkat Bintang vs Tanpa Peringkat Bintang
- Contoh Pengujian A/B B2B
- Kesimpulan
Cara Mengekstrak Wawasan Maksimum Dari Contoh Pengujian A/B
Sebelum kita mulai, mari tentukan ekspektasi yang tepat tentang contoh pengujian A/B dan cara menggunakannya dengan benar.
Sangat mudah untuk melihat apa yang dilakukan pesaing Anda atau orang lain dan berpikir dalam hati, “Tahukah Anda? Saya akan melakukan hal itu dan melihat apa yang terjadi.”
Kemungkinannya adalah, itu tidak akan berhasil untuk Anda. Anda pada akhirnya akan membuang-buang sumber daya untuk menguji sesuatu yang tidak sesuai dengan model bisnis, audiens, dan merek unik Anda.
Sebaliknya, Anda mendapatkan inspirasi dari apa yang mereka lakukan — tidak hanya dari ujian kemenangan mereka tetapi juga dari mereka yang kalah.
Tetapi jika kami jujur, Anda hampir tidak mendengar cerita tentang tes yang gagal meskipun itu juga dikemas dengan wawasan. Setidaknya penguji mempelajari apa yang tidak berhasil.
Ambil inspirasi dari contoh-contoh ini dan gunakan elemen-elemen solusi yang diuji untuk mengembangkan hipotesis Anda (jika itu sesuai dengan penelitian kualitatif dan kuantitatif yang telah Anda lakukan). Kemudian, jalankan pengujian A/B untuk melihat apakah itu menggerakkan metrik yang Anda inginkan.
Studi kasus pengujian A/B ini dimaksudkan untuk membantu Anda berpikir di luar kebiasaan, dan yang paling penting, melihat bagaimana poin data yang sering berbeda yang Anda kumpulkan melalui penelitian Anda dapat dikaitkan dengan solusi spesifik.
Dengan sendirinya, mereka bisa tampak seperti insiden yang terisolasi tetapi disatukan, masuk akal mengapa tren solusi tertentu berhasil. Hal ini sering menimbulkan “praktik terbaik”. Tapi seperti yang saya katakan sebelumnya, Anda hanya harus menyesuaikan ini dengan kasus unik Anda, bukan menyalin dan menempelkannya.
Jadi, apakah elemen dan solusi berasal dari industri DTC atau B2B, atau digunakan dalam kampanye PPC atau buletin email, jika Anda melacak peningkatan dan hasil, Anda akan dapat melihat pola . (Ini adalah dasar dari pekerjaan yang dilakukan oleh Jakub Linowski di GoodUI).
Pola-pola ini dapat menginspirasi wawasan besar Anda berikutnya dan membawa program eksperimen Anda ke kemenangan baru.
Contoh Pengujian A/B untuk Dipelajari dan Menginspirasi Pengujian Anda Sendiri
Semua contoh pengujian A/B di bawah ini dibagi ke dalam kategori yang berbeda berdasarkan industri yang mereka layani dan saluran yang mereka jalankan.
Contoh Pengujian A/B menurut Industri
Mari kita mulai dengan beberapa contoh dari berbagai industri dan melihat kesejajaran apa yang dapat kita tarik di antara mereka.
Contoh Pengujian A/B B2B
Materi Iklan Csek: Uji Tagline Beranda
Csek adalah agensi digital yang tagline berandanya berbunyi: “Csek Creative adalah agensi digital berbasis Kelowna yang memberikan hasil yang masuk akal secara bisnis”.
Jika Anda memiliki pengalaman dengan copywriting, Anda dapat langsung merasakan ketidakjelasan garis itu. Itu tidak mengenai kebutuhan mendesak di benak pembaca. Jadi, itu bisa menjadi alasan orang terpental dari halaman.
Dan Csek ingin menurunkan rasio pentalannya. Jadi, tujuannya adalah untuk menguji apakah tagline itu pelakunya.
Hipotesis: Ubah tagline menjadi sesuatu yang lebih jelas dan spesifik tentang layanan yang ditawarkan untuk melihat apakah akan ada peningkatan rasio pentalan dan klik-tayang ke halaman lain di situs.
Tagline “B” adalah: “Csek Creative adalah agensi digital yang membantu perusahaan dengan kebutuhan pemasaran online dan offline mereka”
Teks yang diperbarui ditampilkan kepada lebih dari 600 pengunjung situs dan menghasilkan peningkatan 8,2% dalam klik-tayang ke halaman lain di situs Csek.
Apa yang dapat Anda pelajari dari ini: Kejelasan tentang penawaran Anda di detik-detik pertama mengunjungi situs Anda sangat penting. Pemirsa online memiliki toleransi yang rendah terhadap ambiguitas dan tidak ingin membakar kalori saat mencoba mencari tahu apa yang Anda lakukan. Jika rasio pentalan naik di beranda Anda, periksa apakah orang dapat segera memahami apa yang Anda lakukan.
Highrise: Judul Halaman Pendaftaran
Highrise menginginkan lebih banyak pendaftaran dan memutuskan untuk memeriksa seberapa efektif headline dan subjudul yang berbeda terhadap tingkat konversi. Jadi, mereka memutuskan untuk menjalankan pengujian multivarian untuk sampel 4000 tampilan halaman.
Hipotesis: Jika judul dan subjudul diubah untuk menekankan manfaat yang berbeda, maka salah satu manfaat tersebut akan berkinerja lebih baik daripada yang asli.
Varian:
Pemenang (yang berkinerja 30% lebih baik daripada yang asli) menekankan pada “uji coba gratis 30 hari) dan kecepatan mendaftar. Dan tombol CTA sangat sederhana: cukup "pilih rencana untuk memulai".
Apa yang dapat Anda pelajari dari pengujian multivarian ini: Jika ada beberapa manfaat untuk produk atau layanan Anda, mengetahui mana yang harus ditekankan pada halaman arahan, halaman beranda, atau halaman pendaftaran bukanlah sesuatu yang harus Anda tebak. Uji mereka, mungkin sekaligus, dengan pengujian A/B/n, dan lihat mana yang paling sesuai dengan audiens target Anda.
Techinsurance.com: Konversi Halaman Arahan
Techinsurance.com menginginkan tingkat konversi yang lebih tinggi untuk kampanye bayar per klik mereka. Awalnya, semua lalu lintas diarahkan ke beranda situs web mereka.
Jadi, mereka memutuskan untuk membuat halaman arahan khusus untuk kampanye, mengarahkan lalu lintas ke sana, dan melihat bagaimana kinerjanya dibandingkan dengan halaman beranda situs web.
Hipotesis: Buat halaman arahan khusus, lalu lintas langsung ke sana, dan itu akan mengonversi lebih baik daripada beranda situs web.
Varian:
Laman landas yang dirancang untuk kampanye PPC dikonversi 73% lebih baik daripada beranda situs web.
Apa yang dapat Anda pelajari dari ini: Calon pelanggan tidak akan tinggal di situs web Anda cukup lama untuk melihat apakah pesan Anda berbicara kepada mereka secara langsung. Perlu ada percikan instan "Oh ya, masih ada lagi." Untuk meningkatkan kinerja kampanye iklan Anda, uji halaman arahan yang ditunjuk yang berbicara secara khusus kepada audiens yang dibawa oleh iklan PPC Anda.
Contoh Pengujian A/B DTC
NuFace: Tes Insentif
NuFace menyediakan produk perawatan kulit anti penuaan langsung kepada pelanggannya. Mereka menemukan bahwa meskipun orang tertarik dengan produk mereka, tidak banyak yang menyelesaikan pembelian mereka. Dan ini tidak sejalan dengan tujuan NuFace untuk mengembangkan proses online mereka dan meningkatkan penjualan.
Hipotesis: Jika kami menawarkan insentif pengiriman gratis kepada pelanggan saat pesanan mereka berjumlah $75 atau lebih, akan ada lebih banyak penjualan dan penyelesaian pesanan.
Varian: Mereka menemukan bahwa insentif mendorong orang untuk menyelesaikan pesanan mereka. Lebih dari 90% lebih banyak pesanan diselesaikan dan meningkatkan nilai pesanan sebesar 7,32%.
Apa yang dapat Anda pelajari dari ini: Insentif pengiriman gratis dengan harga minimum tertentu dapat meningkatkan nilai pesanan rata-rata. Ini adalah sesuatu yang layak untuk diuji.
Merek Kaca Buatan Tangan Mewah: Profitabilitas Pengiriman Gratis
Jika Anda menawarkan pengiriman gratis kepada pelanggan, bagaimana Anda tahu bahwa Anda masih untung dengan penawaran itu? Bagaimana Anda tahu bahwa Anda lebih menguntungkan dengan penawaran pengiriman gratis daripada tanpanya?
Itulah yang ingin diketahui oleh merek kaca buatan tangan yang mewah ini ketika mereka menyewa Brave One untuk membantu.
Hipotesis: Itu lebih merupakan pertanyaan: Apakah penawaran pengiriman gratis menghasilkan pendapatan yang cukup untuk mengimbangi biaya pengiriman dan tetap menghasilkan keuntungan?
Varian:
Ketika 25.000 pengunjung web dibagi 50/50 antara kontrol dan penantang (yang memiliki bilah promo pengiriman gratis) dan berjalan selama 15 hari, mereka menemukan bahwa penawaran pengiriman gratis meningkatkan pendapatan sebesar 20%. Itu adalah tambahan pendapatan $ 16.000.
Apa yang dapat Anda pelajari dari ini: Pengiriman gratis pasti meningkatkan tingkat konversi, tetapi Anda harus menguji apakah itu bermanfaat bagi keuntungan Anda dalam jangka panjang. Dengan pengujian A/B, Anda tidak perlu menjalankan bisnis dengan asumsi.
Toko Olimpiade Vancouver 2010: Pembayaran Satu Halaman vs Multi-Langkah
Haruskah Anda membagi proses checkout menjadi beberapa halaman atau hanya memiliki satu halaman untuk keseluruhan proses? Bagaimana hal ini akan mempengaruhi tingkat konversi? Itulah pertanyaan yang dijawab tes ini untuk toko Resmi Olimpiade Vancouver.
Hipotesis: Gabungkan proses checkout multi-langkah menjadi satu halaman dan lebih banyak pesanan akan diselesaikan.
Varian: Dengan 50% lalu lintas ke kedua versi proses checkout, 300 transaksi sudah cukup untuk melihat pemenangnya. Tetapi mereka membiarkannya berjalan hingga 606 transaksi dan menemukan bahwa checkout satu halaman mengungguli proses multi-langkah sebesar 21,8%.
Apa yang dapat Anda pelajari dari ini: Tidak semua proses checkout bekerja dengan cara yang sama. Untuk target pasar dan ceruk produk ini, hasil pengujian menunjukkan bahwa audiens lebih menyukai checkout satu halaman. Apa yang lebih disukai audiens Anda?
Contoh Pengujian A/B E-niaga
Lampenlicht.nl: Spesifikasi Di Bawah Gambar Produk
Lampenlicht.nl mempekerjakan Mintminds untuk meningkatkan tingkat add-to-cart halaman produk mereka dan pendapatan per pengunjung.
Jadi, Mintminds menggali data kualitatif dan kuantitatif mereka dan menemukan bahwa pengunjung ingin melihat produk di toko online dari sudut yang berbeda dan tidak terlalu tertarik dengan spesifikasi teknis. Juga, USP seperti "stok" dan "pengiriman cepat" membuat mereka bersemangat.
Mereka merancang tes yang memenuhi kebutuhan ini dibandingkan dengan halaman produk asli.
Hipotesis: “Jika satu fitur produk penting atau USP secara tekstual ditampilkan di bawah setiap gambar produk dari gambar produk kedua dan seterusnya (di carousel) maka jumlah transaksi akan meningkat karena kebutuhan informasi pembeli akan lebih baik dilayani di lokasi yang sudah sering dilihat.”
Hasil: Kontrol dan varian disajikan selama 28 hari dan dibandingkan dengan kontrol, varian menunjukkan:
- Peningkatan 13% di tambahkan ke troli
- 4,96% peningkatan tingkat konversi pesanan, dan
- 6,58% peningkatan pendapatan per pengunjung
Secara keseluruhan, ROI pengujian adalah 116%.
Takeaway utama: Kumpulkan data berharga tentang bagaimana pengunjung Anda menggunakan situs Anda. Anda akan menemukan kebocoran atau penyumbatan di corong konversi Anda. Ini dapat membantu Anda menguji solusi untuk masalah dan mengungkap cara baru dan lebih baik dalam melakukan apa yang sudah Anda lakukan.
Toko Perawatan Online: Menawarkan Panduan Pembelian
Sebuah toko perawatan online sedang mencari cara untuk mengoptimalkan penawaran paket wewangian mereka untuk pria. Mereka meminta Konversi Fanatik untuk membantu, sehingga mereka dapat belajar bagaimana membujuk lebih banyak orang untuk membeli (atau berlangganan) produk mereka.
Conversion Fanatics mengadakan polling untuk mengungkap hambatan dan menemukan bahwa orang ragu-ragu untuk membeli karena mereka merasa sulit untuk membuat pilihan.
Hipotesis: Membantu orang memilih aroma mana yang akan dibeli akan meningkatkan penjualan.
Hasil: Ketika toko menampilkan panduan yang menjelaskan seperti apa aromanya, memberikan panduan dalam memilih aroma, dan menunjukkannya secara merata kepada 2000 pengunjung, mereka menemukan peningkatan pendapatan per pengunjung sebesar 37% dan menyebabkan peningkatan 53% dalam penyelesaian perintah.
Apa yang dapat Anda pelajari dari ini: Orang-orang mengabaikan sedikit gesekan. Ini bisa berupa UI atau bahkan masalah keputusan. Dalam kasus masalah pengambilan keputusan, Anda harus berbicara dengan pelanggan Anda untuk mengetahui di mana itu gatal dan menguji solusi.
Teks Tombol: Tambahkan ke Tas vs Tambahkan ke Keranjang
Banyak merek e-niaga yang sukses menggunakan "tambahkan ke tas" dalam salinan tombol mereka. Situs web e-niaga lainnya masih tetap menggunakan "tambahkan ke troli". Merek fesyen dan aksesori tampaknya lebih condong ke teks "tambahkan ke tas", tetapi apakah itu juga cocok untuk Anda?
Konversi Fanatics menjalankan tes untuk melihat bagaimana kinerja "tambahkan ke keranjang" dibandingkan dengan "tambahkan ke tas" untuk salah satu klien mereka.
Hipotesis: Mengubah teks tombol dari “tambahkan ke tas” menjadi “tambahkan ke troli” akan menghasilkan peningkatan konversi tombol.
Hasil:
Dalam hal ini, ketika "tambahkan ke troli" digunakan:
- Tampilan halaman di halaman checkout tumbuh sebesar 95,%
- Pembelian naik 81,4%
- Tambahkan ke troli meningkat sebesar 22,4%
Ini adalah peningkatan besar — tetapi perhatikan: ini untuk toko e-niaga khusus ini. Tapi layak diuji, bukan begitu?
Apa yang dapat Anda pelajari dari ini: Mungkin ada banyak lift yang tersembunyi di teks tombol keranjang belanja Anda. Hanya mengubah 1,2, 3 kata bisa berarti perbedaan besar. Ini sama untuk warna tombol.
Contoh Pengujian A/B LSM
Kiva.org: Di Atas Halaman Landing Donasi
Kiva.org adalah organisasi nirlaba yang membantu mengentaskan kemiskinan dengan menghubungkan orang dengan pemberi pinjaman melalui internet. Anda mulai dari $25 dan membantu seseorang di suatu tempat di dunia untuk mencapai tujuan tertentu.
Halaman arahan mereka untuk pengunjung pertama kali tampak matang untuk pengoptimalan. Setelah brainstorming, mereka menemukan beberapa peluang untuk perbaikan dan memutuskan untuk mengujinya.
Mereka menyiapkan 3 varian untuk menantang yang asli (yang sudah tampak hebat):
- Versi plus (dengan beberapa penjelasan, perubahan format, dan korsel putar otomatis)
- Versi slider besar (menarik secara visual dengan pengukur kemajuan)
- Versi video (penjelasan 90 detik tentang cara kerjanya pada putar otomatis)
Ada juga varian tambahan yang berfokus pada penambahan elemen kepercayaan di bagian bawah halaman.
Hipotesis: Jika kami memberikan lebih banyak informasi tentang cara kerjanya dalam versi teks, gambar, dan video kepada pengunjung, lebih banyak orang akan menyumbang. Idenya adalah untuk menginspirasi lebih banyak kepercayaan.
Hasil:
3 varian pertama hanya menunjukkan peningkatan kecil tetapi statistiknya tidak cukup kuat untuk menyatakan pemenang dengan percaya diri. Tetapi varian dengan elemen kepercayaan area bawah meningkatkan tingkat konversi sebesar 11,5% pada kepercayaan lebih dari 95%.
Apa yang dapat Anda pelajari dari ini: Orang ingin tahu lebih banyak, terutama ketika mereka menyumbangkan uang. Mereka ingin tahu ke mana perginya uang mereka dan apakah mereka cukup memercayai Anda untuk membawanya ke tempat tujuan mereka mengirimnya. Apakah halaman donasi Anda membantu pengunjung lebih mempercayai Anda?
John C. Cook: Teks vs Video
Lembaga nonprofit, John C. Cook, mengetahui tentang manfaat keterlibatan video. Jadi, mereka memutuskan untuk mengujinya di email mereka untuk melihat seberapa baik kinerjanya dibandingkan dengan email teks dalam hal keterlibatan dan donasi.
Hipotesis: Mendesain ulang pesan pemasaran dalam email dari teks ke video dan itu akan meningkatkan keterlibatan dan donasi.
Pesan video menghasilkan 43% lebih banyak klik-tayang dan sumbangan naik 114% sebagai hasil dari versi ini.
Apa yang dapat Anda pelajari dari ini: Mendengar tentang praktik terbaik yang meningkatkan salah satu metrik favorit Anda? Uji untuk melihat apakah itu bekerja untuk Anda terlebih dahulu. Buktikan validitasnya sebelum membuat penyok besar.
Selain itu, pertimbangkan untuk menggunakan video atau elemen interaktif lainnya untuk menginspirasi lebih banyak kepercayaan dan menambahkan satu dimensi lagi pada kepribadian organisasi Anda.
Contoh Pengujian A/B SaaS
Surat Kelas Bumi: Pengoptimalan Halaman Arahan
Earth Class Mail diakuisisi oleh Xenon Ventures, dan Xenon mengundang Pakar Tingkat Konversi untuk membantu mengembangkan bisnis secara maksimal.
Salah satu hal yang mereka lakukan adalah mengoptimalkan halaman arahan dalam studi kasus pengujian A/B ini. Mereka menolak praktik terbaik dan memilih halaman yang ramping dan sederhana. Inilah kontrol dan penantangnya:
Hipotesis: Setelah mempelajari data kualitatif dan kuantitatif yang dikumpulkan dari survei dan jajak pendapat, data tim layanan pelanggan, dan Google Analytics, mereka berhipotesis bahwa perubahan total halaman arahan ke versi "sederhana dan ramping" akan mengungguli yang asli.
Hasil: Mereka benar. Ada peningkatan 61% dalam prospek yang dihasilkan pada versi penantang.
Apa yang dapat Anda pelajari dari ini: Jangan selalu mematuhi praktik terbaik. Gunakan riset Anda sendiri untuk mencari tahu poin-poin di saluran penjualan Anda yang dapat menggunakan sedikit gesekan.
HubSpot: Fitur Pencarian Situs
HubSpot menjalankan pengujian A/B/n untuk melihat apa yang akan membuat orang lebih terlibat dengan alat pencarian situs mereka.
Mereka merancang 3 varian:
- Varian A – bilah pencarian situs lebih terlihat dan teks placeholder diubah menjadi “cari berdasarkan topik”
- Varian B – bilah pencarian situs lebih terlihat dan teks placeholder diubah menjadi “telusuri berdasarkan topik” tetapi hanya untuk blog, bukan seluruh situs
- Varian C – bilah pencarian lebih terlihat, dengan teks placeholder “search the blog”
Hipotesis: Jika bilah pencarian situs lebih menonjol secara visual dengan teks placeholder yang tepat, orang akan lebih banyak berinteraksi dengan alat tersebut dan itu akan menghasilkan tingkat konversi prospek blog yang lebih tinggi.
Hasil: 3 varian lebih baik dari aslinya. Ada rasio konversi yang lebih tinggi dengan varian C yang menang sebesar 3,4% dan peningkatan 6,46% dalam keterlibatan pengguna dengan bilah pencarian.
Apa yang dapat Anda pelajari dari ini: Bahkan fitur yang tampaknya dapat diabaikan di halaman web Anda dapat menghasilkan tingkat konversi yang lebih tinggi. Gunakan data kualitatif seperti peta panas untuk mencari tahu di mana pengguna Anda mengklik, gunakan itu untuk membangun cerita tentang bagaimana mereka menggunakan situs Anda. Anda dapat menemukan ide tentang apa yang harus diuji di sana.
Netflix: Karya Seni Video Unggulan
Netflix adalah salah satu nama besar di dunia eksperimen. Mereka dikenal karena menjalankan ribuan tes dan terbuka tentang hal itu di The Netflix Tech Blog.
Salah satu yang paling populer adalah memilih karya seni terbaik untuk video. Mereka melakukan ini dengan pengujian A/B, dan tujuannya adalah untuk membantu anggota menemukan sesuatu untuk ditonton dan lebih terlibat dengan setiap judul.
Salah satu contohnya adalah tes untuk karya seni yang lebih baik untuk The Short Game.
Hipotesis: Karya seni default tidak menceritakan kisah film secara efektif. Karya seni yang lebih baik akan memperluas audiens dan meningkatkan keterlibatan.
Hasil:
Satu varian menghasilkan tingkat pengambilan 14% lebih baik.
Apa yang dapat Anda pelajari dari ini: Pengisahan cerita visual dapat dioptimalkan untuk meningkatkan konversi. Apakah grafik Anda mengatakan persis apa yang Anda ingin mereka katakan? Atau apakah mereka menahan pengalaman pelanggan yang lebih baik yang dapat menghasilkan tingkat konversi yang lebih tinggi?
Sekarang setelah kami menunjukkan kepada Anda beberapa contoh pengujian A/B untuk B2B, DTC, ECOMMERCE, NGO, dan SaaS, mari lakukan hal yang sama untuk saluran berbeda tempat Anda dapat menjalankan pengujian.
Contoh Pengujian A/B menurut Saluran:
Halaman Arahan Pengujian A/B
Humana: Spanduk Halaman Arahan
Humana ingin meningkatkan kinerja spanduk halaman arahannya. Kontrol memiliki banyak salinan yang tidak berkinerja baik, bersama dengan CTA.
Hipotesis: Tingkatkan judul, tampilkan salinan yang lebih pendek, lebih ringkas, dan CTA yang lebih kuat, dan ini akan meningkatkan rasio klik-tayang.
Hasil: Mereka melakukan itu dan menemukan bahwa versi B memiliki peningkatan klik-tayang 433% daripada versi "A". Itu sangat besar, tetapi bagaimana jika itu bisa lebih baik?
Untuk versi “C”, mereka mencoba judul dan CTA yang berbeda (dan lebih kuat) yang menampilkan kata “toko”. Yang ini naik lebih tinggi sebesar 192%.
Apa yang dapat Anda pelajari dari ini: 5 kali lebih banyak orang akan melihat spanduk halaman arahan Anda daripada halaman lainnya. Pastikan apa yang Anda miliki menarik perhatian dan berbicara secara langsung dan jelas kepada audiens target Anda.
Juga, yang terbaik bisa menjadi lebih baik.
Brookdale Hidup: Elemen Visual
Brookdale Living menyediakan komunitas dan kehidupan berbantuan untuk orang tua. Mereka ingin "Temukan Komunitas" mereka bekerja lebih baik dalam menarik lebih banyak orang yang tertarik ke layanan mereka.
Jadi mereka mengeksplorasi gagasan untuk meningkatkan halaman dengan lebih banyak sinyal kepercayaan, bukti sosial, dan USP. Satu elemen lagi diperlukan tetapi mereka tidak yakin mana yang akan berkinerja lebih baik: Gambar vs Video.
Hipotesis: Dengan laman landas baru yang dibuat dengan sinyal kepercayaan, video akan membuat laman berperforma lebih baik daripada jika memiliki gambar.
Hasil: Versi video yang menampilkan penduduk berbicara tentang pengalaman luar biasa mereka dengan Brookdale kalah dari versi dengan gambar statis. Faktanya, gambar statis meningkatkan pendapatan sebesar $106.000.
Apa yang dapat Anda pelajari dari ini: Sekali lagi, praktik terbaik tidak dapat mempertahankan diri dalam pengujian A/B. Saya tidak mengatakan semua praktik terbaik itu buruk, tetapi selalu uji untuk mengetahui strategi pemasaran apa yang berhasil untuk audiens dan bisnis unik Anda.
Posisi Formulir Halaman Arahan
Berikut adalah contoh yang bertentangan:
Hipotesis: Jika kita memindahkan formulir halaman arahan dari sisi kanan ke tengah halaman arahan, akan ada lebih banyak pengiriman formulir.
Hasil:
Meskipun halaman arahan sudah dioptimalkan dan menghasilkan tingkat konversi 11%, pemosisian ulang formulir yang sederhana ini meningkatkan tingkat konversi menjadi 16%.
Apa yang dapat Anda pelajari dari ini: Memiliki formulir Anda di tengah halaman Anda bukanlah "praktik terbaik", tetapi seseorang ingin mencoba fungsi yang berbeda dan mengambil kesempatan untuk lebih mengoptimalkan halaman yang sudah dioptimalkan.
Contoh Email Pengujian A/B
Designhill.com: Gaya Judul Email
Ketika platform crowdsourcing peer-to-peer untuk seniman grafis, Designhill, ingin mengirim buletin email beberapa hari sebelum Natal untuk mempromosikan posting blog, mereka bertanya-tanya judul apa yang memiliki rasio klik-tayang tertinggi.
Hipotesis: Menggunakan judul blog sebagai judul email sudah cukup untuk menarik klik dibandingkan dengan gaya judul ajakan bertindak.
Judul blog: Top 10 Strategi SEO Off-Page untuk Startup di 2015
Judul gaya CTA: Lihat Postingan Terbaru Saya – 10 Strategi SEO Off-Page Teratas untuk Startup pada tahun 2015
Hasil: Gaya judul blog berkinerja lebih baik dengan RKT 5,84% lebih tinggi dan rasio buka 2,57% lebih tinggi daripada versi gaya CTA.
Apa yang dapat Anda pelajari dari ini: Semakin dekat manfaat judul Anda dengan awal, semakin kecil peluang Anda kehilangan audiens. Dapatkan manfaat lebih dekat ke awal tajuk utama email Anda dan uji untuk melihat apakah kinerjanya lebih baik.
Judul Email “Merry Christmas” vs “Happy Holidays”
Apa yang harus menjadi judul utama email liburan Anda jika Anda mencoba membuat orang datang ke situs Anda dan menelusuri koleksi Anda?
Hipotesis: Jika kita pergi dengan "Merry Christmas", itu akan mengungguli "Happy Holidays" atau kombinasi keduanya.
Hasil: Benar sekali (dalam hal ini, tentu saja). “Merry Christmas” menghasilkan CTR 2,57% lebih tinggi. Lihat detailnya di tangkapan layar di bawah ini:
Apa yang dapat Anda pelajari dari ini: Secara pribadi, saya lebih suka disambut dengan "Selamat Natal" dibandingkan dengan "Liburan Bahagia" yang tidak jelas atau saudara perempuannya "Pujian Musim Ini". Ini sedikit mengganggu saya. Tapi yang terakhir lebih inklusif dan bekerja lebih baik untuk audiens yang lebih besar dan lebih beragam.
Microsoft: Skema Warna Email
Microsoft ingin lebih banyak orang mengklik tautan di email mereka dan menguji efek skema warna. Ini termasuk tombol, latar belakang, dan warna teks.
Hipotesis: Skema warna yang berbeda akan berpengaruh signifikan terhadap CTR.
Versi A (latar belakang putih, gambar produk lengkap, dan CTA ungu) vs Versi B (latar belakang oranye, gambar produk yang dipangkas, dan CTA merah muda).
Hasil: Versi A (dengan latar belakang putih) memiliki klik-tayang 325% lebih banyak daripada versi B.
Apa yang dapat Anda pelajari dari ini: Saya akan menguji skema warna lain karena bayangan oranye ini mungkin terlalu agresif secara visual. Jadi, pertimbangkan untuk menguji warna yang lebih lembut dan lebih damai untuk mengalahkan kontrol. Beberapa hal seperti warna latar belakang mungkin tidak ada di bagian atas ide pengujian pemasaran email Anda, tetapi dampaknya dapat mengubah bisnis Anda secara virtual.
Contoh PPC Pengujian A/B
Adspresso: Salinan Iklan Facebook
Adspresso menjalankan dua Iklan Facebook untuk melihat mana yang akan menarik paling banyak suka.
Hipotesis: Salinan iklan berbeda yang mengatakan "tips pro" akan mengalahkan yang mengatakan "tips harian" + "& tingkatkan ROI Anda!".
Hasil: Ternyata menambahkan “& meningkatkan ROI Anda!” tidak dapat menyelamatkan versi B agar tidak dilenyapkan oleh versi A. Versi A mendapat 70 suka dan versi B mendapat 0.
Apa yang dapat Anda pelajari dari ini: Sering kali, orang menginginkan tip yang memberi tahu mereka sesuatu yang belum mereka ketahui. "Tips harian" terdengar seperti itu akan menjadi banyak hari dari hal-hal acak yang Anda ketahui dan sesekali, Anda akan mendapatkan sesuatu yang mengejutkan. Itu tidak benar-benar membuat Anda bersemangat seperti "tips pro".
Di mana dalam salinan pemasaran media sosial Anda, Anda dapat menambahkan bahasa yang menarik?
Sony: Iklan Spanduk yang Dipersonalisasi
Ketika Sony tidak mendapatkan hasil yang mereka inginkan dari iklan spanduk mereka, mereka memutuskan untuk mengubah salinan dan menguji cara untuk membuatnya terdengar lebih pribadi.
Hipotesis: Iklan yang dipersonalisasi menghasilkan tingkat konversi yang lebih tinggi daripada iklan promosi.
Hasil: Ada level untuk personalisasi. Ada yang mengatakannya dan kemudian menciptakan perasaan personalisasi.
Versi A yang mengatakan Buat laptop VAIO Anda sendiri berkinerja lebih baik daripada dua lainnya. Itu memiliki RKT 6% lebih banyak dan ditambahkan ke keranjang 21,3% lebih banyak daripada kontrol.
Apa yang dapat Anda pelajari dari ini: Salinan iklan yang berbicara langsung kepada audiens dengan nada pribadi menggunakan kata-kata seperti "Anda" dan "milik Anda" menciptakan hubungan emosional yang lebih kuat yang sering kali diterjemahkan menjadi kesuksesan yang lebih baik dengan iklan tersebut.
Iklan PPC: Salinan CTA
Brad Shorr memberi tahu Wordstream tentang pengujian A/B iklan PPC yang dijalankan timnya untuk menemukan salinan CTA yang berkinerja terbaik di antara:
A. Dapatkan potongan $10 untuk pembelian pertama. Pesan online sekarang!
B. Dapatkan tambahan $10 off. Pesan online sekarang.
Hipotesis: CTA A akan menghasilkan rasio klik-tayang yang lebih tinggi daripada CTA B.
Hasil: Rasio klik-tayang CTA B, pada kenyataannya, dua kali lipat dari versi A.
Apa yang dapat Anda pelajari dari ini: Sepertinya "tambahan" berhasil jika dibandingkan dengan mengambil sesuatu yang "dilepas". Ini memiliki penguatan yang lebih positif. Itu sesuatu yang layak untuk diuji.
Contoh Shopify Pengujian A/B
Oflara: Menu Mega
Oflara bereksperimen dengan mega menu yang menampilkan produk terlaris di bilah navigasi di setiap kategori produk. Ini juga berisi tautan CTA untuk melihat koleksi lengkap.
Ini dimaksudkan untuk menampilkan penjual terbaik di navbar, berbeda dengan menu sederhana yang tidak memiliki drop-down.
Hipotesis: “Jika kami menggunakan menu situs untuk menyoroti penawaran terbaik kami, ini akan meningkatkan pendapatan toko kami.”
Hasil: Setelah menjalankan tes, variasi adalah pemenang yang jelas dengan peningkatan pendapatan sebesar 53%.
Apa yang dapat Anda pelajari dari ini: Menu mega dapat menjadi real estat yang berharga untuk situs Shopify. Anda dapat menguji ini untuk melihat apakah itu beresonansi dengan audiens Anda.
BattlBox: Strategi Pemasaran Konten E-niaga yang Dipersonalisasi
BattlBox mendistribusikan kotak langganan bertahan hidup/taktis. Mereka ingin tahu tentang bagaimana menyesuaikan pengalaman beranda mereka dapat memberikan wawasan untuk mengoptimalkan saluran penjualan mereka secara keseluruhan.
Hipotesis: Menampilkan segmen berbeda dari pelanggan yang kembali ke pengalaman konten terpisah di beranda situs akan meningkatkan keterlibatan dan tingkat konversi.
Hasil: Setelah bereksperimen dengan pengalaman konten yang berbeda, mereka menemukan varian unik yang meningkatkan rasio konversi segmen prospek sebesar 30% dibandingkan varian reguler yang dialami orang lain.
Apa yang dapat Anda pelajari dari ini: Merek e-niaga dapat memanfaatkan pengalaman konten yang dipersonalisasi untuk meningkatkan keterlibatan situs bagi pengguna yang kembali. Pengalaman pengguna yang disesuaikan ini terasa jauh lebih pribadi terutama ketika Anda memiliki basis pelanggan yang besar dan beragam.
Peringkat Bintang vs Tanpa Peringkat Bintang
Beberapa toko Shopify tidak memiliki ulasan produk dan peringkat bintang seperti yang Anda temukan di Amazon. Mungkinkah hal itu membuat pendapatan mereka tidak mencapai potensi penuhnya?
Growthrock.co menguji ini untuk salah satu klien mereka.
Hipotesis: Menambahkan ringkasan peringkat bintang ulasan dapat meningkatkan nilai tambah ke keranjang dan rata-rata pesanan.
Hasil: Ketika mereka menambahkan peringkat bintang di bagian atas halaman detail produk (PDP) dalam satu variasi, itu meningkatkan rasio konversi sebesar 15% dengan signifikansi statistik 94% dan meningkatkan pendapatan per sesi sebesar 17% dengan signifikansi statistik 97%.
Nilai pesanan rata-rata juga naik sedikit sebesar 2,4%, tetapi ini sebagian besar disebabkan oleh tingkat konversi yang lebih tinggi.
Apa yang dapat Anda pelajari dari ini: Orang-orang sebenarnya ingin tahu apakah orang lain menyukai produk Anda. Tidak memiliki peringkat bintang, testimonial, atau ulasan pada PDP Anda dapat bekerja untuk merek mewah seperti Louis Vuitton, tetapi tidak semua orang.
Kesimpulan
Saya harap daftar contoh pengujian A/B ini telah menyalakan bohlam CRO yang cemerlang di kepala Anda dan membantu Anda mengetahui dari mana harus memulai dalam menjalankan eksperimen Anda sendiri.
Jika Anda sudah mengetahui proses langkah demi langkah untuk pengujian A/B, bagaimana merumuskan hipotesis yang mengarah pada wawasan yang dapat ditindaklanjuti, dan bagaimana membuat alat pengujian A/B Anda bekerja sesuai keinginan Anda, maka Anda memiliki ide untuk unggul sekarang. .