Mendapatkan Pengujian A/B Sehalus Mungkin
Diterbitkan: 2015-11-17
Di Convert, kami memahami nilai di balik alat pengujian A/B dalam meningkatkan rasio konversi dan mendapatkan hasil maksimal untuk situs klien Anda. Namun, proses pengujian adalah urusan yang sangat teknis dan kompleks yang dapat menimbulkan banyak kebingungan dan miskomunikasi.
Untuk mendapatkan pengujian yang paling efektif dan efisien, salah satu Pendiri Convert, Dennis van der Heijden, membahas tiga hal yang harus dilakukan setiap orang saat menerapkan pengujian A/B:
- Instal kode sekaligus
- Pra-periksa situs untuk pemasangan lanjutan
- Ketahui cara kerja bagian dalam pengujian A/B
Ada banyak hal untuk masing-masing dari tiga langkah ini, dan kami memiliki detail dan kiat yang Anda perlukan untuk mendapatkan pengujian yang berfungsi baik untuk Anda dan klien Anda.

Instal Kode Sekaligus
Langkah nyata pertama untuk mendapatkan penggunaan pengujian A/B Anda yang lebih efisien dan produktif adalah memastikan bahwa pengujian diinstal secara efisien dan efektif. Situs web besar dengan banyak pengujian dan perlunya beberapa baris kode untuk dipasang membuka pintu ke sejumlah kesalahan berbeda yang akan menimbulkan kebingungan, miskomunikasi, dan pengujian yang tidak akan memberikan hasil terbaik. Berikut adalah daftar periksa semua yang harus Anda lakukan pada akhir hari pertama memulai pengujian A/B Anda, dan kemudian detail untuk memastikannya selesai:
1. Dapatkan kode instal dalam satu paket
Seperti yang dicatat oleh Dennis van der Heijden, “Antara Anda dan klien, pemasangan kode bolak-balik biasanya merupakan faktor penundaan yang besar.” Cara terbaik untuk memulai pengujian Anda adalah dengan mengirimkan satu paket dengan template yang berisi kode untuk setiap halaman, daripada dua puluh halaman alamat email yang berbeda satu per satu. Juga, buat indeks untuk Anda gunakan di mana Anda dapat melacak halaman apa yang membutuhkan apa.
Antara Anda dan klien, bolak-balik menginstal kode biasanya merupakan faktor penundaan yang besar
2. Instal kode di header
Ketika sampai pada proses instalasi yang sebenarnya, penting untuk memasukkan kode langsung ke header. Mungkin ada beberapa perdebatan tentang apakah ini perlu atau tidak, tetapi sebuah studi Konversi mengkonfirmasi bahwa membiarkan kode keluar dari header menyebabkan kedipan – sepersekian detik di mana halaman tiba-tiba berubah untuk mengakomodasi pengujian A/B. Bahkan yang lebih penting, penelitian tersebut menemukan bahwa “kedipan” ini memiliki dampak negatif pada tingkat konversi, menyebabkan hampir 1 dari 5 orang meninggalkan situs sebelum mengonversi yang tidak akan melakukannya.
3. Pikirkan masa depan
Hal lain yang perlu diingat sejak awal ujian Anda adalah masa depan. Bahkan jika Anda menjalankan pengujian yang relatif sederhana untuk klien saat ini, memetakan CMS agar sesuai dengan infrastruktur klien dapat membawa manfaat besar di kemudian hari. Sistem Convert memudahkan untuk membuat bidang khusus di menu tarik-turun, misalnya titik harga tertentu atau halaman tertentu dalam proses check-out. Hal ini memudahkan penerapan pengujian baru di masa mendatang, dan untuk membantu Anda memastikan bahwa setiap peristiwa sasaran dalam proses checkout multilangkah diperhitungkan sejak awal hanya dengan satu penginstalan.
4. Atasi setiap pertanyaan TI pada hari pertama
Kode-kode ini dapat menghasilkan banyak pertanyaan untuk departemen TI. Anda akan mengurangi rantai email yang panjang dan menyampaikan pesan antara teknisi Convert dan klien Anda dengan memberikan mereka dokumentasi menyeluruh dan terkini yang membahas masalah TI utama. Convert mencapai ini dengan menyimpan panduan implementasi yang berguna yang dapat Anda sampaikan langsung ke departemen TI, memberi mereka akses langsung ke informasi kami yang paling berguna untuk pemecahan masalah.
5. Periksa fungsionalitasnya
Ini bisa menjadi salah satu tugas yang lebih besar dalam daftar Anda, dan kami akan membahasnya lebih lanjut di bagian berikutnya, tetapi satu tempat sederhana dan penting untuk memulai pada hari pertama adalah dengan kode Ajax. Ini adalah kode yang mengeksekusi dan menyegarkan sesuatu pada halaman setelah dimuat pertama kali. Karena pengujian A/B Convert dirancang untuk memuat halaman dengan cepat sejak awal, ini dapat menyebabkan masalah dengan kode Ajax ini–tetapi Convert memang memiliki solusi, seperti plugin Chrome yang tersedia. Penting untuk mengetahui apakah sesuatu akan menghalangi ujian sesegera mungkin.
Pra-Periksa untuk Pemasangan Lanjutan
Jangan salahkan alatnya… persiapkan dengan baik.
Hal terakhir pada daftar periksa di atas adalah yang harus Anda habiskan paling banyak waktu. Ada banyak masalah kompleks yang dapat muncul dengan pengujian yang melibatkan URL, login, domain, dan pendapatan di luar situs. van der Heijden menekankan bahwa apa pun alat pengujian A/B yang Anda pilih, tidak pernah ada gunanya menyalahkan masalah pada alat tersebut. Seperti yang dia katakan, “Itu tidak membantu Anda karena Anda mungkin memilih alat itu. Jika klien memilih alat, Anda melukai egonya atau mengatakan dia salah memilih. Jika Anda memilih alat ini, Anda hanya merusak citra Anda. Jangan salahkan alatnya… persiapkan dengan baik.”
URL
Mulailah dengan memperhatikan URL halaman produk yang mungkin Anda uji. Seringkali URL terstruktur akan mudah untuk menambahkan alat, dengan jelas menampilkan nama yang berkorelasi dengan produk. Namun, URL tidak terstruktur yang diberi nama untuk tujuan SEO atau spesial akan sulit untuk ditandai sekaligus. Anda perlu menggunakan alat lain seperti skrip java untuk menandai halaman ini, jadi penting untuk secara proaktif menyadari potensi masalah. Ini juga merupakan waktu untuk mempertimbangkan secara khusus pop-up atau informasi yang melayang, kode Ajax tersebut, dan alat tersebut perlu dibangun ke dalam Java atau CMS.
Subdomain dan Lintas Domain
Konversi telah membangun cara mudah dalam alat untuk melihat semua subdomain dan lintas domain yang terkait dengan klien Anda. Namun, bukan berarti Anda harus mengabaikannya. Perhatikan baik-baik apa yang terkait dengan halaman klien Anda. Pelacakan pendapatan, baik melalui Google Analytics dan alat yang lebih canggih dari Konversi, dapat menjadi sulit dan bahkan tidak mungkin jika halaman checkout mengarah ke domain Yahoo atau Shopify yang tidak ditingkatkan versinya—sehingga berbahaya untuk menjanjikan pengujian dan data keras dari pemeriksaan- proses keluar.

Pengujian Dibalik Login
Banyak alat pengujian A/B belum menemukan cara agar pengujian berfungsi di balik fitur login, tetapi untungnya Convert memiliki solusi mudah untuk masalah ini. Konversi menggunakan pengaturan lintas sesi, sesuatu yang tidak mungkin dilakukan bahkan setahun yang lalu, yang berarti bahwa lingkungan yang aman dapat masuk pada satu tab dan editor visual Konversi pada tab lain dapat dibuka untuk tetap menampilkan sesi yang sama–membuatnya lebih mudah untuk merancang tes untuk check-out dan gerobak.
Pengelola Tag
Sebagian besar pengelola tag, termasuk Google Analytics, menimbulkan lebih banyak masalah daripada nilainya dengan pengujian A/B. Van der Heijden menyarankan, “Setiap kali Anda menemukan penggemar tag manager, cukup peringatkan mereka bahwa alat pengujian A/B ini, dan tidak ada alat pengujian A/B, yang dapat melakukan ini dengan benar, jadi kami semua lebih memilih untuk langsung header kecuali Anda memiliki Tealium atau Adobe.”
Sasaran Luar Situs dan Pelacakan Pendapatan
Beberapa perusahaan mungkin memiliki sumber pembayaran atau konversi tambahan yang tidak dapat dilacak secara langsung melalui proses check-out online. Convert memiliki solusi untuk ini sehingga mereka masih dapat dimasukkan dalam pengujian. Anda hanya perlu mengidentifikasinya lebih awal dan memberikan ID Eksperimen dan ID variasi, lalu memberi tahu Convert melalui webhook saat hal itu terjadi.

Ketahui Cara Kerja Bagian Dalam Pengujian A/B
Saat memilih alat pengujian A/B, ada banyak klaim di luar sana yang berfokus pada klaim pengujian sinkron dan asinkron. Selain itu, mereka mungkin mengklaim bahwa ukuran skrip dapat memiliki pengaruh yang signifikan pada waktu muat untuk eksperimen. Van der Heijden mencoba untuk menyanggah beberapa mitos dan kesalahpahaman ini, dengan mencatat bahwa, “Terus-menerus menyalin artikel orang lain untuk beberapa konten benar-benar dapat membahayakan Anda. Banyak dari artikel ini tidak mengatakan yang sebenarnya, atau sama sekali tidak tahu apa yang mereka bicarakan.”
Baginya, yang paling penting adalah memahami bahwa alat yang berbeda melakukan hal yang sangat berbeda, mengetahui perbedaan nyata antara sinkronisasi dan asinkron, dan mengapa penting untuk memiliki alat pengujian A/B yang bekerja secepat mungkin.
Banyak dari artikel ini tidak mengatakan yang sebenarnya, atau sama sekali tidak tahu apa yang mereka bicarakan.
Hal penting pertama yang perlu diketahui dalam melihat secara kritis klaim tentang pengujian A/B adalah perbedaan antara sinkronisasi dan asinkron. Beberapa alat atau artikel akan membuang istilah-istilah ini dalam klaim mereka tentang menjadi sangat cepat.

Eksperimen sinkronisasi akan memungkinkan 100 milidetik untuk lalu lintas jaringan, kemudian 200 milidetik untuk memuat pengujian A/B yang disinkronkan, dan terakhir 400 md untuk memuat yang lainnya. Eksperimen Async akan memungkinkan 100 milidetik, sedangkan pengujian A/B dan semua hal lain di halaman akan mulai dimuat sesegera mungkin dan bersamaan. Realitas bagaimana Convert, dan alat lainnya bekerja, adalah perpaduan dari dua ide ini:

Untuk pengguna yang mengalami eksperimen Konversi:
- Pada 0,3 detik tidak ada yang terlihat, koneksi sedang dibuat.
- Pada 0,35 html mulai tersedia untuk manipulasi, saat itulah konversi mulai bekerja dan menentukan variasi yang akan diaktifkan berdasarkan cookie saat halaman masih dirakit.
- Convert menyembunyikan tubuh dari pengguna sepenuhnya selama satu detik dengan halaman putih.
- Setiap 0,05 detik Konversi membahas apa yang tersedia dan perlu diubah untuk pengujian.
- Pada 1,5 detik, halaman sudah siap.
Alat lain dapat membuat perubahan dalam jumlah waktu yang sama, tetapi dengan perubahan yang terlihat (berkedip). Beberapa alat lain akan menunggu sampai HTML sudah tersedia sepenuhnya pada 1,5 detik, artinya ada tambahan 2 – 3 detik pengguna harus menunggu halaman tersedia.
Tentu saja, kita berbicara tentang seperseratus detik di sini, bahkan dengan kedipan. Namun, seperti yang telah kita bahas sebelumnya, Convert menemukan bahwa kedipan atau penundaan milidetik ini dapat berdampak besar pada konversi. Banyak alat yang mengalami kedipan atau penundaan akan mengarah ke data dengan pengujian untuk menunjukkan bahwa konversi telah ditingkatkan–tetapi lebih sering daripada tidak, melihat ke Google Analytics akan menunjukkan penurunan konversi antara periode pra-pengujian dan periode di mana pengguna mengalami berkedip dan penundaan.
Memilih dan menerapkan alat yang tepat untuk pengujian A/B klien Anda melibatkan semua pengetahuan teknis ini dan banyak lagi. Namun, yang paling penting adalah Anda masuk ke pengujian A/B dengan persiapan dan kesiapan untuk memastikan bahwa Anda telah memilih alat yang tepat, menyiapkannya untuk situs, dan membuat proses penginstalan semudah mungkin untuk klien Anda.
Untuk menyaksikan webinar selengkapnya Anda dapat mendaftar di sini, di bawah ini Anda akan menemukan presentasinya.
Jika Anda siap untuk mengalami Konversi Eksperimen dan tim ahli kami, kami mengundang Anda untuk memulai uji coba gratis 15 hari.