Panduan untuk Berkolaborasi Dengan Vendor Alat Pengujian A/B Anda untuk Menjalankan Eksperimen Lebih Banyak (dan Lebih Baik)

Diterbitkan: 2022-08-18
Panduan untuk Berkolaborasi Dengan Vendor Alat Pengujian A:B Anda untuk Menjalankan Lebih Banyak (dan Lebih Baik) Eksperimen

Anda mungkin pernah mendengar mitos ini: Kita menggunakan 10% otak kita.

Kembali ketika kebanyakan orang berpikir itu benar, kami berfantasi tentang kemungkinan menggunakan lebih banyak. Bahkan ada seluruh film yang dibintangi Scarlett Johansson — Lucy.

melalui GIPHY

Namun dengan alat pengujian A/B, banyak tim pengoptimalan yang penggunaannya pasti di bawah 100%. Ya, Anda menjalankan pengujian dan menerapkan pemenang dari waktu ke waktu, tetapi apakah Anda memiliki ikatan yang kuat dengan vendor alat pengujian A/B Anda?

Selain orientasi dan memberikan dukungan, vendor alat Anda dapat menjadi mitra Anda dalam eksperimen. Anda dapat memanfaatkan keahlian dan pengalaman mereka dalam bekerja dengan pelanggan di seluruh industri dan vertikal untuk menjalankan eksperimen yang lebih andal.

Hal ini sangat penting saat ini mengingat fakta bahwa pemotongan anggaran adalah norma dan pemimpin program pengoptimalan harus mengoptimalkan pendanaan eksperimen mereka.

Dalam panduan ini, kami akan menunjukkan cara berkolaborasi dengan vendor secara lebih efektif, sehingga Anda bisa mendapatkan hasil maksimal dari investasi pengujian Anda.

bersembunyi
  • Apa Arti Perlambatan Ekonomi Untuk Program Pengoptimalan Anda? (Dan Mengapa Vendor Anda adalah Sumber Daya yang Kurang Dimanfaatkan)
  • 5 Cara Meningkatkan Kolaborasi Vendor-Tim untuk Lebih Banyak Tes dan Lebih Banyak Kemenangan
    • 1. Pikirkan Alat Anda (dan Vendor) sebagai Investasi
    • 2. Jadilah Strategis dalam Komunikasi Anda
      • Bagikan Kemenangan
      • Biarkan Kekhawatiran Diketahui
      • Bagi menjadi Sprint 6 minggu
      • Susun Rapat Anda
      • Siapkan Irama Rapat
      • Tetapkan Satu Titik Kontak dengan Vendor Anda
    • 3. Tentukan Area Tanggung Jawab
    • 4. Bersiaplah untuk Palung Kekecewaan
    • 5. Manfaatkan Pendidikan & Pemberdayaan
  • Takeaways Kunci

Ayo pergi!

Apa Arti Perlambatan Ekonomi Untuk Program Pengoptimalan Anda? (Dan Mengapa Vendor Anda adalah Sumber Daya yang Kurang Dimanfaatkan)

"Apakah ini gelembung teknologi lain yang meledak?"

Itu sudah menjadi berita utama sejak Mei. Tetapi kenyataannya adalah investor tidak lagi terlalu yakin bahwa mereka akan menghasilkan uang dari industri teknologi sebanyak yang mereka masukkan ke dalamnya.

Investasi tunai tidak akan datang seperti dulu, jadi startup sekarang harus menyesuaikan dengan penilaian baru mereka dan merencanakan anggaran mereka sesuai dengan itu.

Ini tidak hanya mempengaruhi startup; itu adalah industri yang luas. Bahkan Google sedang menyesuaikan.

Berbicara kepada staf tentang hal itu, CEO Google, Sundar Pichai berkata, “Kita harus lebih berwirausaha, bekerja dengan urgensi yang lebih besar, fokus yang lebih tajam, dan lebih banyak rasa lapar daripada yang telah kita tunjukkan pada hari-hari yang lebih cerah”.

Departemen akan merevisi rencana pertumbuhan mereka untuk menyelaraskan dengan anggaran yang dipotong - "urgensi yang lebih besar" dan "fokus yang lebih tajam". Pemotongan anggaran mungkin mempengaruhi program pengoptimalan Anda, tetapi apa artinya itu bagi langkah Anda selanjutnya?

Menghabiskan lebih sedikit untuk eksperimen? Tentu. Tapi bagaimana Anda melakukannya dan tetap menarik ROI maksimum?

Uji lebih banyak. Tingkatkan kecepatan pengujian Anda untuk lebih memahami perubahan perilaku konsumen. Sekaranglah waktunya untuk berhenti membuat perubahan acak dan memanfaatkan pengujian sebagai cara yang divalidasi untuk menyelaraskan pengalaman dengan apa yang diinginkan calon pembeli.

Sekarang, lebih dari sebelumnya, Anda membutuhkan lebih banyak kejelasan tentang apa yang berhasil — sehingga Anda dapat mengirimkan perubahan yang mendorong keuntungan lebih cepat dan lebih sering.

Kelangkaan melahirkan kejelasan.

Sundar Pichai, CEO Google

Menjalankan lebih banyak tes hanyalah satu aspek. Menjalankan tes ini dengan biaya lebih rendah adalah hal lain. Dan ada lebih dari sekadar mendapatkan alat pengujian A/B yang lebih terjangkau.

Mari saya ilustrasikan dengan roda gila pengujian A/B:

Roda gila pengujian A/B Microsoft
Sumber

Anda dapat mempercepat flywheel dan menurunkan biaya pengujian A/B dengan meningkatkan langkah 1 dan 5. Artinya, menjalankan lebih banyak pengujian A/B untuk mendukung lebih banyak keputusan dan menurunkan biaya manusia untuk pengujian A/B.

Organisasi yang benar-benar berbasis data menggunakan pengujian untuk mendukung keputusan dan, untuk pemula, ini adalah pengujian pertama Anda yang memulai roda gila. Setiap kali Anda kembali ke langkah 1, Anda membangun apa yang telah Anda pelajari di babak sebelumnya. Dan berputar-putar kita pergi.

Langkah 5 dimungkinkan ketika Anda merampingkan proses pengujian dengan berinvestasi dalam meningkatkan infrastruktur eksperimen Anda (langkah 4). Pengujian harus mudah diatur, memerlukan lebih sedikit intervensi manual, dan lebih murah. Hasil harus mudah dipahami dan praktis bagi non-statistik.

Dengan begitu, minat untuk menggunakan pengujian A/B untuk mendukung keputusan tumbuh secara alami, dan lebih banyak orang menggunakan alat pengujian A/B untuk menemukan peningkatan di organisasi Anda. Sekarang Anda menguji lebih banyak dan menarik ROI yang lebih tinggi dari eksperimen di berbagai departemen. Bukan hanya pemasaran.

Anda lihat, dampak dari langkah 4 — berinvestasi dalam alat pengujian A/B — menjadikannya win-win. Dan panduan ini adalah tentang jenis investasi ini: Mengembangkan hubungan kolaboratif dengan vendor alat pengujian A/B Anda sehingga Anda memiliki mitra dalam perjalanan pengoptimalan Anda.

Mitra Anda dalam pengoptimalan membuat Anda bertanggung jawab, bekerja dengan tim atau agensi internal Anda untuk memberikan pelatihan khusus alat yang sangat baik, dan meningkatkan efisiensi proses Anda dengan membagikan apa yang berhasil dengan pengguna sukses lainnya. Ini berarti Anda mengurangi waktu pengiriman pada pengujian Anda dan mengurangi biaya manusia untuk pengujian lebih jauh.

Dengan flywheel yang berfungsi seperti ini, tidak perlu menyalin tes. Itu bahkan bukan apa-apa. Sebagai gantinya, Anda melakukan iterasi berdasarkan pembelajaran pengujian A/B sebelumnya dan—melalui kolaborasi tanpa hambatan dengan vendor alat pengujian A/B Anda—pembelajaran orang lain untuk memajukan program eksperimen Anda.

Anda bahkan mungkin mencemooh meta-analisis tetapi Anda tidak dapat menyangkal fakta bahwa di mana manajemen dan struktur tim eksperimen yang bersangkutan, berdiri di atas bahu orang lain yang telah pergi sebelum Anda masuk akal. Tidak perlu menemukan kembali roda; sebuah ide yang kami pinjam dari buletin Positive John's Positive Experiments.

5 Cara Meningkatkan Kolaborasi Vendor-Tim untuk Lebih Banyak Tes dan Lebih Banyak Kemenangan

Sekarang untuk bagian yang berair.

Berikut adalah 5 cara Anda dapat menjadi lebih dari sekadar pengguna alat pengujian A/B dan menjalin hubungan dengan vendor Anda yang membawa program pengoptimalan Anda ke tingkat berikutnya:

1. Pikirkan Alat Anda (dan Vendor) sebagai Investasi

Daripada memperlakukan alat pengujian A/B Anda sebagai pusat biaya, pertimbangkan nilai yang akan ditambahkan ke program Anda. Dan mendapatkan alat yang bebas bug dan mumpuni tidak cukup untuk itu. Anda perlu tahu bagaimana menggunakannya untuk kapasitas penuh.

Itu tidak berarti menyelami banyak fitur yang tidak pernah Anda butuhkan. Sebaliknya, apakah ada cara alat Anda dapat meningkatkan kualitas wawasan kemajuan pertumbuhan yang Anda ekstrak yang Anda mungkin tidak tahu?

Jika Anda mencari nilai ini, Anda akan menemukannya—dan itu bisa berarti perbedaan antara tidak mendapatkan apa-apa dari alat pengujian A/B Anda versus menghasilkan dampak yang memutar roda gila pengujian A/B Anda lebih cepat.

Selain itu, ini juga akan membantu mengatasi kekecewaan lebih lanjut (lebih lanjut tentang ini di bawah) dan membantu Anda tetap berpikiran terbuka saat mendengarkan umpan balik dan saran vendor Anda.

Sangat penting untuk terbuka terhadap umpan balik dari vendor Anda. Wawasan dan pengamatan mereka bisa sangat berharga dalam membantu Anda menyempurnakan upaya pengoptimalan Anda.

Juga, menjaga pikiran terbuka saat bekerja dengan vendor sangat penting. Mereka mungkin memiliki cara yang berbeda dalam melakukan sesuatu daripada yang biasa Anda lakukan, tetapi jika Anda terbuka terhadap saran mereka, Anda mungkin akan terkejut dengan hasilnya .

David Scott, CEO Neutypechic

Cari tahu cara Anda dapat menghubungi tim dukungan: Email, obrolan, dan dukungan telepon. Dan yang tersedia dengan paket Anda saat ini.

Tentu saja, pastikan Anda memilih tim vendor yang benar-benar peduli dengan kesuksesan Anda dan tidak hanya membuat janji pemasaran. Mereka harus memiliki warisan dukungan, kolaborasi, dan kerja sama yang luar biasa.

Seperti ini:

Contoh ulasan positif untuk vendor alat pengujian A/B
Sumber

Dan ini:

Contoh kolaborasi positif antara vendor alat pengujian A/B dan klien
Sumber

Baik Anda memiliki tim internal atau bekerja dengan agen pengujian A/B, hubungan dengan tim dukungan vendor yang andal dan berpengetahuan luas ini akan terwujud — terutama selama perlambatan ekonomi.

Jika Anda seorang manajer atau pemimpin program eksperimen, banyak dari ini memang pekerjaan Anda. Tapi itu tidak berarti Anda tidak bisa bersandar pada keahlian vendor alat Anda untuk mendapatkan dukungan. Seringkali, mereka memiliki tim sukses pelanggan yang luar biasa yang dapat membantu melatih tim Anda tidak hanya pada platform spesifik mereka, tetapi juga pada praktik terbaik yang digunakan klien mereka yang paling sukses untuk mendapatkan hasil. Mengapa menemukan kembali roda? Gunakan pengalaman dan pencocokan pola mereka untuk menginformasikan program Anda.

Ini bukan hanya untuk menyanjung Convert, tetapi kemampuan mereka untuk membantu mendidik tim dan membantu dengan integrasi, menguji ide, dan peningkatan proses telah menjadi salah satu alasan besar saya terus memilih platform di atas pesaing lain di berbagai perusahaan.

Alex Birkett, Co-Founder Omniscient Digital

2. Jadilah Strategis dalam Komunikasi Anda

Tidak semua komunikasi efektif. Anda hanya akan melihat nilai dari kolaborasi apa pun ketika komunikasi selaras dengan tujuan tertentu, memungkinkan aliran ide dua arah yang lancar, dan dilakukan melalui saluran yang tepat.

Jadi, sebelum Anda menggunakan alat pengujian A/B, buatlah rencana tindakan yang jelas. Komunikasi strategis Anda harus mengikuti tip berikut:

Bagikan Kemenangan

Pernahkah Anda mengalami momen "nilai" pertama Anda dengan alat pengujian A/B? Ya? Itu keren. Bagikan dan minta umpan balik. Apa yang bisa lebih baik, dan apa saja ide langkah berikutnya yang bermanfaat?

Biarkan Kekhawatiran Diketahui

Jika Anda belum mendapatkan kemenangan pertama Anda, bicarakan dengan vendor Anda. Ekspresikan keprihatinan Anda dan bekerjalah dengan mereka untuk membawa Anda dan tim Anda ke momen berharga pertama itu. Atau, jika Anda sudah melewati waktu, bagaimana mereka dapat membantu Anda menemukan nilai yang konsisten?

Alternatifnya adalah menyerah dan menemukan alat pengujian A/B baru yang menurut Anda akan membuat Anda menang lebih cepat.

Tetapi beralih alat adalah proses yang mahal dan rumit. Hindari sampai Anda tidak punya pilihan karena Anda telah kehabisan pilihan Anda, dan alat ini tidak mencakup kasus penggunaan Anda yang paling umum dan penting. Atau jika vendor alat tidak peduli dengan bisnis Anda dan memperlakukan Anda seperti angka pendapatan di dasbor.

Bagi menjadi Sprint 6 minggu

Bagi tujuan pengujian A/B besar Anda menjadi beberapa bagian untuk diselesaikan dalam satu setengah bulan.

Fokus untuk menjaga agar semua orang selaras dengan tujuan tersebut — tim Anda dan tim sukses pelanggan vendor alat Anda. Pastikan semua orang memahami bagaimana organisasi Anda mengukur kesuksesan.

Susun Rapat Anda

Memiliki agenda yang menempel pada hal-hal penting. Ayo bersiaplah untuk memanfaatkan waktu terbatas yang Anda miliki.

Lacak rapat Anda dengan membuat rekaman (dan jika Anda menggunakan Zoom, gunakan aplikasi pencatat otomatis seperti Fathom).

Rekam eksperimen Anda dalam repositori pembelajaran sehingga Anda akan memiliki presentasi terstruktur untuk mempercepat vendor Anda mengetahui apa yang dilakukan tim Anda.

Andra Baragan berbicara tentang struktur serupa untuk pertemuan internal di Ontrack Digital:

Pastikan semua orang di tim Anda sangat familier dengan struktur ini. Anda akan menghabiskan lebih sedikit waktu untuk mencari tahu apa yang terjadi dan lebih banyak waktu untuk mengekstrak nilai dari kolaborasi Anda dengan vendor alat Anda.

Juga, pastikan Anda menghidupkan antusiasme dalam tim Anda. Seseorang dari program pengujian A/B Anda harus hadir di semua rapat — untuk menyelidiki, mengajukan pertanyaan, dan menjawabnya, sesuai kebutuhan.

Siapkan Irama Rapat

Percayai kami saat kami mengatakan bahwa vendor alat pengujian A/B Anda memahami pentingnya Anda merasakan nilai berkelanjutan dengan aplikasi mereka. Karena jika tidak, Anda mungkin akan beralih berpikir bahwa Anda memiliki alat yang buruk.

Ini mungkin dalam agenda pengurangan churn mereka. Jadi, mengapa Anda tidak memanfaatkan ini?

Jadi, menjangkau. Atur rutinitas pertemuan (karena satu pertemuan tidak memotongnya). Ini harus menjadi hubungan yang berkelanjutan di mana Anda mengatasi tantangan dan kembali dengan yang baru.

Tetapkan rutinitas pertemuan. Sangat penting untuk menjadwalkan waktu bagi semua individu yang terlibat dalam proses pengoptimalan untuk bertemu dan mendiskusikan apa yang perlu dilakukan selanjutnya secara teratur. Ini akan memungkinkan Anda untuk melacak statistik Anda dan memberi tahu semua orang tentang kemajuan upaya tim Anda .

Matthew Post, salah satu pendiri WCAG Pros

Dan seberapa sering Anda harus mengadakan pertemuan ini dengan vendor alat pengujian A/B Anda? Dua minggu sekali? Bulanan?

Tetapkan irama komunikasi yang teratur dengan vendor Anda. Ini bisa mingguan, dua mingguan, atau bulanan, tetapi pastikan untuk menyentuh basis secara teratur sehingga Anda dapat tetap mengetahui fitur dan kemampuan baru, dan memberikan umpan balik tentang kinerja alat untuk Anda.

Mushfiq Sarker, CEO, StreamSEO

Temukan rutinitas yang sesuai dengan program eksperimen Anda.

Tetapkan Satu Titik Kontak dengan Vendor Anda

Ini adalah orang yang bertanggung jawab untuk menangani permintaan Anda dan mewakili tim vendor Anda dalam semua hal yang menyangkut Anda.

Ini lebih baik daripada diteruskan dari tangan ke tangan, terasa lebih pribadi, dan sebenarnya lebih produktif dalam jangka panjang.

Pertimbangkan untuk bernegosiasi atau mengamankan satu titik kontak dengan vendor. Ini memastikan bahwa Anda akan memiliki seseorang yang benar-benar memahami tuntutan Anda seiring dengan bertambahnya waktu Anda menggunakan pengujian A/B atau prioritas Anda berubah. Hubungan kerja yang solid dengan satu titik kontak membuat pengoptimalan penghematan dan menghindari biaya menjadi lebih mudah.

David Bitton, CMO di DoorLoop

3. Tentukan Area Tanggung Jawab

Tentukan apa yang menjadi tanggung jawab Anda dan vendor. Menguraikan harapan sejak awal membuat hubungan menjadi sukses dan mempercepat kemajuan pengoptimalan Anda.

Meskipun mungkin tampak jelas, strategi yang kami gunakan yang memiliki dampak terbesar adalah menetapkan area tanggung jawab sejak awal dan menyampaikan harapan ini secara konsisten selama penugasan. Ini menawarkan kejelasan bagi semua pihak tentang hasil yang diinginkan dan sumber daya yang dibutuhkan untuk mencapai hasil tersebut.

Menentukan sumber daya dan hasil yang diinginkan memastikan bahwa anggaran dialokasikan dengan tepat. Kami juga secara rutin menilai proses kolaboratif untuk mendeteksi masalah dan mengatasinya .

David Bitton

Sekarang, tidak cukup untuk mengatakan siapa melakukan apa dan kapan. Kodifikasi ini dalam perjanjian hukum Anda. Inilah sebabnya mengapa beberapa pengguna lebih memilih kontrak tahunan. Lebih mudah untuk merujuk ke kesepakatan dan mengidentifikasi siapa yang menjatuhkan bola.

Tetapi bahkan jika Anda tidak memiliki perjanjian yang mengikat secara hukum, membawa hal ini dalam panggilan orientasi Anda akan memudahkan jalan ke depan.

Jadi, catatlah kesepakatan itu. Kami manusia; kami lupa. Dan jika ada orang lain yang bergabung (dalam tim Anda atau vendor Anda), perjanjian ini membuat semua orang setuju.

Di tim internal Anda, Anda dapat melacak tanggung jawab dalam program eksperimen Anda dengan matriks RACI.

Matriks RACI adalah bagan yang memetakan tujuan utama, pencapaian, tugas, dan tanggung jawab dalam sebuah proyek untuk semua orang yang terlibat.

RACI berarti bertanggung jawab, akuntabel, dikonsultasikan, dan diinformasikan:

  • Bertanggung jawab: Siapa yang bertanggung jawab untuk menyelesaikan tugas-tugas seperti membuat keputusan, melaksanakan tes, merekam tes, dll?
  • Akuntabel: Siapa yang mendelegasikan tugas dan memastikannya selesai tepat waktu?
  • Dikonsultasikan: Masukan siapa yang perlu dikonsultasikan tentang tugas? Siapa yang terlibat dalam memberikan umpan balik untuk menyelesaikan proyek?
  • Diinformasikan: Siapa yang perlu mengetahui perkembangan terkini?

Kami telah berbicara tentang cara membuat dan menggunakan bagan RACI untuk proyek eksperimen Anda. Berikut tampilannya:

Gunakan grafik RACI dalam eksperimen
Sumber

Bagikan matriks RACI dari program eksperimen Anda dengan vendor Anda. Mereka akan menghargai transparansi dan akan menavigasi permintaan dengan lebih baik dari tim Anda.

Anda dapat menambahkan lapisan transparansi ekstra dengan menyiapkan pelacak real-time dari pengalaman Anda dengan alat pengujian dan membagikannya dengan vendor Anda.

Penting juga untuk menyiapkan proses untuk memantau kemajuan dan berkomunikasi satu sama lain tentang apa yang berhasil dan tidak saat Anda menggunakan alat ini bersama-sama. Ini sangat penting jika ada banyak orang yang terlibat dalam penggunaan alat ini sekaligus (seperti jika tim pemasaran Anda menggunakannya sementara tim teknik Anda juga menggunakannya).

Ryan Stewart, Mitra Pelaksana Pelatihan Cetak Biru

Ini bisa berupa dokumen di Notion, Confluence, atau Google Doc termasuk tangkapan layar atau rekaman video singkat dari pengalaman Anda. Vendor alat pengujian A/B Anda akan menyukainya! Dan jika Anda mengalami hambatan saat mengerjakan proyek eksperimen, pemblokiran Anda akan lebih cepat.

Pada catatan itu, kami sangat berharap Anda berkomunikasi dengan vendor Anda. Dan mereka menawari Anda sesi orientasi!

Sesi orientasi Anda adalah sambutan yang membiasakan Anda dengan tim vendor, menetapkan harapan untuk perjalanan, dan masuk ke orientasi Anda. Yaitu antara 6 dan 12 bulan.

Ingat, tanggapan tertulis dari tim dukungan tidak membentuk sesi orientasi Anda.

4. Bersiaplah untuk Palung Kekecewaan

Anda berada di dalamnya atau menuju ke sana.

Jika Anda belum mengalami kekecewaan, itu adalah nama yang bagus untuk tahap ketiga dari Siklus Hype Gartner; kekecewaan setelah ekspektasi dan hype seputar ide atau produk telah mencapai puncaknya.

Bagan Siklus Hype Gartner
Sumber

Ini seperti panggilan keras terhadap kenyataan yang datang dengan kerendahan hati dan kurang percaya diri pada alat Anda. Namun di sisi positifnya, ini membuat tim Anda lebih berpikiran terbuka terhadap ide dan penyesuaian baru.

Dan jika Anda bukan satu-satunya yang mengalami kekecewaan, Anda harus meyakinkan pemangku kepentingan lain bahwa Anda dapat menghasilkan sesuatu dari uang yang dibelanjakan sejauh ini.

Jika Anda memulai pengujian A/B di organisasi Anda, tetapi semua orang tidak mendapatkan orientasi yang tepat dan malah memiliki harapan yang tidak realistis, Anda mungkin berada di bawah tekanan. Karena pengujian A/B hanya menambah kepastian pada ide dan keputusan.

Jika Anda sudah keluar dari jurang kekecewaan, maka bagian ini tidak berlaku.

Bagi mereka yang ada di dalamnya, ini dia:

Mulailah dengan memetakan kebutuhan Anda dari alat ini.

  • Mengapa Anda berinvestasi dalam teknologi/merek ini?
  • Tahap apa program pengoptimalan Anda yang mendorong perlunya alat pengujian A/B Anda?
  • Kebutuhan apa yang Anda coba penuhi?
  • Apa pesan pemasaran yang melekat pada Anda dan tim Anda?

Itu adalah harapan Anda dan Anda berada di palung karena itu tidak sesuai dengan kenyataan Anda saat ini. Saya akan memberitahu Anda apa yang harus dilakukan dengan ini segera.

Menurut pendapat saya, salah satu tanggung jawab terpenting dari seorang pemimpin pengujian adalah memastikan bahwa harapan organisasi dikelola dengan tepat. Dalam hal program, tingkat pengawasan akan meningkat sebanding dengan besarnya anggaran teknologi. Besarnya pengeluaran memberikan kontribusi yang signifikan terhadap kedalaman palung.

Mengembangkan bukti nilai sebelum melakukan investasi signifikan dalam teknologi adalah strategi paling efektif untuk mengelola ekspektasi. Sebelum Anda keluar dan membeli Ferrari, Anda harus memulai program Anda dengan menggunakan solusi yang murah atau gratis yang akan menciptakan nilai awal.

Gerrid Smith, Direktur E-commerce, Penagihan Medis Fortis

Palung kekecewaan adalah mengapa anggaran alat besar tidak menjadi pertanda baik untuk program eksperimen kecuali label harga dapat dibenarkan secara tegas. Contohnya,

  • Kasus penggunaan edge atau lanjutan BUKAN alasan yang tepat untuk mendapatkan aplikasi pengujian A/B perusahaan.
  • Kasus penggunaan tepi atau lanjutan tidak mendorong pengembalian yang signifikan karena masalah yang dipecahkan meningkatkan banyak hal untuk sejumlah kecil pengguna atau pengujian.
  • Namun semakin besar anggarannya, semakin besar pula pengawasan dan harapannya. Anda tidak bisa lepas dari itu.

TL;DR: Jangan memompa tekanan dengan sia-sia.

Jika Anda tidak dapat menavigasi melalui kekecewaan, Anda tidak akan mengembangkan kolaborasi yang saling menghormati dengan vendor Anda. Anggota tim Anda akan melihatnya sebagai latihan yang sia-sia.

Apakah palung sudah merusak moral Anda? Tidak terlalu terlambat. Hubungi vendor Anda, jelaskan harapan yang telah Anda uraikan di atas, ungkapkan kekhawatiran Anda, dan putuskan langkah selanjutnya.

Jangan takut untuk bertanya ketika sesuatu tidak berjalan seperti yang Anda pikirkan! Vendor Anda ada untuk membantu dan mereka menginginkan bisnis Anda, jadi mereka akan melakukan apa pun yang mereka bisa untuk memastikan Anda senang dan puas dengan produk yang mereka jual kepada Anda!

Ryan Stewart

Saat Anda melakukan panggilan dengan vendor alat Anda untuk membahas ini, berikut adalah beberapa poin pembicaraan:

  • Apa asal mula kekecewaan?
  • Tentukan dengan jelas "nilai" atau "keluaran" yang akan membuat jus layak diperas (yaitu, membenarkan label harga)
  • Apakah mungkin untuk mewujudkan nilai ini dengan alat ini?
  • Jika ya, seperti apa timeline ini?
  • Siapa yang akan bertanggung jawab untuk apa?
  • Seberapa sering Anda akan menyentuh dasar untuk membahas kemajuan?
  • Keluhan apa yang dimiliki tim Anda? Izinkan vendor Anda untuk mengatasinya.

Jika Anda memiliki vendor yang hebat, ini akan menjadi percakapan yang bermanfaat yang memberi Anda perspektif baru dan mengarahkan Anda ke program pengoptimalan yang sukses.

Pengguna kami menyukai kenyataan bahwa mereka memanggil Dennis (CEO kami) dan Claudiu (CTO kami). Jadi, jika ini muncul, percakapan dengan eksekutif kami ini hanya satu panggilan.

5. Manfaatkan Pendidikan & Pemberdayaan

Pengujian A/B yang berhasil memerlukan beberapa pengetahuan teknis. Itulah mengapa istilah-istilah seperti signifikansi statistik terlihat asing pada pandangan pertama bagi orang-orang yang tidak berpengalaman dalam statistik.

Untuk mendapatkan hasil maksimal dari pengujian A/B, Anda harus memiliki gagasan yang jelas tentang

  • Cara kerja eksperimen online acak (seperti pengujian terpisah dan pengujian A/B)
  • Cara menggunakan alat Anda untuk merencanakan, menyiapkan, dan menjalankan pengujian; dan
  • Cara menginterpretasikan hasil pengujian, mengekstrak wawasan, dan menerapkannya untuk mengkonsolidasikan kemenangan Anda.

Pendidikan sangat vital.

Memperoleh sebagian dari pengetahuan ini ada pada Anda dan tim Anda. Tetapi bagaimana jika Anda memiliki vendor pengujian A/B yang dengan senang hati membantu Anda dalam hal ini? Bahkan lebih baik!

Ini harus menjadi kriteria saat memilih alat pengujian A/B.

Saat memilih vendor alat pengujian A/B, Anda harus melihatnya sebagai kemitraan yang terintegrasi dan saling melengkapi. Meskipun kedengarannya biasa saja, sebagian besar pembeli hanya ingin memeriksa beberapa kotak. Apakah itu mengaktifkan personalisasi? Apakah itu terintegrasi dengan Google Analytics? Berapa biayanya?

Hal-hal ini penting, tetapi itu adalah taruhannya. Saya telah mengerjakan beberapa program pengujian A/B, dan saya dapat memberi tahu Anda bahwa jarang ada sisi teknis yang membatasi program. Sebaliknya, fungsi pembatas cenderung pada sisi budaya: pendidikan, pemberdayaan, optimalisasi proses, dan aksesibilitas.

Jadi ketika bekerja dengan vendor, saya suka mengaudit program saya saat ini dan melihat apa dimensi pembatas terbesarnya. Dalam kebanyakan kasus, ini adalah pendidikan dan pemberdayaan. Sederhananya, tidak cukup banyak orang dalam tim yang telah terlatih dengan baik pada platform eksperimen maupun proses di mana eksperimen harus dipikirkan, dijalankan, dan dianalisis.

Alex Birkett

Untuk menguraikan apa yang Anda butuhkan dari vendor Anda dalam hal sumber daya pendidikan dan pemberdayaan, tunjukkan dengan tepat apa yang sudah Anda miliki (pengalaman dan bakat) dan bagikan tujuan pengoptimalan Anda dengan mereka sehingga mereka akan merekomendasikan sumber daya untuk mengisi kesenjangan.

Vendor eksperimen harus memberi Anda

  1. Orientasi

Dapatkan orientasi yang disesuaikan dengan kasus penggunaan spesifik Anda (sehingga Anda tidak menghabiskan waktu mempelajari apa yang tidak Anda butuhkan) dan minta mereka mengarahkan Anda ke dokumen dukungan yang relevan untuk membantu Anda memulai.

Seringkali, biaya orientasi dimasukkan ke dalam biaya untuk tahun pertama atau dibebankan secara terpisah.

  1. Pelatihan alat

Ini adalah no-brainer, tapi kadang-kadang diabaikan. Pastikan Anda menerima pelatihan tentang cara menggunakan alat ini sebelum Anda mulai menggunakannya.

  1. Akses ke jaringan pakar

Berikut adalah ide lain untuk memperluas pemberdayaan Anda: Manfaatkan jaringan vendor Anda untuk menemukan agen/ahli CRO untuk skala. Bahkan hanya dengan mengikuti mereka di LinkedIn akan memaparkan Anda ke dunia wawasan yang dapat Anda bawa pulang ke program pengoptimalan Anda.

  1. Paparan

Anda juga ingin ditampilkan dalam studi kasus dan dorongan pemasaran mereka — bagaimanapun juga, ini adalah publisitas gratis. Semakin banyak antusiasme yang dapat Anda nyalakan untuk apa yang dilakukan program CRO untuk merek Anda, semakin banyak mata uang pembelian yang Anda kumpulkan.

Studi kasus situs web vendor alat pengujian A/B
Sumber
  1. Sumber Belajar

Jelajahi sumber daya gratis seperti artikel dukungan, rekaman webinar, posting blog pendidikan, dll.

Manfaatkan semua sumber daya yang ditawarkan vendor Anda. Selain alat pengujian A/B yang sebenarnya, sebagian besar vendor menawarkan layanan seperti konsultasi, pelatihan, dan dukungan. Memanfaatkan sumber daya ini dapat membantu Anda mendapatkan hasil maksimal dari investasi Anda dan mengoptimalkan program pengujian Anda untuk dampak yang maksimal .

Mushfiq Sarker

Lalu, ada yang lebih baik lagi: Cari tahu apakah mereka menyediakan akses khusus ke pelatihan eksternal.

Convert menawarkan CRO mini-degree dari CXL (gratis) dan akses GoodUI dengan biaya lebih rendah.

Takeaways Kunci

Kecemerlangan sebenarnya dari program pengoptimalan Anda dapat berada dalam hubungan yang menguntungkan dengan vendor alat pengujian A/B Anda.

Ini adalah pendorong sukses ketika Anda memanfaatkan keahlian yang mereka miliki dari bekerja dengan tim lain dari berbagai industri untuk mengembangkan program Anda. Tetapi hubungan kolaboratif ini harus terstruktur.

Kamu harus

  • Dapatkan pola pikir bahwa alat pengujian A/B Anda adalah investasi
  • Gunakan komunikasi yang efektif untuk memfasilitasi penyerbukan silang ide
  • Tentukan area tanggung jawab
  • Bersiaplah untuk palung kekecewaan, dan
  • Manfaatkan sumber daya pendidikan dan pemberdayaan untuk meningkatkan permainan Anda.

Pemimpin program pengoptimalan tidak hanya dapat mengoptimalkan anggaran eksperimen mereka dengan cara ini, tetapi mereka juga dapat menciptakan wawasan berharga yang memberikan kekebalan terhadap pemotongan anggaran yang terjadi dalam perekonomian saat ini.

Masih tidak yakin apa perangkat lunak pengujian A/B yang tepat untuk perusahaan Anda?

Lihat perbandingan alat pengujian A/B teratas kami yang tidak bias — cocok untuk setiap kebutuhan.

Unduh perbandingan gratis
Optimalkan Tingkat Konversi