Cara Bekerja Dengan Agen Pengujian A/B (Dan Mencapai Semua Sasaran Pertumbuhan Anda)

Kebenaran yang sulit: Mengalihdayakan pengujian A/B Anda tidak menjamin pertumbuhan.

Kami berharap sesederhana itu. Bahkan dengan para ahli kelas dunia, harapan yang salah bercampur dengan arah yang salah sering menyebabkan kolaborasi yang sia-sia.

Di sisi lain, ada cara yang lebih cerdas dan lebih produktif untuk berkolaborasi dengan agen pengujian A/B Anda. Ini adalah saus rahasia di balik kisah sukses yang menarik Anda untuk bekerja dengan para ahli CRO.

Dalam artikel ini, kami akan menunjukkan kepada Anda saus rahasia itu — cetak biru langkah demi langkah yang jelas untuk berkolaborasi dan bermitra dengan agen pengujian CRO atau A/B terbaik. Pada akhirnya, Anda akan tahu cara bekerja dengan agensi CRO untuk mencapai semua sasaran pertumbuhan Anda.

Mari kita menggali…

Empat Alasan Hebat untuk Bergabung dengan Agen Pengujian A/B

Saat Anda mempelajari empat alasan ini, Anda akan menemukan peringkat bintang untuk kolaborasi. Kami menyebutnya indeks kolaborasi .

Untuk ini, kami memetakan tingkat kolaborasi yang penting untuk membuka kesuksesan dalam bergabung dengan agensi CRO, dan mereka terkait dengan masing-masing dari empat alasan (atau manfaat) ini.

Untuk mengamankan manfaat ini, Anda harus berkomitmen pada ukuran kolaborasi ke dalam kemitraan Anda. Itulah yang diwakili oleh bintang-bintang ini.

Misalnya, jika Anda hanya mencari bantuan dengan pembuatan pengujian A/B, kolaborasi tidak harus menyeluruh, tetapi tetap harus ada. Itu sebabnya ia mendapat dua bintang.

Sekarang sudah beres, jadi mari kita lanjutkan.

1. Bantuan dengan A/B Test Build

KOLABORASI:

Jika program pengoptimalan Anda telah matang hingga titik tertentu, Anda jelas bukan satu-satunya serigala yang menjalankan seluruh operasi dari awal hingga akhir. Anda membutuhkan insinyur dan pengembang.

Tetapi masalahnya di sini adalah sebagian besar departemen pengoptimalan tidak memiliki insinyur dan pengembang yang berdedikasi.

Ketika Anda mencapai hipotesis, Anda merasa yakin untuk mengujinya, itu merugikan efisiensi Anda jika Anda harus memohon dan meminjam sumber daya dari tim Pengembang untuk mengimplementasikannya.

Selain itu, meskipun aspek mendasar dari "pengkodean" tetap sama, mengembangkan produk dan membangun tes adalah dua konteks yang sangat berbeda yang membutuhkan perubahan pola pikir.

Jadi, jangan mengandalkan agen internal yang memprioritaskan sesuatu selain berhasil menyiapkan pengujian untuk menskalakan program Anda. Ada strategi yang lebih baik yang juga menyuntikkan kelincahan ke dalam program eksperimen Anda…

outsourcing .

Dalam pengaturan ini, ini tidak hanya diinginkan tetapi juga logis. Agensi tidak hanya memiliki tim Dev khusus, tetapi mereka juga berspesialisasi dalam pembuatan—termasuk mitra Konversi BrillMark & ​​EchoLogyx secara efektif 10X-ing upaya internal Anda.

Klien yang ingin meningkatkan program pengujian mereka dengan beberapa kali lipat harus mencari untuk membawa agen eksternal onboard. Berdasarkan pengalaman saya, ada batasan seberapa banyak mereka dapat meningkatkan program pengujian mereka dengan tim internal. Misalnya, jika tim internal berhasil mengembangkan dua pengujian per bulan berdasarkan sumber daya yang tersedia untuk mendukung pengembangan pengujian A/B dan QA, dan mereka ingin meningkatkannya menjadi 10 pengujian per bulan, mereka lebih baik menggunakan agensi. yang dapat memberikan dukungan khusus itu .

Tasin Reza, Ekologix

2. Bantuan Telemetri

KOLABORASI:

Kami telah berbicara banyak tentang pentingnya menyiapkan saluran pengumpulan data yang tepat dan memperlakukan data kualitatif dan kuantitatif sehubungan dengan menghilangkan bias.

Agen pengujian A/B memahami mengapa platform yang berbeda melaporkan angka yang berbeda untuk peristiwa atau tindakan yang sama. Mereka dapat melihat betapa berbahayanya perbedaan ini dan membantu tim internal menerjemahkannya ke dalam dampak pada hasil tes akhir.

Tanpa wawasan yang sangat berharga ini, bagaimana Anda bisa memercayai hasil Anda ketika sumber data sering kali tidak setuju dengan metrik penting?

Seperti yang disebutkan Chad Sanderson, percaya bahwa input data yang berbeda akan berdamai dengan sendirinya dalam output hasil adalah naif. Agen pengujian A/B membawa literasi data yang sangat dibutuhkan ini ke dalam campuran.

Itu adalah bagian dari alasan Alex Birkett (dikutip di bawah) bekerja dengan agensi – untuk menambahkan integritas yang dibutuhkan ke hasil pengujian A/B. Seperti yang dapat Anda bayangkan, ini membutuhkan lebih banyak masukan kolaboratif daripada hanya mendapatkan bantuan dengan build pengujian.

Dalam sebagian besar kasus saya telah bekerja dengan agen pengujian A/B, saya telah mempekerjakan mereka untuk membantu secara eksklusif dengan pengembangan eksperimen dan jaminan kualitas. Hal ini disebabkan oleh fakta umum bahwa sebagian besar sumber daya yang membatasi organisasi adalah para insinyur. Menggunakan agen pengembangan pengujian A/B yang dialihdayakan telah memungkinkan saya untuk meningkatkan throughput pengalaman kualitas, dan saya dapat mempercayai fakta bahwa eksperimen dirancang dengan baik karena mereka terbiasa bekerja pada platform yang saya gunakan.

Baru-baru ini, saya telah mempertimbangkan untuk meminta perusahaan layanan penuh untuk membantu pengembangan pengujian A/B serta dua hambatan lainnya: telemetri dan riset pelanggan. Menyiapkan saluran data yang tepat itu rumit dan membuat perusahaan pengujian A/B Anda melakukan hal ini menyelaraskan insentif dengan baik (mereka jelas ingin mengaitkan nilainya dengan tepat, jadi mereka menginginkan penyiapan analitik yang tepat). Dan riset pelanggan selalu kurang, bahkan jika saya melakukannya sendiri. Semakin banyak semakin baik, dan para ahli terkadang memiliki alat yang sulit diakses .

Alex Birkett, salah satu pendiri Omniscient Digital

Alasan berikutnya membutuhkan kolaborasi yang sama banyaknya untuk sukses seperti outsourcing untuk bantuan telemetri.

3. Bantuan dengan Riset Pelanggan

KOLABORASI:

Riset pelanggan, tanpa diragukan lagi, adalah aspek yang paling mahal, memakan waktu, dan membosankan dalam menyusun hipotesis yang kredibel. Namun, seperti yang ditunjukkan oleh hierarki bukti, ini adalah fondasi tempat eksperimen online terkontrol (pengujian A/B).

Ada beberapa hal yang bisa salah di sini:

• Tim internal tidak memiliki pengetahuan untuk menyusun pertanyaan riset pelanggan yang tepat.
  
  Mereka mungkin menyesatkan, bias, dan akhirnya berusaha untuk memvalidasi pendapat yang ada, daripada menyelidiki masalah yang terungkap oleh data kuantitatif.
  
  Peneliti eksternal akan membawa perspektif yang lebih netral untuk menggali tambang emas ini.

• Tim internal tidak memiliki bandwidth untuk membenamkan diri dalam berbagai perspektif yang membingungkan yang hanya dapat dilakukan oleh pakar sejati.
  
  Apa semua sudut untuk dijelajahi? Bagaimana Anda menghasilkan hipotesis yang lebih baik dengan tingkat perspektif ini tanpa mengambil dari pengalaman yang kaya dan beragam?

4. Bantuan Eksperimen Penginjilan

KOLABORASI:

Ya, pembelian eksperimen harus berasal dari C-suite.

Yang "menyerahkan" pembicaraan Manuel Da Costa sangat penting di sini. Eksperimen yang tertanam dalam DNA bisnis adalah

• Sebagian antusiasme seputar janji tes kemenangan "lebih banyak".
• Sebagian pemahaman tentang bagaimana keberhasilan yang berbeda ini pada hari-hari awal program CRO dapat dibangun dari mengoptimalkan metrik hingga menjadi pendukung pengambilan keputusan bagi perusahaan.
• Bagian "eksperimen tidak dapat dinegosiasikan" mandat dari kepemimpinan yang secara proaktif memilih kemampuan kerja ilmiah daripada insting.

Berikut adalah cara memiliki agensi yang berkontribusi pada setiap bagian:

• Tes mendapat manfaat dari pengalaman luas mereka dalam proses dan QA. Data internal Convert menunjukkan bahwa agensi mendorong pengujian yang lebih signifikan.
• Mereka menangani aspek teknis dari penerapan tes yang memberi Changemakers kepercayaan diri untuk bersuara tentang dampak eksperimen di seluruh perusahaan. Tidak ada salahnya mereka membantu pendidikan di seluruh organisasi.
• Mereka dapat membantu prospek eksperimen pada tahap awal pembelian C-suite karena rekam jejak mereka dalam membuktikan kekuatan eksperimen di seluruh industri dan vertikal. Lobi akhir yang mungkin diperlukan mendapat manfaat dari POV mereka yang matang.

Kami telah membahas alasan bagus untuk bergabung dengan agen pengujian A/B. Sekarang, kami akan menunjukkan kepada Anda alasan yang salah untuk mengalihdayakan pengujian A/B Anda.

Tiga Alasan yang Sangat Buruk untuk Mengalihdayakan

1. Anda Ingin Melihat Eksperimen Anda Menang SELURUH WAKTU.

Anda mendapatkan hasil eksperimen yang layak Anda dapatkan.

Posting ini dan komentarnya adalah buktinya:

Jika Anda membawa agensi untuk mencari pemenang, mereka akan mencari pemenang. Dan ada seratus cara halus dan tidak terlalu halus untuk memengaruhi segala sesuatu mulai dari kueri data hingga interpretasi hasil agar memiliki portofolio tes kemenangan yang tidak pernah mendorong pembelajaran atau dampak bottom-line.

Hasilnya: Anda mungkin akan menyatakan bahwa menjalankan pengujian A/B dengan agensi bukanlah keahlian Anda. Tapi Anda akan mendapatkan apa yang Anda cari – UJI MENANG.

Agensi harus menjadi mitra. Mereka harus memiliki kebebasan untuk menyelidiki masalah yang sebenarnya menghambat pendapatan dan kinerja. Terutama jika Anda mengontrak mereka untuk tidak hanya membangun, tetapi juga meneliti dan merancang eksperimen.

2. Anda Ingin Memanfaatkan "Intuisi" Agensi untuk Mengambil Pojok dalam Menguji Ketelitian

Eksperimen mengikuti proses ilmiah. Jadi, tidak ada cara akurat untuk memanfaatkan pengalaman ilmuwan (baca: lembaga pengujian A/B Anda) untuk menemukan rute tercepat menuju kemenangan.

Saat bergabung dengan agensi, Anda memberi mereka tantangan unik; bukan situasi di mana mereka dapat berkata, “Anda tahu, kami telah melihat ini sebelumnya. Inilah yang biasanya berhasil. Ayo lakukan itu.”

Ketika klien potensial mendekati kami tentang bekerja dengan mereka di CRO/eksperimen, mereka sering bertanya tentang pengalaman masa lalu kami di ceruk atau sektor itu. Misalnya, pengalaman apa yang Anda miliki bekerja dengan merek perjalanan mewah/perabotan tiket mahal/layanan keuangan/dll?

Ini sangat salah paham apa eksperimen.

Jika Anda menyewa merek atau agensi kreatif, mereka akan menggunakan intuisi dan kekuatan kreatif mereka untuk merancang sesuatu yang kemungkinan besar tidak akan Anda uji. Oleh karena itu, Anda perlu mengetahui intuisi dan kreativitas seperti apa yang Anda beli dan apakah mereka 'mendapatkan' audiens Anda. Anda memercayai seseorang untuk melakukan komunikasi yang belum teruji kepada pelanggan Anda.

Sebaliknya, inti dari eksperimen – yang pada akhirnya merupakan replikasi metode ilmiah dalam bisnis – adalah untuk menghilangkan opini, bias, dan intuisi dengan:

a) menggunakan penelitian dan data untuk merumuskan ide

b) menguji ide-ide tersebut dengan pelanggan Anda yang sebenarnya dan

c) membangun pembelajaran sedemikian rupa sehingga hal-hal besar yang Anda lakukan telah terbukti efektif sebelum Anda melakukannya

Anda membeli proses dan metode yang membutuhkan banyak keahlian untuk dieksekusi dengan benar, bukan 'pengalaman' masa lalu dari suatu sektor.

Kami dipandu oleh data, bukan oleh pendapat siapa pun tentang sektor atau pelanggan Anda.

Jonny Longden (melalui buletin Test Everything )

Jika Anda berencana untuk memanfaatkan intuisi agen pengujian A/B dan tidak merasa benar-benar bingung ketika mencoba mendiagnosis masalah atau memberikan peta jalan yang lebih terintegrasi menuju kesuksesan CRO, Anda perlu bekerja menuju kolaborasi agen-klien yang lebih baik melalui komunikasi yang jelas dan sebuah sistem aliran.

3. Anda Tidak Memiliki Niat Menyalakan Gairah untuk Pengujian In-House Dan Menginginkan Agensi Sebagai Penopang Selamanya

Anda tidak melihat membawa agensi sebagai peluang untuk menjadi batu loncatan ke dalam sesuatu yang lebih besar secara internal. Anda mungkin mencetak beberapa tes kemenangan – dan itu mungkin atau mungkin tidak berubah menjadi manfaat bisnis nyata – tetapi satu hal yang pasti: eksperimen yang konsisten tidak akan pernah lepas landas.

Eksperimen tidak bisa menjadi taktik. Seperti PPC, mungkin berjalan terpisah dari departemen lain dan (masih) bertahan.

Kekuatan sebenarnya dari menjalankan tes terletak pada membingkai ulang bagaimana setiap anggota tim membuat keputusan penting di tempat kerja. Ini untuk menyadari bahwa kami tetap bereksperimen dan menganggapnya sebagai "mengambil risiko". Memiliki struktur ilmiah yang kuat yang mendasari risiko dan pertaruhan ini adalah apa yang mendorong perusahaan menuju pandangan ke depan, kejelasan yang lebih besar tentang apa yang berhasil dan, yang paling penting, kesuksesan yang konsisten.

Memastikan Anda dan agensi CRO Anda cocok dalam jangka pendek dan panjang adalah kunci untuk menciptakan hubungan sinergis yang berhasil memenuhi metrik dan melampaui harapan.

Cetak Biru Sederhana untuk Bekerja dengan Agen Pengujian A/B

1. Dapatkan Jelas

Anda ingin tahu mengapa Anda membawa agensi tersebut. Pilih KPI — baik untuk program & bisnis — yang ingin Anda tingkatkan.

Harus selalu ada target bisnis tingkat makro dan target tingkat mikro untuk mencapai yang lebih tinggi itu. Tim pengujian perlu fokus pada tujuan menyeluruh tersebut melalui penelitian dan inovasi yang pada gilirannya dapat diuji.

Kuncinya di sini adalah mengomunikasikan hal ini dengan pemangku kepentingan bisnis – bagaimana eksperimen akan membantu bisnis mengambil keputusan yang tepat – untuk mencapai KPI yang diharapkan. Peta jalan untuk eksperimen harus dibuat berdasarkan ini; namun, pada saat yang sama, peta jalan harus cukup fleksibel untuk mendukung kebutuhan bisnis yang mendesak. Dan terakhir, perlu ada orang yang berdedikasi untuk menjalankan ini dengan dukungan tim yang berdedikasi .

Tasin Reza

Hati-hati di sini. KPI yang hanya terkait dengan program akan menghasilkan lebih banyak pengujian (kecepatan pengujian lebih tinggi), mungkin lebih sedikit pengujian yang diterapkan dengan bug, dan waktu penerapan yang lebih singkat. Ini semua adalah tanda-tanda bagus dari program yang sehat.

Tetapi kecuali ada kejelasan tentang apa yang seharusnya disingkirkan oleh mesin eksperimen — alias masalah yang harus dipecahkannya — Anda akan berkembang pesat dalam pengoptimalan, tetapi Anda tidak akan memajukan perusahaan Anda.

Tanpa kejelasan, akan ada kesenjangan antara strategi produk/situs (mendorong KPI yang berdampak pada bisnis) dan strategi eksperimen (mendorong KPI yang mempromosikan program CRO yang dinamis).

Untuk menjembatani kesenjangan ini, pertahankan fokus pada pembelajaran dan peningkatan pengalaman pengguna. Saat Anda mengawasi metrik pendapatan, pastikan Anda tidak mengembangkan visi terowongan dan melupakan apa sebenarnya eksperimen itu.

Untuk program yang bergantung pada anggaran, Anda juga harus melaporkan ROI.

Tim Mehta, Manajer Program Eksperimen di Microsoft Store, berbagi dalam wawancara ini dengan Speero bahwa akan membantu jika kepemimpinan berfokus pada inovasi karena dengan demikian Anda dapat menunjukkan ROI dalam hal wawasan yang Anda peroleh dari eksperimen sambil berbicara dalam bahasa potensi pendapatan dan potensi kerugian pendapatan yang dihindari metrik.

Dan kemudian, jangan hanya berbagi "kemenangan" dan "kerugian". Istilah-istilah itu tidak berarti hal yang sama di luar lingkup CRO. Ini akan lebih baik ditafsirkan dan diterjemahkan ke dalam keputusan bisnis yang berharga jika disajikan sebagai rekomendasi sebagai gantinya.

2. Identifikasi Pemangku Kepentingan

Lebih mudah untuk memperkenalkan agensi jika ada kejelasan lengkap tentang bagaimana program eksperimen akan berjalan. Anda tidak perlu menunggu untuk memulai dan memperbaiki kesalahan yang terjadi. Itu tidak efektif dan mahal.

Sebagai gantinya, sederhanakan proses dari awal dengan matriks penugasan RACI. Bagan ini membantu Anda memetakan tujuan utama, pencapaian, tugas, dan tanggung jawab dalam proyek Anda untuk setiap pemangku kepentingan yang terlibat.

Ini juga bagaimana Anda mengetahui siapa pemangku kepentingan utama Anda (yaitu, mereka yang perlu tetap mendapat informasi).

RACI adalah akronim yang menjelaskan bagaimana Anda menyusun proyek:

• Bertanggung jawab – Siapa yang bertanggung jawab untuk menyelesaikan tugas atau membuat keputusan? Ini biasanya sekelompok orang.

• Akuntabel – Siapa yang akan menandatangani tugas dan memastikan pencapaian selesai? Siapa yang akan memberikan tugas kepada mereka yang bertanggung jawab untuk menyelesaikannya? Ini biasanya pemimpin proyek dan merupakan peran tunggal sehingga mereka dapat memberikan keputusan akhir.

• Dikonsultasikan – Siapa yang perlu dikonsultasikan tentang tugas-tugas proyek? Siapa yang perlu memberi masukan pada tugas untuk membantu menyelesaikannya?

• Diinformasikan – Siapa yang perlu diberi tahu tentang status proyek? Siapa yang membutuhkan pembaruan tentang kemajuan tetapi tidak membutuhkan masukan sehari-hari?

Kami telah berbicara tentang cara membuat dan menggunakan bagan RACI untuk proyek eksperimen Anda. Berikut adalah contoh bagaimana ini digunakan untuk mengatur komunikasi:

Fokus pada pemangku kepentingan yang harus diberi tahu tentang apa yang dilakukan lembaga tersebut dan orang-orang yang pekerjaannya akan terpengaruh secara langsung. Karena bergabung dengan agensi tidak harus mengganggu operasi bisnis reguler.

Saat Anda menyewa agen CRO yang berpengalaman, pastikan untuk menggunakan matriks RACI agar dapat menemukan mereka yang memiliki keahlian untuk memberikan hasil dan memberikan beragam solusi untuk setiap masalah di masa depan.

3. Sumur Onboard

Pikirkan tentang bergabung dengan agensi seperti Anda akan merekrut anggota tim baru. Anda tahu bahwa Anda harus menyiapkan sumber daya yang diperlukan agar mereka dapat memulai dengan mudah.

Ada banyak hal yang tidak akan mereka ketahui jika Anda belum pernah bekerja sama sebelumnya. Misalnya: cara kerja internal dan berbagai kasus penggunaan situs Anda, matriks prioritas Anda, dll. Jadi, bagaimana Anda bisa meneruskan pengetahuan itu?

Sangat penting bahwa mereka (agensi) tahu bagaimana bekerja dalam parameter program kami, termasuk matriks prioritas kami, perencanaan sprint kami, daftar periksa QA yang kami gunakan untuk peluncuran, dan tim desain kami. Untungnya, sebagian besar ini sebagian besar otomatis dan diletakkan di Airtable yang dapat diakses siapa saja .

Alex Birkett

Saya perhatikan bahwa klien melupakan apa yang diketahui orang luar tentang situs web atau aplikasi internal mereka yang perlu dioptimalkan. Tim internal sangat dekat dengan situs web itu sendiri. Mereka mengetahui seluk beluk semua skenario, kasus penggunaan, dan anomali yang berbeda yang disajikan situs web. Dan mereka terkadang lupa bahwa seseorang dari agensi eksternal belum tentu memiliki kedalaman pengetahuan yang sama tentang situs web mereka. Ini dapat memberikan beberapa tantangan dengan agensi pada tahap awal. Berbagi pengetahuan internal yang diperlukan untuk membantu bisnis dengan program CRO mereka di awal sangat penting. Dengan begitu, agensi akan mengetahui apa yang diharapkan dan apa yang harus dipertimbangkan ketika mereka datang dengan ide pengujian atau mengembangkan dan melakukan QA pada pengujian .

Tasin Reza

Jika Anda memulai dari awal, beri agensi Anda waktu yang dibutuhkan untuk memahami bisnis Anda dan buat yang berikut:

• Buku Pegangan Riset Pelanggan
  
  Ini adalah dokumen/database internal yang memberikan wawasan berharga kepada agensi tentang siapa pelanggannya. Ini akan berisi data yang dikumpulkan dari grup fokus, wawancara, survei email, analisis analitik, serta profil pelanggan ideal yang didukung data dan info demografis.

• Matriks Prioritas
  
  Anda tidak dapat menguji semuanya. Menurut David Mannheim dalam artikelnya, sebagian besar program dibatasi oleh:
  
  • Tujuan pengujian dalam organisasi
  • Ketersediaan lalu lintas
  • Perubahan yang diinginkan
  • Jumlah waktu yang tersedia

Di lautan ide pengujian, Anda memerlukan sistem untuk memutuskan pengujian apa yang akan diterapkan dan apa yang harus ditinggalkan nanti. Jika Anda sudah mengetahui hal ini, agensi Anda juga perlu tahu.

• Daftar Periksa T&J
  
  Ketika tes selesai, bagaimana Anda memvalidasi keakuratan hasil? Banyak langkah yang dilakukan untuk menjalankan tes dan itu berarti beberapa titik kontak di mana sesuatu bisa salah.
  
  Anda perlu membagikan langkah-langkah yang Anda ambil untuk merefleksikan apa yang telah dilakukan untuk memverifikasi hasil. Kami memiliki daftar periksa T&J yang dapat Anda gunakan, sehingga Anda tidak perlu memulai dari awal.

• Repositori Pembelajaran Dasar
  
  Di sinilah Anda menyimpan data dan dokumentasi pada pengujian sebelumnya. Informasi di sini dapat meningkatkan efektivitas dan kualitas tes Anda di masa mendatang ke tingkat yang luar biasa.
  
  Jika Anda tidak memiliki repositori pembelajaran, Anda kehilangan wawasan yang dapat meningkatkan keberhasilan program eksperimen Anda.

Jadi, mengapa Anda perlu memberikan waktu kepada agensi Anda untuk memahami bisnis Anda dan menyerap informasi dari sumber daya ini? Karena proses adalah pilar Kedewasaan Eksperimen. Membuat beberapa aturan dasar adalah aspek kunci dari orientasi yang ketat. Jangan lewatkan.

4. Membangun Kepercayaan

Beri mereka kebebasan untuk melaporkan tes datar & kalah. Pahami bahwa sebagian besar tes yang Anda jalankan akan kalah. Ini bagus, kenapa? Karena Anda secara aktif menghilangkan apa yang mungkin tidak berhasil dan bergerak menuju perubahan, fitur, dan keputusan yang memiliki peluang lebih tinggi untuk mendorong dampak positif yang signifikan.

Jika Anda hanya mendengar tentang kemenangan, Anda akan kehilangan 90% dari wawasan Anda. Karena 9 dari 10 tes biasanya gagal.

Juga, jika agensi Anda harus menjelaskan diri mereka sendiri setiap kali Anda melihat tes datar, mereka akan merasa layanan mereka akan lebih berharga di tempat lain – setidaknya, agensi yang memahami eksperimen dan potensinya akan melakukannya.

Anda tidak ingin itu. Sebaliknya, Anda ingin membawa A-game komunikasi Anda dan membangun kepercayaan. Berikut caranya:

• Berkomunikasi secara terbuka dengan agensi Anda

Bicara dan dengarkan. Bicarakan tentang tujuan organisasi Anda dan apa yang Anda harapkan dari hubungan Anda dengan agensi Anda. Dan kemudian dengarkan apa yang mereka harapkan dari Anda dan tim Anda.

Pastikan Anda mengakui tuntutan dan pendapat ini. Bahkan selama pertemuan berikutnya, saat proyek berlangsung, beri tahu mereka bahwa umpan balik dan ide mereka sangat berharga bagi tim Anda.

Jika Anda memiliki kekhawatiran, ungkapkan dengan jujur. Lebih sering daripada tidak, agensi CRO Anda terbiasa dengan masalah ini dan tahu bagaimana mengatasinya dengan cara yang sehat. Mereka juga dapat membantu Anda memetakan jalur aman ke tujuan Anda.

Itu adalah sesuatu yang Anda selalu dapat melihat kembali ketika segala sesuatunya kabur dan tahu Anda berada di jalan yang benar.

• Tetapkan tujuan komunikasi yang saling menguntungkan

Kapan pun Anda bermitra dengan agensi, Anda harus menetapkan ekspektasi komunikasi yang jelas. Itu akan mencakup media komunikasi, waktu dan frekuensi pertemuan, poin pembicaraan, dll.

Mendefinisikan hal-hal tersebut sebelumnya tidak hanya memperlancar proses kerja dalam jangka panjang, tetapi kepastian sebesar itu menumbuhkan kepercayaan. Kedua belah pihak tahu apa yang diharapkan, sehingga Anda dapat bersantai dan memenuhi kewajiban lainnya.

Tapi ada satu hal lagi: Anda tidak hanya mengatur ini dan mengendarainya sampai akhir. Anda harus memeriksa kembali dari waktu ke waktu untuk memastikannya berfungsi sebagaimana mestinya. Tanyakan kepada agensi Anda apakah mereka mendapatkan informasi penting tepat waktu, misalnya.

PS: Jika Anda mengubah sesuatu, beri tahu pemangku kepentingan lainnya.

• Menangani konflik seperti juara

Kami senang memiliki perjalanan yang cerah, tetapi kenyataannya, konflik akan terjadi. Jika Anda mengelola mikro, Anda menumpuk peluang Anda demi konflik. Tolong, jangan micromanage.

Tetapi jika Anda tidak setuju dengan sesuatu dengan agensi CRO Anda, apa yang Anda lakukan?

Salurkan manajer SDM batin Anda dan tangani percakapan sulit itu seperti seorang profesional. Pahami bahwa momen-momen itu bukanlah kontes “Anda-vs-agensi” untuk Anda menangkan. Sebaliknya, itulah mitra Anda dan Anda memiliki tujuan yang sama — pertumbuhan dengan pengoptimalan (atau yang lainnya).

Yakinkan mereka tentang tujuan, kunjungi kembali bersama, dan tingkatkan dari sana.

Apakah Anda perlu mengubah sesuatu? Apakah perubahan itu membawa Anda lebih dekat ke tujuan awal proyek? Apakah ada sesuatu yang Anda salah paham? Atau ada yang bisa dijelaskan lebih baik?

Lebih banyak pertanyaan pada saat seperti ini dapat menghemat waktu dalam resolusi.

Akhirnya, Anda memberi kepercayaan untuk mendapatkan kepercayaan. Percayai biro iklan Anda untuk melakukan pekerjaan terbaik mereka dan memberikan hasil, dan mereka kemungkinan besar akan memberikan kepercayaan itu kembali kepada Anda.

Jika Anda berhubungan dengan cara ini dengan mitra CRO Anda, Anda akan memelihara kualitas hubungan yang membuat mereka bersemangat untuk melampaui dan melampaui organisasi Anda.

5. Ekstrak Belajar

Bangun repositori pembelajaran Anda. Anda tidak dapat melepaskan wawasan dari pengujian sebelumnya dan menolak kesempatan tim QA Anda untuk mendiagnosis kampanye yang rusak lebih cepat.

Ini juga akan membantu Anda memperlancar proses pelaporan proses dan hasil kepada atasan Anda dan meningkatkan kecepatan pengujian Anda (karena Anda memiliki ide yang tersebar di seluruh riwayat eksperimen Anda).

Tapi ini hanya bisa berharga jika dapat diakses dan terstruktur dengan baik. Repo pembelajaran yang produktif dimulai dengan Anda mendokumentasikan setiap pembelajaran dengan cara ini:

1. Rekam semua metadata dari pengujian Anda

Sorot jenis pengujian, halaman tempat pengujian dijalankan, titik kontak, pemirsa, dan area permukaan pertumbuhan. Padatkan info ini serta hipotesis, metrik, dan hasil, ke dalam kartu skor metadata.

Simpan ini di alat repositori eksperimen. Saat memulai, Anda dapat menggunakan Google slide, Notion, atau Airtable untuk menyimpan dan membagikan info ini.

2. Rekam untuk gaya belajar yang berbeda

Tidak semua orang akan menyukai cara Anda menyimpan informasi. Beberapa berkembang dengan teks, yang lain menyukai visual seperti gambar dan video. Saat merekam pembelajaran Anda dari tes sebelumnya, tambahkan tangkapan layar, dan rekaman layar jika Anda bisa.

3. Tandai tes Anda

Siapa pun yang melalui repositori harus dapat langsung mengidentifikasi tujuan pengujian. Apakah itu berulang atau mengganggu? Atau untuk optimasi atau inovasi? Kembangkan tag yang sesuai dengan program eksperimen Anda dan gunakan untuk mengurutkan tes.

Repositori pembelajaran ini akan sangat berharga bagi Anda dan agensi CRO Anda. Mereka dapat menjelajahi sejarah program eksperimen Anda tanpa mengajukan terlalu banyak pertanyaan.

Dan mereka dapat dengan cepat mendiagnosis masalah atau, bahkan lebih baik, merancang rencana yang tidak membuang waktu untuk pengujian yang telah Anda lakukan.

Juga, jangan menganggap program eksperimen Anda sebagai entitas yang terpisah dari proses lain di organisasi Anda. Anggota tim lainnya perlu mengikuti apa yang dilakukan agensi Anda. Saat itulah Anda mengatur satu-satu sehingga mereka dapat meniru dan menyerap bagaimana pakar agensi berpikir tentang dan mendekati pengujian.

Meskipun 1:1 ini merupakan bagian integral dalam mempromosikan budaya eksperimen, Anda juga harus mencocokkannya dengan akses ke data dan laporan gabungan.

Itulah salah satu cara untuk memanfaatkan pengalaman pakar agensi CRO Anda. Cara lain adalah dengan meminta masukan mereka mengenai penataan tim pengoptimalan Anda (CoE terpusat atau terdesentralisasi). Karena para ahli memiliki pandangan ke depan dan preseden, mereka dapat mengarahkan Anda ke arah yang benar berdasarkan peta jalan eksperimen Anda.

Kesimpulan

Sekarang setelah Anda mengetahui cara bekerja dengan agensi CRO untuk produktivitas maksimum, Anda dapat mulai mencapai sasaran pertumbuhan Anda dengan sesedikit mungkin gesekan. Mungkin ada saat-saat di mana Anda meragukan kemajuan Anda, tetapi selama Anda memberikan kolaborasi yang cukup dan memiliki harapan yang tepat, kemitraan Anda akan membuahkan hasil.