Menguji Seri Peta Pikiran: Cara Berpikir Seperti CRO Pro (Bagian 14)

Wawancara dengan 'Positif' John Ostrowski (Eksperimen Positif)

Keterampilan penilaian dan pengambilan keputusan yang baik sangat penting untuk kesuksesan di CRO. Bagi John Ostrowski, pengoptimalan adalah tentang memahami masalah, mengetahui audiens Anda, dan menjadikan pertumbuhan sebagai upaya tim.

Dia percaya bahwa metrik hasil apa pun dapat ditingkatkan sampai tingkat tertentu melalui eksperimen – tetapi itu tidak selalu sepadan dengan usaha. Anda tidak bisa hanya melihat angka dalam ruang hampa – Anda harus mempertimbangkan biaya peluang, risiko, dan faktor lainnya. Mengetahui kapan "jusnya layak diperas" (alias prioritas) adalah salah satu tantangan terbesar yang dihadapi para peneliti. Di sinilah data kualitatif dan kuantitatif harus digunakan untuk meningkatkan kepercayaan keputusan.

John menawarkan pendekatan baru untuk CRO yang tidak seperti apa pun yang pernah Anda baca sebelumnya.

Mari selami…

John, ceritakan tentang dirimu. Apa yang menginspirasi Anda untuk melakukan pengujian & pengoptimalan?

Dari Brasil ke AS, Hongaria, dan Polandia. Dari insinyur mesin hingga analis data, eksperimen, dan mentor pertumbuhan.

Saya telah menjadi pengoptimal di mana pun atau apa pun yang saya lakukan.

Alat berkembang.

Lean Manufacturing menjadi Lean Startup.

Six Sigma menjadi kerangka pertumbuhan produk.

Perbaikan terus-menerus, Kaizen, tetap menjadi penyebut umum.

Titik kritis untuk menjadi full digital adalah visi yang saya miliki di Hungaria: “Bayangkan sebuah dunia di mana saya bekerja di depan laptop, dari mana saja, tanpa perjalanan ke pabrik…”

Sudah berapa tahun Anda mengoptimalkannya? Apa satu-satunya sumber daya yang Anda rekomendasikan untuk calon penguji & pengoptimal?

Dengan hari-hari industri, sekitar sembilan tahun mengoptimalkan sesuatu. Menjalankan upaya optimasi online, khususnya, selama sekitar 5 tahun.

Eksperimen pertama yang saya ingat adalah antara dua mesin cold-stamping dengan pengaturan berbeda untuk mempelajari toleransi yang berbeda antara lini produksi. Waktu yang menyenangkan.

Sejauh sumber daya pergi, saya akan merekomendasikan satu kursus, satu buku, satu podcast, dan satu buletin.

Kursus online:

Eksperimen Deep Dive dari Reforge membawa game pengoptimalan ke tingkat yang strategis.

Buku:

Saya tidak bisa merekomendasikan Eksperimen Tepercaya Online Ronny Kohavi dengan cukup. Ini memberi Anda kekuatan super hanya dengan membacanya.

Siniar:

Nugget emas yang tak terhitung jumlahnya di kafe CRO Guido.

Buletin:

Steker tak tahu malu untuk buletin Eksperimen Positif, sudut internet saya tempat saya berbagi pemikiran tentang eksperimen pertumbuhan, kebebasan finansial, dan kepositifan

Jawab dalam 5 kata atau kurang: Apa disiplin pengoptimalan bagi Anda?

Mengekstrak jus layak diperas.

— Perhatikan bahwa mendefinisikan apa arti nilai bagi bisnis Anda adalah latihan itu sendiri.

Apa 3 hal teratas yang HARUS dipahami orang sebelum mereka mulai mengoptimalkan?

“Jika saya memiliki satu jam untuk memecahkan masalah, saya akan menghabiskan 55 menit untuk memikirkan masalah tersebut dan 5 menit untuk memikirkan solusi.”

1. Pahami masalahnya. Apa yang Anda coba pecahkan, dan mengapa itu penting? Bagaimana itu membantu pertumbuhan bisnis? Apa cerita yang Anda ceritakan?
2. Kenali audiens Anda . Dinamika daya adalah kekuatan tak terlihat dalam organisasi yang tidak Anda hadapi selama orientasi. Bagaimana pemangku kepentingan menanggapi data, dan jenis data apa yang mereka sukai? Apa yang membuat mereka tergerak? Kenali audiens Anda. Jadilah juara.
3. Pertumbuhan adalah upaya tim dan permainan jangka panjang . Bagi saya, "peretasan pertumbuhan" hidup dalam kategori yang sama dengan "cepat kaya". Anda mendengar cerita tentang yang sukses, dan jutaan lainnya yang gagal ditekan. Bias bertahan hidup. Platform WYSIWYG memungkinkan kontributor individu hanya untuk melakukan begitu banyak. Ketahui apa yang ada dalam kendali Anda dan apa yang tidak. Pelajari cara menemukan leverage, baik itu tenaga kerja atau modal.

Bagaimana Anda memperlakukan data kualitatif & kuantitatif sehingga menceritakan kisah yang tidak bias?

Pendekatan keputusan pertama saya untuk penelitian adalah campuran dari Behzod Sirjani dan Douglas Hubbard.

Bagi saya, kehidupan, bisnis, dan investasi adalah tentang penilaian dan pengambilan keputusan yang baik.

Oleh karena itu, qual dan quant menjadi alat bukti untuk beberapa keputusan yang mengandung risiko.

Saya memikirkan lima langkah Ekonomi Informasi Terapan (DDCMM):

1. Tentukan keputusan.
2. Tentukan apa yang Anda ketahui sekarang.
3. Hitung nilai informasi tambahan terhadap biaya tidak memutuskan. (Jika tidak ada, lanjutkan ke langkah 5.)
4. Mengukur di mana nilai informasi tinggi. (Kembali ke langkah 2 dan 3 sampai pengukuran lebih lanjut tidak diperlukan.)
5. Membuat keputusan dan bertindak di atasnya.

Memilih metode penelitian (langkah 4) adalah langkah penentuan prioritas itu sendiri.

Kenali audiens Anda dan bukti apa yang akan meningkatkan kepercayaan diri untuk membuat keputusan, lalu tentukan metode terbaik.

Hindari default ke "mari kita jalankan metode penelitian X" tanpa terlebih dahulu menentukan jenis bukti apa yang akan lebih berguna untuk keputusan Anda.

Waspadai audiens Anda – terkadang pemangku kepentingan akan merespons wawancara atau anekdot pelanggan dengan lebih baik.

Patut disebutkan bahwa eksperimen saya yang paling berdampak adalah hipotesis yang berasal dari penelitian berkualitas, lebih khusus lagi, wawancara pengguna yang menyenangkan.

Program pembelajaran seperti apa yang telah Anda siapkan untuk tim pengoptimalan Anda? Dan mengapa Anda mengambil pendekatan khusus ini?

Bab eksperimen kami adalah sekelompok 10 individu yang berpikiran berkembang, siswa seumur hidup yang suka dibuktikan salah dengan data.

Tujuh puluh tahun pengalaman pengoptimalan digabungkan, semuanya dari berbagai latar belakang.

Terlepas dari apa yang dapat Anda harapkan dari upacara bab dan tinjauan sejawat, kami memiliki Reforge untuk tim kami.

Kami meminta semua untuk mengikuti Eksperimen Deep Dive dan Seri Pertumbuhan.

Memiliki bahasa yang sama adalah kekuatan super yang diremehkan untuk tim berkinerja tinggi.

Mitos pengoptimalan apa yang paling mengganggu yang Anda harap akan hilang?

Percobaan? Err.. maksudmu CRO, kan?

Beginilah cara saya memikirkannya, dalam empat langkah:

1. Ada blok bangunan dasar (Strategi, Alat & Teknologi, Proses, Orang)
2. Yang membantu membentuk struktur tata kelola (hibrida, terpusat, terdesentralisasi)
3. Itu harus ada agar budaya eksperimen berkembang (roda gila pengujian AB)
4. Dan tergantung pada struktur organisasi Anda (mis. yang dipimpin oleh produk), alur kerja yang berbeda ditetapkan — untuk iTech Media, inisiatif OKR, CRO, dan Jaring Pengaman, baca selengkapnya di sini.

Sebagai sebuah industri, lebih baik kita menjauh dari dikotomi palsu ini.

Kita bisa melakukan yang lebih baik.

Mudah-mudahan, wawancara kami dengan John akan membantu memandu strategi eksperimen Anda ke arah yang benar!

Nasihat apa yang paling sesuai dengan Anda?

Pastikan untuk menantikan wawancara kami berikutnya dengan pakar CRO yang membawa kami melalui strategi yang lebih maju! Dan jika Anda belum melakukannya, lihat wawancara kami dengan Gursimran Gujral , Haley Carpenter , Rishi Rawat , Sina Fak , Eden Bidani , Jakub Linowski , Shiva Manjunath , Andra Baragan , Rich Page , Ruben de Boer , Abi Hough dan yang terbaru dengan kami Alex Birket .