Zihin Haritası Serisini Test Etme: Bir CRO Uzmanı Gibi Düşünme (Bölüm 14)

'Olumlu' John Ostrowski ile Röportaj (Olumlu Deneyler)

İyi muhakeme ve karar verme becerileri, CRO'da başarı için esastır. John Ostrowski için optimizasyon, tamamen sorunu anlamak, hedef kitlenizi tanımak ve büyümeyi bir ekip çalışması yapmakla ilgilidir.

Herhangi bir sonuç ölçütünün deney yoluyla bir dereceye kadar geliştirilebileceğine inanıyor - ancak bu her zaman çabaya değmez. Rakamlara bir boşlukta bakamazsınız - fırsat maliyetlerini, riskleri ve diğer faktörleri göz önünde bulundurmalısınız. "Meyve suyunun ne zaman sıkmaya değer olduğunu" (diğer bir deyişle önceliklendirme) bilmek, deneycilerin karşılaştığı en büyük zorluklardan biridir. Karar güvenini artırmak için nitel ve nicel verilerin kullanılması gereken yer burasıdır.

John, CRO'ya daha önce okuduğunuz hiçbir şeye benzemeyen yeni bir yaklaşım sunuyor.

Hadi dalalım…

John, bize kendinden bahset. Test ve optimizasyona başlamanız için size ne ilham verdi?

Brezilya'dan ABD, Macaristan ve Polonya'ya. Makine mühendisinden veri analistine, deneyciye ve büyüme danışmanına kadar.

Nerede veya ne yapıyor olursam olayım bir optimize edici oldum.

Araçlar gelişti.

Yalın Üretim, Yalın Başlangıç ​​oldu.

Altı Sigma, ürün büyüme çerçeveleri haline geldi.

Sürekli iyileştirme, Kaizen, ortak payda olarak kaldı.

Tam dijitale geçiş için devrilme noktası, Macaristan'da sahip olduğum bir vizyondu: "Fabrikaya gidip gelmeden, herhangi bir yerden bir dizüstü bilgisayarın önünde çalıştığım bir dünya hayal edin..."

Kaç yıldır optimizasyon yapıyorsunuz? Kalkınan test edicilere ve optimize edicilere önerdiğiniz tek kaynak nedir?

Endüstri günleriyle, bir şeyi optimize etmek için yaklaşık dokuz yıl. Özellikle yaklaşık 5 yıl boyunca çevrimiçi optimizasyon çabalarını yürütmek.

Hatırladığım ilk deney, üretim hatları arasındaki farklı toleransları öğrenmek için farklı kurulumlara sahip iki soğuk damgalama makinesi arasındaydı. Eğlenceli zamanlar.

Kaynaklara gelince, bir kurs, bir kitap, bir podcast ve bir haber bülteni önereceğim.

Çevrimiçi kurs:

Reforge's Experimentation Deep Dive, optimizasyon oyununu stratejik bir düzeye taşıyor.

Kitap:

Ronny Kohavi'nin Çevrimiçi Güvenilir Deneylerini yeterince tavsiye edemem. Sadece okumak size süper güçler verir.

Dijital ses dosyası:

Guido'nun CRO kafesinde sayısız altın külçesi.

Bülten:

Büyüme deneyleri, finansal özgürlük ve pozitiflik üzerine düşüncelerimi paylaştığım internet köşem olan Positive Experiments haber bülteni için utanmaz bir eklenti

5 veya daha az kelime ile cevap verin: Size göre optimizasyon disiplini nedir?

Sıkmaya değer suyu çıkarmak.

— İşletmeniz için değerin ne anlama geldiğini tanımlamanın başlı başına bir alıştırma olduğunu unutmayın.

İnsanların optimizasyona başlamadan önce anlamaları GEREKEN 3 şey nedir?

“Bir sorunu çözmek için bir saatim olsaydı, 55 dakikayı sorunu, 5 dakikasını da çözümleri düşünmek için harcardım.”

1. Sorunu anlayın. Neyi çözmeye çalışıyorsunuz ve bu neden önemli? İşletmenin büyümesine nasıl yardımcı olur? Anlattığın hikaye nedir?
2. Kitlenizi tanıyın . Güç dinamikleri, işe alım sırasında maruz kalmadığınız organizasyonlardaki görünmez güçtür. Paydaşlar verilere nasıl yanıt veriyor ve ne tür verileri tercih ediyorlar? Onları işaretleyen nedir? Kitlenizi tanıyın. Şampiyon ol.
3. Büyüme bir ekip çalışması ve uzun vadeli bir oyundur . Bana göre, "büyüme hileleri", "çabuk zengin ol" ile aynı kategoride yaşıyor. Başarılı olanlar hakkında hikayeler duyuyorsunuz ve başarısız olan diğer milyonlar bastırılıyor. Hayatta kalma yanlılığı. WYSIWYG platformları, bireysel katkıda bulunanların yalnızca bu kadarını yapmalarını sağlar. Neyin kontrolünüzde olduğunu ve neyin olmadığını bilin. İster emek ister sermaye olsun, kaldıracı nasıl bulacağınızı öğrenin.

Tarafsız bir hikaye anlatması için nitel ve nicel verileri nasıl ele alırsınız?

Araştırmaya yönelik ilk karar yaklaşımım, Behzod Sirjani ve Douglas Hubbard'ın bir karışımı.

Bana göre hayat, iş ve yatırımlar tamamen iyi muhakeme ve karar verme ile ilgilidir.

Bu nedenle, nitelik ve nicelik, risk taşıyan bazı kararlar için kanıt parçaları haline gelir.

Uygulamalı Bilgi Ekonomisinin (DDCMM) beş adımını düşünüyorum:

1. Kararı tanımlayın.
2. Şimdi ne bildiğini belirle.
3. Karar vermemenin maliyetine karşı ek bilginin değerini hesaplayın. (Yok ise, 5. adıma gidin.)
4. Bilgi değerinin yüksek olduğu yerde ölçün. (Daha fazla ölçüm gerekmeyene kadar 2. ve 3. adımlara dönün.)
5. Bir karar verin ve ona göre hareket edin.

Araştırma yönteminin seçilmesi (4. adım) başlı başına bir önceliklendirme adımıdır.

Hedef kitlenizi ve hangi kanıtların karar verme güvenini artıracağını bilin, ardından en iyi yöntemi tanımlayın.

Önce kararınız için ne tür kanıtların daha yararlı olacağını tanımlamadan “hadi X araştırma yöntemini çalıştıralım” varsayılanını kullanmaktan kaçının.

Kitlenizin farkında olun – bazen bir paydaş, müşteri görüşmelerine veya anekdotlara daha iyi yanıt verir.

En etkili deneylerimin nitelikli araştırmalardan, daha özel olarak mutlu kullanıcı görüşmelerinden kaynaklanan hipotezler olduğunu belirtmekte fayda var.

Optimizasyon ekibiniz için ne tür bir öğrenme programı kurdunuz? Ve neden bu özel yaklaşımı aldınız?

Deney bölümümüz, verilerle yanıldığı kanıtlanmayı seven, yaşam boyu öğrencilerden oluşan, gelişim odaklı 10 kişiden oluşan bir gruptur.

Yetmiş yıllık optimizasyon deneyimi, tümü birden çok geçmişe sahip.

Bölüm törenlerinden ve akran değerlendirmesinden bekleyebileceklerinizin dışında, ekibimiz için Reforge var.

Herkesten hem Derin Deneysel Dalış hem de Büyüme Serilerinden geçmesini istiyoruz.

Ortak bir dile sahip olmak, yüksek performanslı ekipler için hafife alınan bir süper güçtür.

Gitmesini istediğiniz en sinir bozucu optimizasyon efsanesi nedir?

Deney mi? Err.. CRO'yu kastediyorsun, değil mi?

Bunu dört adımda şöyle düşünüyorum:

1. Temel yapı taşları vardır (Strateji, Araçlar ve Teknoloji, Süreç, İnsanlar)
2. Yönetişim yapısını şekillendirmeye yardımcı olan (hibrit, merkezi, merkezi olmayan)
3. Bu, bir deney kültürünün gelişmesi için yerinde olmalıdır (AB test volanı)
4. Ve organizasyon yapınıza bağlı olarak (örn. ürün liderliğinde), farklı iş akışları belirlenir — iTech Media, OKR girişimleri, CRO ve Safety Net için daha fazlasını buradan okuyun.

Bir endüstri olarak, bu yanlış ikilikten uzaklaşmamız daha iyi.

Daha iyisini yapabiliriz.

Umarım John ile yaptığımız röportaj, deney stratejinizi doğru yönde yönlendirmenize yardımcı olur!

Sizi en çok hangi tavsiye etkiledi?

Bizi daha da gelişmiş stratejilere götüren bir CRO uzmanıyla yapacağımız bir sonraki röportaj için bizi izlemeye devam edin! Henüz yapmadıysanız, Gürsimran Gujral , Haley Carpenter , Rishi Rawat , Sina Fak , Eden Bidani , Jakub Linowski , Shiva Manjunath , Andra Baragan , Rich Page , Ruben de Boer , Abi Hough ile yaptığımız röportajlara ve Abi Hough ile yaptığımız son röportajlara göz atın. Alex Birkett'in fotoğrafı .