Test della serie di mappe mentali: come pensare come un professionista CRO (parte 14)

Intervista a 'Positive' John Ostrowski (Esperimenti positivi)

Un buon giudizio e capacità decisionali sono essenziali per il successo in CRO. Per John Ostrowski, l'ottimizzazione consiste nel comprendere il problema, conoscere il proprio pubblico e rendere la crescita un lavoro di squadra.

Crede che qualsiasi metrica di risultato possa essere migliorata in una certa misura attraverso la sperimentazione, ma non sempre ne vale la pena. Non puoi semplicemente guardare i numeri nel vuoto: devi considerare i costi delle opportunità, i rischi e altri fattori. Sapere quando "il succo vale la pena spremere" (noto anche come definizione delle priorità) è una delle maggiori sfide che gli sperimentatori devono affrontare. È qui che dovrebbero essere utilizzati dati qualitativi e quantitativi per aumentare la fiducia nelle decisioni.

John offre un nuovo approccio al CRO che è diverso da qualsiasi altra cosa tu abbia letto prima.

Immergiamoci...

Giovanni, parlaci di te. Cosa ti ha spinto a dedicarti a test e ottimizzazione?

Dal Brasile agli Stati Uniti, Ungheria e Polonia. Da ingegnere meccanico ad analista di dati, sperimentatore e mentore della crescita.

Sono stato un ottimizzatore, non importa dove o cosa stessi facendo.

Gli strumenti si sono evoluti.

La Lean Manufacturing è diventata Lean Startup.

Six Sigma è diventato framework di crescita del prodotto.

Il miglioramento continuo, Kaizen, è rimasto il denominatore comune.

Il punto di svolta per passare al full digital è stata una visione che avevo in Ungheria: "Immagina un mondo in cui lavoro davanti a un laptop, da qualsiasi luogo, senza andare in fabbrica..."

Da quanti anni stai ottimizzando? Qual è l'unica risorsa che consigli agli aspiranti tester e ottimizzatori?

Con i giorni del settore, circa nove anni per ottimizzare qualcosa. Esecuzione di sforzi di ottimizzazione online, in particolare, per circa 5 anni.

Il primo esperimento che ricordo è stato tra due macchine per lo stampaggio a freddo con configurazioni diverse per conoscere le diverse tolleranze tra le linee di produzione. Momenti divertenti.

Per quanto riguarda le risorse, consiglierò un corso, un libro, un podcast e una newsletter.

Corso in linea:

Experimentation Deep Dive di Reforge porta il gioco di ottimizzazione a un livello strategico.

Prenotare:

Non posso raccomandare abbastanza gli esperimenti affidabili online di Ronny Kohavi. Ti dà superpoteri solo a leggerlo.

Podcast:

Innumerevoli pepite d'oro nel caffè CRO di Guido.

Newsletter:

Spina spudorata per la newsletter di Positive Experiments, il mio angolo di internet dove condivido le mie riflessioni su esperimenti di crescita, libertà finanziaria e positività

Risposta in 5 parole o meno: qual è per te la disciplina dell'ottimizzazione?

Estrarre il succo vale la pena spremere.

— Tieni presente che definire cosa significa valore per la tua attività è un esercizio in sé.

Quali sono le 3 cose principali che le persone DEVONO capire prima di iniziare a ottimizzare?

"Se avessi un'ora per risolvere un problema, passerei 55 minuti a pensare al problema e 5 a pensare alle soluzioni".

1. Comprendi il problema. Cosa stai cercando di risolvere e perché è importante? In che modo aiuta la crescita del business? Qual è la storia che stai raccontando?
2. Conosci il tuo pubblico . Le dinamiche di potere sono la forza invisibile nelle organizzazioni a cui non sei esposto durante l'onboarding. In che modo le parti interessate rispondono ai dati e quali tipi di dati preferiscono? Cosa li fa spuntare? Conosci il tuo pubblico. Essere un campione.
3. La crescita è uno sforzo di squadra e un gioco a lungo termine . Per me, gli "hack per la crescita" risiedono nella stessa categoria di "diventare ricchi in fretta". Senti storie su quelli di successo e tutti gli altri milioni che hanno fallito vengono repressi. Bias di sopravvivenza. Le piattaforme WYSIWYG consentono ai singoli contributori solo di fare così tanto. Scopri cosa è sotto il tuo controllo e cosa no. Scopri come trovare la leva, che si tratti di manodopera o capitale.

Come tratti i dati qualitativi e quantitativi in ​​modo che raccontino una storia imparziale?

Il mio primo approccio decisionale alla ricerca è un mix di Behzod Sirjani e Douglas Hubbard.

Per me, la vita, gli affari e gli investimenti riguardano il buon senso e il processo decisionale.

Pertanto, qual e quant diventano elementi di prova per alcune decisioni che comportano un rischio.

Penso attraverso i cinque passaggi dell'economia dell'informazione applicata (DDCMM):

1. Definisci la decisione.
2. Determina ciò che sai ora.
3. Calcola il valore delle informazioni aggiuntive rispetto al costo della mancata decisione. (Se nessuno, vai al passaggio 5.)
4. Misura dove il valore dell'informazione è alto. (Tornare ai passaggi 2 e 3 finché non sono necessarie ulteriori misurazioni.)
5. Prendi una decisione e agisci di conseguenza.

La selezione del metodo di ricerca (fase 4) è di per sé una fase di definizione delle priorità.

Conosci il tuo pubblico e quali prove aumenteranno la fiducia nel prendere la decisione, quindi definisci il metodo migliore.

Evita di impostare per impostazione predefinita "eseguiamo il metodo di ricerca X" senza prima definire quale tipo di evidenza sarà più utile per la tua decisione.

Sii consapevole del tuo pubblico: a volte uno stakeholder risponderà meglio alle interviste o agli aneddoti dei clienti.

Vale la pena ricordare che i miei esperimenti più impattanti sono stati ipotesi che hanno avuto origine da qual ricerca, più specificamente interviste a utenti felici.

Che tipo di programma di apprendimento hai impostato per il tuo team di ottimizzazione? E perché hai adottato questo approccio specifico?

Il nostro capitolo della sperimentazione è un gruppo di 10 individui orientati alla crescita, studenti per tutta la vita che amano essere smentiti dai dati.

Settant'anni di esperienza nell'ottimizzazione combinati, tutti provenienti da più background.

Oltre a ciò che puoi aspettarti dalle cerimonie dei capitoli e dalla revisione tra pari, abbiamo Reforge per il nostro team.

Chiediamo a tutti di seguire sia la Experimentation Deep Dive che la Growth Series.

Avere un linguaggio comune è un superpotere sottovalutato per i team ad alte prestazioni.

Qual è il mito dell'ottimizzazione più fastidioso che vorresti andasse via?

Sperimentazione? Err.. intendi CRO, giusto?

Ecco come ci penso, in quattro passaggi:

1. Esistono elementi costitutivi fondamentali (Strategia, Strumenti e tecnologia, Processo, Persone)
2. Che aiutano a plasmare la struttura di governance (ibrida, centralizzata, decentralizzata)
3. Questo deve essere in atto per far fiorire una cultura della sperimentazione (volano per test AB)
4. E a seconda della struttura dell'organizzazione (ad es. guidata dal prodotto), vengono impostati flussi di lavoro diversi: per iTech Media, iniziative OKR, CRO e Safety Net, leggi di più qui.

Come industria, è meglio allontanarci da questa falsa dicotomia.

Possiamo fare di meglio.

Se tutto va bene, la nostra intervista con John ti aiuterà a guidare la tua strategia di sperimentazione nella giusta direzione!

Qual è il consiglio che ti ha colpito di più?

Assicurati di rimanere sintonizzato per la nostra prossima intervista con un esperto CRO che ci guida attraverso strategie ancora più avanzate! E se non l'hai già fatto, dai un'occhiata alle nostre interviste con Gursimran Gujral , Haley Carpenter , Rishi Rawat , Sina Fak , Eden Bidani , Jakub Linowski , Shiva Manjunath , Andra Baragan , Rich Page , Ruben de Boer , Abi Hough e le ultime con Alex Birkett .