Seria de testare a hărților mentale: Cum să gândiți ca un profesionist CRO (Partea 14)

Interviu cu „Pozitive” John Ostrowski (Experimente pozitive)

Buna judecată și abilitățile de luare a deciziilor sunt esențiale pentru succesul în CRO. Pentru John Ostrowski, optimizarea înseamnă înțelegerea problemei, cunoașterea publicului și transformarea creșterii într-un efort de echipă.

El crede că orice măsură de rezultat poate fi îmbunătățită într-o oarecare măsură prin experimentare – dar nu merită întotdeauna efortul. Nu poți privi doar cifrele în vid – trebuie să iei în considerare costurile de oportunitate, riscurile și alți factori. A ști când „sucul merită stors” (alias prioritizarea) este una dintre cele mai mari provocări cu care se confruntă experimentatorii. Aici ar trebui folosite datele calitative și cantitative pentru a crește încrederea în decizie.

John oferă o abordare nouă a CRO care nu seamănă cu orice altceva ați citit înainte.

Să ne scufundăm în...

John, spune-ne despre tine. Ce te-a inspirat să intri în testare și optimizare?

Din Brazilia până în SUA, Ungaria și Polonia. De la inginer mecanic la analist de date, experimentator și mentor de creștere.

Am fost un optimizator indiferent unde sau ce făceam.

Instrumentele au evoluat.

Lean Manufacturing a devenit Lean Startup.

Six Sigma au devenit cadre de dezvoltare a produselor.

Îmbunătățirea continuă, Kaizen, a rămas ca numitor comun.

Punctul de vârf pentru trecerea la digital complet a fost o viziune pe care am avut-o în Ungaria: „Imaginați-vă o lume în care lucrez în fața unui laptop, de oriunde, fără navetă până la fabrică...”

De câți ani optimizezi? Care este singura resursă pe care o recomandați testerilor și optimizatorilor aspiranți?

Cu zilele industriei, aproximativ nouă ani optimizând ceva. Derularea eforturilor de optimizare online, în special, timp de aproximativ 5 ani.

Primul experiment pe care mi-l amintesc a fost între două mașini de ștanțare la rece cu configurații diferite pentru a afla despre toleranțele diferite dintre liniile de producție. Vremuri amuzante.

În ceea ce privește resursele, voi recomanda un curs, o carte, un podcast și un buletin informativ.

Curs online:

Reforge's Experimentation Deep Dive duce jocul de optimizare la un nivel strategic.

Carte:

Nu pot recomanda suficient experimentele online de încredere ale lui Ronny Kohavi. Îți oferă superputeri doar citind-o.

Podcast:

Nenumărate pepite de aur în cafeneaua CRO a lui Guido.

Buletin informativ:

Plug nerușinat pentru buletinul informativ Positive Experiments, colțul meu de internet unde îmi împărtășesc părerile despre experimentele de creștere, libertatea financiară și pozitivitatea

Răspundeți în 5 cuvinte sau mai puțin: Care este disciplina de optimizare pentru dvs.?

Extragerea sucului merită stors.

— Rețineți că definirea a ceea ce înseamnă valoarea pentru afacerea dvs. este un exercițiu în sine.

Care sunt primele 3 lucruri TREBUIE să înțeleagă oamenii înainte de a începe optimizarea?

„Dacă aș avea o oră pentru a rezolva o problemă, aș petrece 55 de minute gândindu-mă la problemă și 5 gândindu-mă la soluții.”

1. Înțelegeți problema. Ce încerci să rezolvi și de ce este important? Cum ajută la creșterea afacerii? Care este povestea pe care o spui?
2. Cunoaște-ți publicul . Dinamica puterii este forța invizibilă din organizații la care nu ești expus în timpul integrării. Cum răspund părțile interesate la date și ce tipuri de date preferă? Ce îi face să bifeze? Cunoaște-ți publicul. Fii un campion.
3. Creșterea este un efort de echipă și un joc pe termen lung . Pentru mine, „hack-urile de creștere” trăiesc în aceeași categorie cu „îmbogățiți-vă rapid”. Auzi povești despre cei de succes și toate celelalte milioane care au eșuat sunt suprimate. Prejudecățile de supraviețuire. Platformele WYSIWYG permit colaboratorilor individuali doar să facă atât de multe. Află ce este în controlul tău și ce nu. Aflați cum să găsiți pârghie, fie că este vorba de forță de muncă sau de capital.

Cum tratezi datele calitative și cantitative, astfel încât să spună o poveste imparțială?

Abordarea mea în materie de cercetare care primește o decizie este un amestec de Behzod Sirjani și Douglas Hubbard.

Pentru mine, viața, afacerile și investițiile sunt toate despre buna judecată și luarea deciziilor.

Prin urmare, cal și quant devin elemente de probă pentru o decizie care implică un risc.

Mă gândesc la cei cinci pași ai economiei informaționale aplicate (DDCMM):

1. Definiți decizia.
2. Stabilește ce știi acum.
3. Calculați valoarea informațiilor suplimentare față de costul nedeciziei. (Dacă nu există, treceți la pasul 5.)
4. Măsurați acolo unde valoarea informației este mare. (Reveniți la pașii 2 și 3 până când nu este nevoie de măsurători suplimentare.)
5. Luați o decizie și acționați în conformitate cu ea.

Selectarea metodei de cercetare (pasul 4) este o etapă de prioritizare în sine.

Cunoaște-ți publicul și ce dovezi vor crește încrederea în luarea deciziei, apoi definește cea mai bună metodă.

Evitați să utilizați implicit „să rulăm metoda de cercetare X” fără a defini mai întâi ce tip de dovezi vor fi mai utile pentru decizia dumneavoastră.

Fiți conștienți de publicul dvs. – uneori, o parte interesată va răspunde mai bine la interviurile sau anecdotele clienților.

Merită menționat că experimentele mele cele mai de impact au fost ipoteze care au provenit din cercetări de calitate, mai precis din interviuri cu utilizatorii mulțumiți.

Ce fel de program de învățare ați configurat pentru echipa dvs. de optimizare? Și de ce ați luat această abordare specifică?

Capitolul nostru de experimentare este un grup de 10 indivizi cu minte de creștere, studenți de-a lungul vieții cărora le place să se dovedească greșit prin date.

Șaptezeci de ani de experiență în optimizare combinată, toate din medii multiple.

În afară de ceea ce vă puteți aștepta de la ceremoniile capitolelor și de la evaluarea colegială, avem Reforge pentru echipa noastră.

Le cerem tuturor să treacă atât prin Experimentation Deep Dive, cât și prin Seria Growth.

A avea un limbaj comun este o superputere subestimată pentru echipele performante.

Care este cel mai enervant mit al optimizării despre care ai vrea să dispară?

Experimentare? Err.. vrei să spui CRO, nu?

Iată cum mă gândesc la asta, în patru pași:

1. Există blocuri de bază (strategie, instrumente și tehnologie, proces, oameni)
2. Care ajută la modelarea structurii de guvernare (hibridă, centralizată, descentralizată)
3. Aceasta trebuie să existe pentru ca o cultură a experimentării să înflorească (volan de testare AB)
4. Și în funcție de structura organizației dvs. (de exemplu, condusă de produs), sunt setate diferite fluxuri de lucru - pentru iTech Media, inițiative OKR, CRO și Safety Net, citiți mai multe aici.

Ca industrie, este mai bine să ne îndepărtăm de această falsă dihotomie.

Putem face mai bine.

Sperăm că interviul nostru cu John vă va ajuta să vă ghidați strategia de experimentare în direcția corectă!

Ce sfat a rezonat cel mai mult la tine?

Asigurați-vă că rămâneți la curent cu următorul nostru interviu cu un expert CRO care ne ghidează prin strategii și mai avansate! Și dacă nu ați făcut-o deja, consultați interviurile noastre cu Gursimran Gujral , Haley Carpenter , Rishi Rawat , Sina Fak , Eden Bidani , Jakub Linowski , Shiva Manjunath , Andra Baragan , Rich Page , Ruben de Boer , Abi Hough și ultimul nostru cu Alex Birkett .