Seria de testare a hărților mintale: Cum să gândiți ca un profesionist CRO (Partea 6)

Interviu cu Jakub Linowski de la GoodUI

Te-ai întrebat vreodată de ce unii oameni par să aibă un talent pentru CRO?

Nu doar pentru că sunt buni la crearea experimentelor. De asemenea, ei știu să gândească lucrurile într-un mod diferit, ceea ce vă va ajuta și această serie să faceți. Vom arunca o privire atentă asupra mentalităților care compun CRO de succes și asupra modului în care le puteți aplica strategiei dvs.

Dacă reușiți să vă aflați în starea de spirit potrivită, atunci succesul va veni mult mai ușor decât dacă încercați fără să înțelegeți mai întâi unde ar putea fi punctele moarte. În cele din urmă, seria Testing Mind Maps este menită să vă ajute să vă planificați mai bine strategia de optimizare și să executați testele cu mai multă încredere!

În acest articol, Jakub Linowski de la GoodUI împărtășește că puterea experimentării constă nu numai în capacitatea sa ca metodă utilă, ci și în generarea de perspective puternice care pot informa decizii mai bune.

Jakub, spune-ne despre tine. Ce te-a inspirat să intri în testare și optimizare?

Am fost atrasă de lumea experimentelor în jurul anului 2014, când experiența mea în design m-a condus pe această cale. Pe măsură ce oamenii au început să împărtășească exemple de bune UI și liste de „cele mai bune practici”, la fel am făcut și eu, și așa a apărut GoodUI.org. Cu toate acestea, nu mi-a luat mult timp să realizez că toate sugestiile mele și tiparele UI erau mai aproape de ipotezele vizuale decât de orice susținut de dovezi. Îmi doream foarte mult să câștig mai multă încredere și să fac o treabă mai bună în a filtra ideile bune de cele rele.

Așa că, când am auzit de testarea A/B, m-a entuziasmat destul de mult (chiar dacă nu aveam idee ce este un interval de încredere). Am angajat un dezvoltator front end și am lansat o mică agenție de optimizare. Am început să testăm orice idei citite pe bloguri, auzite de la clienții noștri, precum și din propria noastră bibliotecă de modele GoodUI emergente. Cu majoritatea clienților noștri permițându-ne să publicăm teste a/b în mod deschis, a început să devină evident că unele modele erau mai bune decât altele. Unii nu au făcut mare lucru. Alții s-au replicat bine. Iar altele au avut rezultate negative.

Acum trebuia să cântărim aceste experimente.

Și astfel, GoodUI.org a început rapid să se transforme într-un depozit de experimente similare și comparabile, cu o buclă de feedback cerc complet. Lucrurile care au avut performanțe mai bune cu o frecvență și un impact mai ridicate au fost evidențiate în partea de sus (folosind date mediane agregate). În timp ce rezultatele testelor pentru modele similare au fost reintroduse în baza noastră de date, corectând predicțiile noastre și sporind precizia.

Deci, da, îmi place experimentarea atât pentru metoda minunată care este, dar și ca sursă puternică de cunoștințe profesionale care ne permite să facem predicții mai bune.

De câți ani optimizezi? Care este singura resursă pe care o recomandați testerilor și optimizatorilor aspiranți?

Am desfășurat primul test a/b de salt în mai 2014, pe o pagină de destinație a ofertei pentru o mare companie de asigurări. Variația includea tot ceea ce știam la acea vreme despre îmbunătățirea formularelor, formularelor de copiere și de lead-uri bazate pe propria noastră experiență limitată. Rezultatul a fost o creștere relativă de +53% a derivațiilor (±28, p-val 0,0002). Acesta este primul meu experiment care m-a atras.

În ceea ce privește resursa, îmi place să învăț din ceea ce testează alții. Este deosebit de interesant și valoros să cauți experimente de la jucători mari precum Netflix, Airbnb și Amazon despre care știm că au o dimensiune bună a eșantionului și realizează o mulțime de teste. În general, cred că este întotdeauna o idee bună să învățăm de la oameni cu câțiva pași înaintea noastră (așa cum sugerează mulți, inclusiv în interiorul Mastery de Robert Greene).

Răspundeți în 5 cuvinte sau mai puțin: Care este disciplina de optimizare pentru dvs.?

Optimizarea înseamnă că îmbunătățim lucrurile.

(Rezultatele sunt esențiale pentru optimizare. De exemplu, o sută de rezultate plate sau nedorite ale experimentului nu sunt suficient de bune. S-ar putea să înveți o tonă, da. Dar pentru ca noi să optimizăm ceva, trebuie să mișcăm acul în direcția pe care o dorim. .)

Care sunt primele 3 lucruri TREBUIE să înțeleagă oamenii înainte de a începe optimizarea?

EXPLORARE – generarea a cât mai multe idei posibil.

EXPLOATARE – prioritizarea ideilor cu rezultate din trecut pentru o viteză mai mare.

EXPERIMENTARE – deschiderea ideilor noastre pentru a fi falsificate sau validate.

Cum tratezi datele calitative și cantitative, astfel încât să-ți spună o poveste imparțială?

Sunt de acord cu ideea de a valida rezultatele testului a/b. În general, cu cât avem mai multe măsuri coerente, cu atât experimentele noastre pot deveni mai fiabile și mai demne de încredere.

Când vine vorba de compararea rezultatelor, există câteva moduri prin care putem face acest lucru:

• Compararea mai multor valori din același experiment (de exemplu, consistența efectului în: adăugări în coș, vânzări, venituri, achiziții returnate etc.)
• Compararea datelor istorice în cadrul experimentelor separate (de exemplu, consistența efectului între două experimente separate executate pe două site-uri web separate)

Ce fel de program de învățare ați configurat pentru echipa dvs. de optimizare? Și de ce ați luat această abordare specifică?

Cred cu tărie că replicarea experimentului este un element esențial pentru a îmbunătăți predicția rezultatelor testelor (generarea de cunoștințe profesionale).

Prin urmare, în propria noastră platformă, grupăm experimente similare și cumulăm valori similare.

Când construiți o bază de cunoștințe din experimente, celălalt lucru important este să minimizați părtinirea publicării . Adică, păstrarea unei evidențe a tuturor experimentelor independent de rezultatele lor (inclusiv cele pozitive, negative, semnificative și nesemnificative).

Care este cel mai enervant mit al optimizării despre care ai vrea să dispară?

Cel mai recent, am fost enervat de oameni care susțin că experimentarea nu are niciun dezavantaj (capturat frumos de acest fir minunat de pe LinkedIn). Un mod subtil care iese uneori la iveală este prin afirmații care sună asemănător cu „nu există teste care pierde, ci doar învățături”.

Acest lucru ar putea fi adevărat în lumile turnului de fildeș unde învățarea este obiectivul cheie și unde experimentatorul este protejat de costuri.

Cu toate acestea, ca profesie, atunci când folosim experimentarea ca instrument de optimizare a site-urilor web ale clienților, nu există prânz gratuit. Desfășurarea experimentelor vine cu costurile, riscurile, dezavantajele și avantajele sale. Din acest unghi, cred că este extrem de sănătos să urmăriți și să recunoașteți rezultatele pentru ceea ce sunt cu adevărat (inclusiv să vă simțiți confortabil să admitem șiruri de teste negative și să nu le văruiți). Toate profesiile au nevoie de bucle de feedback atât pozitive, cât și negative pentru a continua să se îmbunătățească.

Sperăm că interviul nostru cu Jakub vă va ajuta să vă ghidați strategia de conversie în direcția corectă! Ce sfat a rezonat cel mai mult la tine?

Asigurați-vă că rămâneți la curent cu următorul nostru interviu cu un expert CRO care ne ghidează prin strategii și mai avansate! Și dacă nu ați făcut-o deja, consultați interviurile noastre cu Gursimran Gujral de la OptiPhoenix , Haley Carpenter de la Speero , Rishi Rawat de la Frictionless Commerce , Sina Fak de ConversionAdvocates și Eden Bidani de la Green Light Copy !