Input vs Output Metrics in Experimentation: Cum sa alegi ce sa masori
Publicat: 2022-07-29Valorile pe care le definiți și urmăriți pentru programul dvs. de experimentare sunt incredibil de importante.
Ceea ce măsori îți determină concentrarea. Ei spun „nu poți gestiona ceea ce nu măsori”.
Și deși acest lucru este în întregime adevărat (cu siguranță poți slăbi chiar dacă nu te uiți la un cântar), este adevărat direct și practic (este mult mai ușor să slăbești dacă te uiți la un cântar).
Mi-am petrecut mult timp gândindu-mă la ce valori contează în experimentare.
Mai important, am petrecut mult timp gândindu-mă atât la valorile de intrare, cât și la valorile de ieșire.
- Care este diferența dintre valorile de intrare și de ieșire?
- Valori de ieșire ale experimentelor
- Micro-conversii vs. macro-conversii (și valori de monitorizare)
- Macro-conversii
- Valori privind rata de conversie (de orice tip)
- Valori pentru client
- Micro-conversii
- Macro-conversii
- Valori de intrare pentru experimente
- 1. Experimentează viteza
- 2. Rata concludentă
- 3. Rata de câștig
- 4. Creștere medie per câștig
- 5. Timp de dezvoltare
- 6. Timpul până la producție
- Metrici de compoziție și criteriul general de evaluare
- Cum să alegeți obiectivele de experimentare și KPI-urile
- Concluzie
Care este diferența dintre valorile de intrare și de ieșire?
Valorile de intrare sunt indicatori principali, lucruri pe care le puteți controla direct. De obicei, ei urmăresc efortul, alocarea resurselor și eficiența operațională.
Ideea valorilor de intrare este că acestea se corelează cu valorile de ieșire.
Deși nu puteți prezice cu exactitate, în special, care va fi rata de conversie agregată, puteți controla cu ușurință câte experimente rulați, cât de eficient sunteți în a împinge câștiguri în producție și, într-o anumită măsură, care este rata dvs. de câștig. și mărimea medie a câștigului sunt.
Aceste lucruri pot și ar trebui să se coreleze cu valorile dvs. de ieșire, care sunt de obicei valori numerice de afaceri la care le pasă părțile interesate. Sunt cifrele care arată dacă tot efortul pe care îl depui experimentării dă roade sau nu din perspectiva rentabilității investiției.
Deoarece valorile de ieșire se concentrează pe rezultatele afacerii, le voi trece mai întâi prin acestea - motivul fiind că valorile de ieșire ar trebui să determine valorile de intrare.
Simplu spus, valorile dvs. de ieșire sunt ceea ce contează pentru afacere, iar valorile dvs. de intrare sunt pârghiile pe care le puteți controla pentru a ajunge la acele rezultate.
Valori de ieșire ale experimentelor
Valorile de ieșire sunt ceea ce îi arăți șefului tău. Acestea se leagă de valoarea programului tău de experimentare și arată că, per ansamblu, produci o rentabilitate pozitivă a investiției.
În mod realist, o măsurătoare de ieșire de experimentare poate fi orice cantitativ pe care îl puteți măsura. În cele mai multe cazuri, aceasta este o valoare discretă sau binară, cum ar fi rata de conversie, dar uneori este o valoare continuă, cum ar fi venitul per vizitator.
În toate cazurile, doriți să mapați valoarea de ieșire care reprezintă cea mai mare valoare pentru afacerea dvs.
Cel mai bun mod de a împărți valorile de experimentare este în două categorii: micro-conversii și macro-conversii (cunoscute și ca valori primare și secundare) .
Micro-conversii vs. macro-conversii (și valori de monitorizare)
Sfatul comun în spațiul de testare A/B este optimizarea pentru macro-conversii.
Macro-conversiile, deși sunt definite de dvs. și de afacerea dvs., sunt cele care se află cel mai aproape de bani. În comerțul electronic, aceasta este achiziția sau venitul per vizitator. În B2B, acestea ar putea fi conversii de clienți potențiali de înaltă calitate sau poate înscrieri de produse pentru un software freemium.
Oricare ar fi cazul, puteți mapa micro-conversiile direct la venituri și, astfel, rentabilitatea investiției în aceste experimente este ușor de măsurat și de justificat efortul.
Micro-conversiile sunt acele acțiuni care duc la macro-conversie și tind să se coreleze puternic cu finalizarea macro-conversiei.
În comerțul electronic, micro-conversiile pot fi adăugate în coșuri, clicuri pe bannere sau chiar înscrieri pe liste de e-mail. În B2B, acestea pot fi clicuri către pagina de prețuri, clicuri CTA sau înscrieri pe liste de e-mail.
Există, de asemenea, valori de monitorizare sau valori de balustradă . Aceștia sunt indicatori de calitate pe care s-ar putea să nu țintii să-i îmbunătățești, dar să nu-i faci rău. Prin urmare, dacă un experiment crește rata de conversie, dar crește și rata de returnare a produsului sau de rambursare, este posibil să nu împingeți experimentul în producție.
Nu există o împărțire universală și obiectivă între cele două categorii, deși există câteva linii de falie evidente. Și anume, conversia duce direct la venituri pentru afacerea dvs.?
Voi parcurge aici 18 valori de ieșire, împărțindu-le în macro și micro-conversii. La final, vom discuta despre cum să alegeți obiectivele de ieșire potrivite pentru afacerea dvs.
Macro-conversii
Valori privind rata de conversie (de orice tip)
Rata de conversie este cea mai comună măsură de producție, dar poate însemna multe lucruri pentru multe tipuri diferite de afaceri.
La un nivel fundamental, înseamnă doar că încercați să creșteți proporția celor care văd o experiență și apoi finalizați o acțiune dorită după ce ați vizionat acea experiență.
1. Rata de conversie a clienților potențiali
Unul dintre cele mai comune tipuri de rate de conversie este rata de conversie a clienților potențiali.
Aceasta este proporția de vizitatori ai site-ului dvs. care se înscriu pentru a deveni potențiali. Definiția unui „lead” depinde desigur de afacerea dvs. În unele cazuri, este cineva care se înscrie pentru a solicita un demo.
Uneori, companiile analizează în continuare și numără doar clienții potențiali „calificați”, care se bazează pe îmbogățirea datelor sau filtrarea diferitelor dimensiuni pentru a determina dacă cineva este sau nu potrivit pentru produs.
Alte companii vor număra clienții potențiali calificați în marketing, cum ar fi acei vizitatori care se înscriu la un webinar sau descarcă o carte albă.
2. Înscrieri sau achiziții de produse
Înscrierile pentru produse sunt macro-conversii clare. Dacă vindeți bunuri fizice, acesta este cineva care le cumpără. Dacă sunteți o companie SaaS freemium, acesta este cineva care intră în produsul dvs. pentru prima dată.
Este greu de imaginat un program de experimentare de marketing care nu urmărește acest lucru ca un KPI de bază pentru experiment.
3. Rata de activare
Intrând în experimentarea produsului, unul dintre primele lucruri de care trebuie să țineți cont pentru o companie cu creștere condusă de produse este rata de activare.
După ce cineva se înscrie, care este prima acțiune din produs care are sens și arată că utilizatorul este implicat?
Unele companii au acest lucru mapat pentru o anumită acțiune sau număr de acțiuni (Facebook avea faimoasa regulă a 7 prieteni în 7 zile).
Acest moment este de obicei denumit „momentul aha”, momentul sau acțiunea care determină utilizatorul să înțeleagă valoarea produsului. Acest moment este de obicei descoperit atât prin feedback-ul calitativ, cât și prin capacitatea cantitativă de a corela această acțiune cu retenție mai lungă sau rate mai bune de monetizare.
4. Rata de monetizare
La fel ca rata de activare, rata de monetizare este folosită în mod obișnuit în companiile cu creștere condusă de produse cu mulți utilizatori freemium sau cel puțin mai multe niveluri de produse în creștere.
În modelele freemium, această măsurătoare este discretă – utilizatorul gratuit trece bariera de a deveni utilizator plătit sau nu? În alte modele, această măsurătoare poate fi continuă – de exemplu, dacă o companie taxează pe baza utilizării, cum ar fi AWS, nu este la fel de simplu ca delimitarea între conturile „plătite” și „neplătite”.
5. Înscrieri pe liste de e-mail
Majoritatea companiilor în acest moment realizează valoarea marketingului prin e-mail și construiesc o listă de e-mail solidă. În special pentru marketerii de conținut și bloggeri, cea mai interesantă macroconversie poate fi conversia cititorilor în abonați de e-mail.
Pictarea acesteia cu o valoare în dolari va necesita unele analize, dar dacă aveți suficiente date istorice, de obicei puteți atribui o valoare medie a veniturilor unui anumit e-mail pe care îl colectați.
6. Rata de activare prin e-mail
Rata de activare a e-mailului este o valoare de marketing subestimată. Doar pentru că cineva se înscrie pentru lista ta de e-mail nu înseamnă că este logodit sau valoros.
Aceasta este ca versiunea „high fit lead” a marketingului prin e-mail.
Puteți defini „activarea” aici cum doriți, dar multe vor include ceva de genul „a deschis unul dintre primele trei e-mailuri” sau un alt mod de a arăta că persoana vă citește și deschide e-mailurile.
Valori pentru client
Valorile clientului sunt de obicei variabile continue, ceea ce le face puțin mai dificil de utilizat ca valori de experiment. Dar sunt aproape întotdeauna cea mai apropiată aproximare a valorii reale a afacerii și pot acționa ca indicatori grozavi ai muncii tale.
7. Venituri per vizitator
Venitul per vizitator este una dintre cele mai bune valori compozite pentru comerțul electronic. Nu toată lumea va cumpăra ceva, dar unii vor cumpăra. Iar unii dintre cei care cumpără vor cumpăra o cantitate mare de produs.
Venitul per vizitator plasează o valoare medie pentru fiecare vizitator al site-ului web, astfel încât includeți atât dimensiunea achiziției, cât și numărul de clienți care cumpără în această ecuație.
8. Valoarea medie a comenzii
Valoarea medie a comenzii calculează, printre cei care au cumpărat, care este dimensiunea medie de achiziție. Acest lucru este relevant, din nou, pentru site-urile de comerț electronic de unde puteți cumpăra direct de pe site. Ar putea fi, de asemenea, ASP (prețul mediu de vânzare) în oferte B2B.
9. Numărul de achiziții
Un fel de măsură de retenție pentru comerțul electronic, puteți urmări numărul de achiziții într-o anumită perioadă de timp (lună, trimestru, an).
Acesta urmărește achizițiile repetate și indică atât trăsăturile site-ului, cât și canalele de marketing pentru a atrage mai mulți cumpărători repetați (de obicei, marketing prin e-mail și publicitate plătită). Aceasta este o măsură holistică care caută nu numai să optimizeze pentru vânzare, ci și pentru a doua și a treia vânzare.
10. Retentie
În produsele SaaS, reținerea clienților este cheia creșterii. Puteți determina mii de utilizatori să se înscrie, dar dacă nu plătesc și continuă să plătească, afacerea dvs. va pierde venituri în timp.
În timp ce multe lucruri influențează reținerea dincolo de produsul în sine, experimentele pot ajuta, de asemenea, să mute acul asupra reținerii. Urmărirea păstrării ca un KPI experimental devine oarecum dificilă pentru multe companii, deoarece este un ciclu lung de feedback.
11. Valoarea clientului pe durata de viață
În cele din urmă, vârful mistic al piramidei când vine vorba de valorile compozite: valoarea de viață a clientului.
Acest lucru ia în considerare toate valorile anterioare, cum ar fi generarea de bani sau prețul mediu de vânzare, păstrarea (cât timp cineva rămâne client plătitor), precum și ratele medii de conversie, apoi creează o valoare compozită folosind formule pentru valoarea de viață a clientului pentru a estima cât, în medie, un client valorează afacerea ta.
Acesta este, evident, un lucru foarte dificil de măsurat pe bază de experiment, dar ca KPI de afaceri, este important să știți.
Acest lucru vă permite să găsiți modalități de a crește valoarea produsului și vă arată cât de fezabile ar putea fi anumite canale de marketing și campanii publicitare.
Micro-conversii
1. Rate de clic (de mai multe tipuri)
Rata de clic este principalul tip de micro-conversie. Fie că este vorba de la anunț la pagina de destinație sau de la pagina de destinație la solicitarea unei pagini demo.
În comerțul electronic, aceasta este adesea urmărită ca rata de clic pe pagina produsului sau poate chiar ca o acțiune de „adăugare în coș” sau ca vizualizare a coșului de cumpărături. Acest lucru ar putea fi, de asemenea, ceva de genul ratelor de deschidere a e-mailului sau ratelor de clic pe e-mail pentru agenții de marketing prin e-mail. Instrumentul dvs. de marketing prin e-mail ar trebui să vă ofere aceste informații cu ușurință, precum și posibilitatea de a testa A/B diferite versiuni.
Desigur, trebuie să faceți clic dintr-o locație pentru a ajunge la următoarea, așa că rata de clic ar trebui să se coreleze cu un volum mai mare de achiziții sau conversii.
Dar dacă urmăriți doar rata de clic ca KPI-ul dvs. de experiment, puteți deseori să jucați acest lucru prin înșelătorie de copiere sau UX.
După cum spune Lukas Vermeer,
CTR-ul este groaznic pentru optimizarea rezervărilor la hoteluri (de exemplu, EMK cu subiectul „BERIRE GRATUITĂ” va îmbunătăți CTR, dar probabil va reduce vânzările odată ce clienții își dau seama că nu există bere pe site-ul dvs., cu siguranță nu bere gratuită).
Andrew Chen numește asta conservarea intenției și presupune că acesta este unul dintre motivele pentru care rezultatele testelor A/B nu se traduc în linia de sus.
2. Clicuri pe link
Clicul pe link este exact ceea ce sună – numărul de persoane care dau clic pe un anumit link. Aceasta este o altă valoare a ratei de clic, dar pentru anumite companii (de exemplu, afiliat), clicul pe un link de ieșire este un indicator important al intenției.
Am configurat întotdeauna urmărirea clicurilor pe link-uri pe site-urile web cu care lucrez, mai ales pentru că poate indica comportamentul utilizatorilor site-ului web și oportunități de optimizare.
Unele experimente, de asemenea, sunt create cu intenția de a schimba direcția comportamentului utilizatorului (uneori maparea la o macro-conversie, dar uneori doar pentru a vedea dacă pot genera mai multe clicuri către un modul nou).
3. Redare video
Dacă aveți un videoclip pe o pagină de destinație, este important să urmăriți câte persoane vizionează de fapt videoclipul sau îl redă.
Cu toate acestea, am văzut experimente în care doar adăugarea unui videoclip crește conversiile fără ca mulți vizitatori să vizioneze videoclipul în sine. Deci, dacă urmăriți acest lucru, aș recomanda în continuare maparea experimentelor dvs. către macroconversia de pe pagină.
4. Finalizări video
Există câți oameni au redat videoclipul și cât de mult îl urmăresc oamenii. Finalizările videoclipurilor sau rata de finalizare a videoclipurilor vă arată cât de departe ajunge persoana medie prin videoclip.
Din nou, acest lucru poate fi important, mai ales pe paginile educaționale, dar tot te-aș sfătui să alegi un KPI de afaceri mai adecvat, cum ar fi rata de conversie a clienților potențiali. Puteți urmări în continuare completările video, și probabil că ar trebui, dar doar pentru că cineva vizionează un videoclip întreg nu înseamnă neapărat că are mai multe șanse să facă conversie.
5. Vizualizări tur de produs
Pentru multe companii B2B care nu au un plan freemium sau de încercare gratuită, un tur interactiv limitat al produsului este o modalitate excelentă de a le arăta vizitatorilor cum arată și cum se simte de fapt produsul.
Iată un exemplu de tur al produsului Pendo:
Ca un KPI, ar trebui să tratați acest lucru ca vizionări video sau orice fel de vizualizări ale modulelor promoționale. Deși pot și adesea se corelează cu un KPI mai centrat pe afaceri, cum ar fi rata de conversie, nu se întâmplă întotdeauna. Prin urmare, urmăriți aceste lucruri, dar și măsurați-vă macroconversia ca KPI principal al experimentului.
6. Rata de finalizare a turului produsului
Din nou, există cei care văd un tur de produs și revin imediat, iar acei vizitatori sunt diferiți de cei care văd un tur de produs și îl finalizează. Poate că există o corelație între ratele de finalizare a turului de produse și rata de conversie, dar este posibil să nu existe.
Dacă tratați turul produsului ca pe un produs în sine, atunci, desigur, este important să vedeți câți oameni îl finalizează. Aceasta este o valoare UX bună pentru turul produsului.
7. Prețuri vizualizări ale paginii
Majoritatea cumpărătorilor B2B vor vizita pagina de prețuri înainte de a cumpăra, deși contează când în călătoria clientului vizitează această pagină. Mulți agenți de marketing vor urmări rata de clic pe pagina de prețuri ca o micro-conversie.
Este un fel ca versiunea de adăugare în coș care există în optimizarea comerțului electronic.
Valori de intrare pentru experimente
Valorile de intrare în programul dvs. de experimentare sunt definite la nivel de program. Ele nu urmăresc direct veniturile, dar sunt acțiuni care se corelează cu îmbunătățirea valorilor dvs. de ieșire.
În majoritatea cazurilor, valorile de intrare pentru experimente vor încerca fie să mărească rentabilitatea experimentelor, fie să scadă costul derulării experimentelor (prin creșterea eficienței).
Voi trece prin 6 valori de intrare pentru experimentare aici.
1. Experimentează viteza
Viteza experimentului măsoară câte experimente lansați într-o anumită perioadă de timp.
În general, cele trei valori de intrare care stau la baza rentabilității investiției sunt câte experimente rulați, ce procent dintre ele sunt câștigători și care este câștigul mediu.
Mai simplu spus, derularea mai multor experimente (sau mai multe variante per experiment) crește șansa de a obține un câștigător (cu condiția ca acestea să fie experimente de bună calitate).
Creșterea vitezei experimentului este, de asemenea, excelentă ca funcție de forțare; vă ajută să vedeți unde apar blocajele de dezvoltare și producție și unde aveți nevoie de resurse suplimentare.
2. Rata concludentă
Pentru mine, nimic nu este mai descurajant decât un șir de experimente neconcludente. Prefer să văd uneori o pierdere concludentă decât un test neconcludent, pentru că cel puțin atunci pot insinua că ceea ce testez contează pentru experiența utilizatorului.
Prin urmare, unii oameni încep să urmărească ratele concludente - numărul de experimente concludente din toate experimentele pe care le desfășurați.
Dacă programul dvs. se află într-o etapă mai devreme sau se pare că desfășurați o mulțime de experimente neconcludente cu puțină învățare, aceasta ar putea fi o măsură bună pentru a vă forța să ieșiți din această fază.
3. Rata de câștig
Cu toții vrem să facem experimente câștigătoare. O parte din experimentare constă în acceptarea faptului că nu vor fi toți câștigători (dacă au fost, trebuie să vă întrebați cât de mult fructe agățate abordați față de încercarea de lucruri noi inovatoare).
Rata de câștig vă arată, dintre experimentele pe care le derulați, câți dintre ele sunt câștigători?
Dacă creșteți numărul de experimente și vă mențineți rata de câștig, rentabilitatea investiției crește (presupunând costuri marginale pentru derularea mai multor experimente). Dacă vă mențineți viteza experimentului, dar creșteți rata de câștig, crește și rentabilitatea investiției.
Aceasta este o pârghie cheie în îmbunătățirea rentabilității investiției experimentului.
4. Creștere medie per câștig
În cele din urmă, dintre experimentele câștigătoare pe care le derulați, care este creșterea medie cu care câștigă?
Acest lucru este foarte greu de controlat, pentru că dacă am putea prezice amploarea unui experiment, ei bine, nu ar fi nevoie să-l rulăm.
Cu toate acestea, este bine să urmăriți, deoarece, la fel ca viteza experimentului și rata de câștig, este un indicator principal clar al valorii programului dvs. de experimentare.
În plus, încurajarea câștigurilor mai mari poate determina adesea agenții de marketing și marketerii de produse să gândească în afara cutiei și să încerce experimente mai mari și mai inovatoare.
5. Timp de dezvoltare
Împărțim procesul meu de experiment în pași distincti.
De obicei, fluxul de lucru arată astfel:
Idee de experiment > document de experiment > wireframe > proiectare > dezvoltare > QA > rulare test > analiza > document > push la producție
Am stabilit termene de scadență estimate pentru fiecare pas în etapa de planificare și apoi calculez delta dintre data scadentă estimată și cea reală. Dacă există o diferență prea mare, asta îmi arată că este posibil să avem un blocaj de proces.
Cel mai adesea, acest lucru va veni în faza de proiectare sau dezvoltare.
Dacă puteți îmbunătăți aceste etape, puteți crește debitul experimentului, care este unul dintre KPI-urile cheie de intrare la care ne uităm.
6. Timpul până la producție
Similar cu timpul de dezvoltare, timpul până la producție măsoară o etapă a procesului de experiment: cât timp durează de la analizarea unui experiment câștigător până la implementarea lui live în produs sau pe site-ul dvs. web.
Această etapă este adesea subestimată. Experimentatorii vor sărbători o victorie și apoi vor trece la următoarea, dar cât de repede vei implementa ceva este important. În primul rând, reduce regretul – timpul în care operezi cu o variantă suboptimă.
În al doilea rând, îmbunătățirea în această etapă vă permite să vă concentrați din ce în ce mai mult timp dezvoltator în configurarea experimentelor ulterioare.
Metrici de compoziție și criteriul general de evaluare
Există un concept în experimentare cunoscut sub numele de criteriu general de evaluare. S-ar putea numi, de asemenea, o metrică North Star.
Aceasta este o valoare care ține cont de valorile de protecție (adică valori de urmărit și de luat în considerare care pot implica vătămări sau pierderi din experiența utilizatorului). Valorile de gardă ar putea include lucruri precum rata de respingere, rata de ieșire sau chiar scoruri de atitudine precum NPS sau CSAT.
Evaluarea generală combină, de asemenea, uneori câteva măsurători de rezultate diferite într-o singură măsură de succes.
Aceste valori nu sunt aproape niciodată indicatori pe termen scurt, cum ar fi clicurile, ci mai degrabă urmăresc un obiectiv macro-afacere.
Ronny Kohavi a dat aceste exemple, „unități achiziționate, venit, profit, valoare estimată pe durata de viață sau o combinație ponderată a acestora”.
Deși este de dorit să se creeze un criteriu de evaluare generală, este nevoie de obicei de multă muncă de inginerie a datelor, mai ales dacă modelul dvs. de afaceri este o piață sau ceva mai puțin simplu decât comerțul electronic (deși chiar și în acest caz, este dificil să urmăriți valoarea de viață a clientului pe a pe bază de experiment).
Punctul mai larg, însă, este acesta: cu cât vă puteți apropia mai mult de formarea unui indicator cuprinzător de succes – unul care ține cont de valoarea afacerii pe termen lung, precum și de măsurarea balustradei – cu atât mai clare vor fi programul dvs. de experiment și obiectivele sale.
Cum să alegeți obiectivele de experimentare și KPI-urile
Bine, am parcurs aproximativ o duzină de valori de ieșire și mai multe valori de intrare.
Întrebarea este, așadar, cum alegeți dvs. și afacerea dvs. pe ce să vă concentrați – pentru că *este* o alegere și din acea alegere vor decurge tot felul de stimulente, comportamente și acțiuni.
Cel mai bun mod pe care l-am găsit pentru a vă alege valorile, obiectivele și KPI-urile este de a crea un arbore de obiective.
Speero are un exemplu grozav de vizualizare a arborelui de obiective aici:
În ea, ele încep cu obiectivele la nivel de companie, care includ metrici privind satisfacția clienților. Acest lucru duce la obiectivele la nivel de echipă, care se concentrează pe dezvoltarea de succes a caracteristicilor. Apoi încetinește în obiectivele la nivel personal, care se concentrează pe testarea și ideea de noi propuneri de funcții.
Consider că toate obiectivele de echipă și cele personale ar trebui să reflecte și să contribuie în mod direct la obiectivele companiei. Aceasta este alinierea, iar atunci când obțineți rezultate care contribuie la obiectivele companiei, veți avea mult mai mult entuziasm pentru programul dvs., deoarece arătați rentabilitatea investiției reală față de misiunea companiei.
Cum va arăta acest lucru în compania dvs. depinde de mulți factori. Important este să parcurgeți acest exercițiu și să vă gândiți critic ce obiective alegeți.
Concluzie
Modul în care vă definiți obiectivele în experimentare afectează aproape toate acțiunile din aval de aceste obiective.
În teorie, există mii de valori pe care le-ați putea urmări în mod fezabil atât la nivel de ieșire, cât și la nivel de intrare. Alegerea valorilor potrivite, nu numai pentru a urmări, ci și pentru a evalua eficacitatea experimentelor sau a programului dvs., este esențială pentru succesul programului dvs.
Deci, în realitate, cred că ar trebui să alegeți să vă concentrați pe cât mai puține valori posibile. Acest lucru permite concentrarea, dar vă oferă și timp pentru a le îmbunătăți pe parcursul lunilor sau anilor.
Îmi place să-mi împart obiectivele în două categorii: valori de intrare și de ieșire. Valorile de ieșire sunt ceea ce judec experimentele mele individuale sau rezultatele programului meu de experimentare. Sunt ceea ce raportez echipei și directorilor.
Valorile de intrare mă ajută să construiesc un program mai eficient. Ele sunt pe care le judec propriile mele eforturi și pe cele ale echipei mele.
Cum definiți valorile de experimentare pentru programul dvs.? Vă concentrați pe valorile de intrare sau doar pe ieșiri și rezultate?