Te chinui să dovedești rentabilitatea investiției testării A/B? Lasă-ne să ajutăm

Care este valoarea programului tău de testare A/B? Ce beneficii aduce companiei dumneavoastră?

Știți deja că testarea A/B ajută la optimizarea ratelor de conversie și la creșterea veniturilor. Dar cum poți dovedi exact că testele A/B vă afectează rezultatul final?

În cuvintele lui Matt Gershoff,

Testarea A/B poate atenua schimbările de comportament care duc la vătămări sau pierderi

Dar toate acestea s-ar putea să nu impresioneze grupul C din compania dumneavoastră, care își dorește cifre tangibile care să arate rentabilitatea investiției programului dumneavoastră de testare A/B. Demonstrarea beneficiilor testelor dvs. A/B vă poate câștiga sprijin din partea directorilor în vremuri de tulburări, ca acum.

Iată cum poți dovedi valoarea programului tău de experimentare!

Calcularea rentabilității investiției programului dvs. de testare A/B

Folosind veniturile, puteți calcula rentabilitatea investiției programului dvs. de testare A/B. Oamenii de la Peak Activity au o formulă excelentă pentru calcularea rentabilității investiției. Iată câteva valori despre care ar trebui să știți:

Venituri pe sesiune (RPS)

Calculați RPS-ul atât pentru control, cât și pentru variantă. Acesta este venitul total împărțit la numărul total de sesiuni pentru controlul și varianta dvs.

RPS = (Venit total ÷ Total sesiuni)

Creșterea medie a vânzărilor

Acest lucru va implica RPS-ul atât al controlului dvs., cât și al variantei. Această măsurătoare trebuie să fie semnificativă din punct de vedere statistic.

Creșterea medie a vânzărilor = (RPS ale variantei dvs. – RPS ale controlului dvs.) – 1

Costul realizării testului A/B real

Acesta este venitul din control înmulțit cu creșterea medie a vânzărilor.

Costul testului A/B = (Venit de control * Creștere medie a vânzărilor)

Multiplicator pentru Traffic Split

Mai întâi, calculați sesiunile totale adunând sesiunile totale pentru control și variantă. Apoi, utilizați acea cifră pentru a calcula distribuția traficului pentru control și variantă.

Total sesiuni = (Sesiuni de control + Sesiuni variante)

Distribuția traficului pentru Control = (Trafic de control ÷ Total sesiuni) * 100

Distribuția traficului pentru Variant = (Trafic Variant ÷ Total sesiuni) * 100

Valoarea modificării variantei

Acesta este calculat prin înmulțirea costului de rulare a testelor A/B cu 2. Acest lucru se datorează faptului că testele A/B standard tind să aibă două tratamente. Această cifră diferă pentru testele multivariate în care aveți mai multe tratamente.

Valoarea modificării = (Costul rulării testului * 2)

Valoarea obținută din durata testării

Acesta este practic costul rulării testului A/B eliminat din valoarea modificării variantei.

Valoarea perioadei de testare = (Costul rulării testului – Valoarea modificării)

Estimați venitul incremental dacă varianta este disponibilă

Pentru a găsi vânzările medii pe zi, împărțiți valoarea modificării variantei la numărul de zile în care au rulat testele.

Vânzări medii pe zi = (Valoarea modificării variantei ÷ Durata testului)

Prognoza veniturilor va fi vânzările medii pe zi, înmulțite cu numărul de zile din perioada dvs. de prognoză. Nu uitați să prognozați suficient de departe că efectele sezonalității, campaniilor de vânzări, comportamentului clienților etc. sunt diminuate.

Valoarea generală a programului de testare A/B

Acum puteți calcula rentabilitatea investiției programului dvs. de testare A/B:

Program de testare A/B = (teste câștigătoare + teste pierdute + cost)

Notă: testele pierdute au nevoie doar de primii 3 pași, în timp ce cele câștigătoare au nevoie de toți pașii.

Le-am cerut mai multor companii care au un program matur de testare A/B să ne împărtășească modul în care calculează rentabilitatea investiției testelor lor.

Iată ce au spus.

Ian Kelly, VP de operațiuni la NuLeaf Naturals a împărtășit:

Primul pas este să aflați costul total al experimentului. Aceasta include costul instrumentelor utilizate pentru testarea A/B și timpul necesar pentru efectuarea testării. Valoarea timpului se echivalează prin înmulțirea timpului total petrecut de angajați pe proiect cu salariul orar. De asemenea, adăugați costul de oportunitate în cazul în care testul duce la mai puține conversii. Costul de oportunitate reprezintă banii suplimentari pe care i-ați fi putut câștiga dacă nu ați fi efectuat experimentul.

Al doilea pas este să ai o pâlnie clară care se termină cu vânzarea unui produs. EveryTrack fiecare pas al pâlniei. Utilizați un instrument precum Mixpanel pentru a face acest lucru. Într-un test A/B, vor exista două variante ale aceleiași pâlnii. Modificările pot fi vizate de public, culorile utilizate sau chiar copia utilizată. Ambele variante trebuie urmărite separat și comparate.

Odată ce toate datele de mai sus sunt disponibile, va fi foarte ușor să demonstrați rentabilitatea investiției programului dvs. de testare A/B. Este mai bine să calculați rentabilitatea investiției la sfârșitul fiecărui trimestru. Unele experimente vor eșua, în timp ce altele vor reuși. Îmbunătățirea generală a veniturilor ar trebui să fie mai mare decât costul programului dvs. de testare A/B. Dacă nu este cazul, reconsiderați strategiile de testare existente

George Pitchkhadze, CMO la Thrive Cuisine, prezintă mai jos procesul companiei sale:

Calculați costul experimentului dvs.

Pentru a calcula rentabilitatea investiției, trebuie să vă cunoașteți costurile. Aceasta ar trebui să includă costuri directe și indirecte, de exemplu:

- Costul software-ului/serviciilor utilizate.

- Costul orelor de muncă utilizate.

-Costurile directe (de exemplu, costul închirierii unei liste de e-mail sau reclame PPC).

De exemplu, să presupunem că testez separat A/B două platforme publicitare. Ar trebui să mă uit la costurile noastre publicitare PPC - dar și la câte ore sunt necesare pentru a rula fiecare set de anunțuri și prețul serviciilor de analiză pe care le folosim pentru a ne informa anunțurile.

Calculează-ți randamentul

Această parte este simplă. Calculați profiturile directe care provin dintr-un efort. Ceea ce contează aici este utilizarea instrumentelor analitice moderne pentru a conecta vânzările și veniturile cu lucruri precum e-mailurile trimise, seturi de anunțuri pe FB/Google etc.

Calculați rentabilitatea investiției

Acum că aveți o idee exactă despre rentabilitate și investiție, puteți calcula cu ușurință rentabilitatea investiției. Nu uitați: calculați cu atenție costul experimentului și conectați profiturile la anumite campanii și mesaje implementate

Alte moduri de a măsura impactul testării A/B

Există și alte modalități de a măsura rentabilitatea investiției programului dvs. de testare A/B.

Dionysia Kontotasiou, șeful de integrări, confidențialitate a datelor și ofițer pentru securitatea informațiilor de la Convert, a distribuit încă 4 metode pentru a evalua impactul testelor dvs. A/B.

1. Câte experimente se încheie?

Dacă un procent mare din experimentele unei companii sunt neconcludente, ar putea fi un semn că acestea configurează incorect experimentele. Poate că scriu ipoteze ambigue precum „ Această schimbare va face aplicația mai bună ”, mai degrabă decât ipoteze explicite precum „ Această modificare va crește înscrierile lunare cu cinci procente ”.

2. Feedback-ul echipei de produs

Echipa de produs are mai multe informații și date despre utilizatori decât înainte? Lansările lor de produse cresc mai de succes? Dacă da, acesta este un semn bun că testele A/B efectuate au succes.

3. Experimentează Viteza

Viteza de testare este măsura a câte teste efectuați într-o anumită perioadă de timp. Acesta este un punct de referință operațional pentru a evalua cât de repede vă puteți proiecta, dezvolta, testa, analiza și lansa testele. În timp ce unele teste mai mari vor dura mai mult și sunt importante pentru a produce un impact mai mare asupra rezultatelor, „ câștigurile rapide ” mai mici nu ar trebui să fie reduse.

4. Costurile proiectate vs. efective pentru rularea programului

Urmăriți orele sau bugetul dedicat rulării programului dvs. De asemenea, puteți monitoriza bugetul proiectat față de cheltuielile reale pentru proiectele dvs. de testare pentru a evalua valoarea programului dvs. de testare A/B.

Dacă utilizați Conversie experiențe pentru programul dvs. de testare A/B, aveți acces la rapoarte complexe (ca în captura de ecran de mai jos) care includ obiectivele dvs. și performanța fiecărei variante de testare - astfel încât nu numai să puteți maximiza rentabilitatea investiției, ci și să o dovediți!

Concluzie

Valoarea testării A/B este atât în ​​găsirea de îmbunătățiri care duc la creșterea veniturilor sau pentru a oferi o experiență mai bună pentru clienții dvs. pe site-ul dvs., cât și în atenuarea riscurilor care pot apărea. Folosind venituri și alte măsuri, puteți dovedi în mod concludent rentabilitatea investiției programului dvs. de testare A/B către C-Suite din compania dvs.

Cum îți poți crește rentabilitatea investiției în urma testării A/B?

Rezervați o demonstrație cu Convert pentru a afla.

Solicitați demonstrația dvs