Ghidul antreprenorilor pentru testarea A/B în magazinele Shopify (+ 9 antreprenori Shopify își împărtășesc poveștile de testare A/B cu rezultate)

Deci ați auzit despre testarea A/B prin viță de vie.

Poate că concurentul tău a menționat-o întâmplător pe un podcast sau echipa ta de marketing consideră că este o idee grozavă. Sau agenția de creștere cu care sunteți în discuții vrea să efectueze teste A/B.

Dezvoltarea unei afaceri nu este ușoară. Tu stii asta. După ce am ajuns până aici, trebuie să fi existat mai multe ocazii în care te-ai chinuit să înțelegi dacă o decizie de afaceri este cea corectă.

Nu ar fi frumos dacă, în loc să pariezi pe ceea ce crezi că îți va dori publicul, ai avea un mod de a ști sigur?

Asta face testarea A/B.

Sigur, beneficiile testării A/B transcend luarea deciziilor bazate pe date, dar în esență, este sosul secret pentru deblocarea creșterii la scară.

Deci, indiferent dacă încercați să faceți bricolaj sau să vă externalizați nevoile, iată tot ce ar trebui să știe un antreprenor Shopify despre testarea A/B.

Ce este E-commerce A/B Testing?

Testarea A/B este un proces prin care puteți înțelege ce caută publicul înainte ca acesta să devină client.

De obicei, testele A/B sunt gândite în ceea ce privește efectuarea unor ajustări minore, cum ar fi schimbarea culorii butonului de îndemn (CTA) sau adăugarea unui nou titlu, dar este mai profund decât atât.

Vă permite să determinați ce copie, design și funcționalitate (UX) rezonează cu vizitatorii dvs. punând o versiune a paginii sau elementului dvs. pe o pagină cu o variație pentru a vedea ce funcționează.

Și abia am început!

Puteți lua conceptul de testare A/B și îl puteți aplica fiecărui canal pe care îl utilizați și interacțiunii pe care o aveți cu publicul dvs.

Dar este important să înțelegeți că testarea A/B pentru comerțul electronic este diferită în comparație cu alte verticale, cum ar fi B2B SaaS.

1. Timpul pentru a realiza venituri este mai scurt
   
   Testarea A/B poate dezvălui impactul asupra veniturilor mult mai rapid decât B2B tradițional. În B2B, ofertele sunt multi-threaded, au mai mulți factori de decizie care fac ciclurile de vânzări să se întindă pe luni, dacă nu pe trimestre.
   
   Deși în mod ideal ar trebui să utilizați testarea A/B pentru cercetare și atenuarea riscurilor și nu doar creșterea veniturilor, motivul vital al oricărei afaceri este veniturile, așa că există un motiv bun pentru a introduce testarea A/B în mixul de creștere.
2. Procesele de checkout sunt complexe (deci mai mult spațiu pentru testare)
   
   În timp ce canalele de cumpărare prin comerțul electronic nu sunt complicate ca B2B, procesul de finalizare a comenzii nu este unidimensional.
   
   Ruben De Boer, autorul cărții Psychology of Buying , explică că plata doare literalmente . Într-un studiu din 2007 pentru a investiga modul în care oamenii cântăresc factorii pentru a lua decizii de cumpărare, participanților li s-au arătat imagini ale produselor și apoi prețul. Creierul lor a fost analizat de aparate fMRI pentru a vedea ce căi neuronale s-ar aprinde.
   
   După cum era de așteptat, vizualizarea imaginilor produselor a luminat centrul de recompense din creierul lor.
   
   Dar pretul? Partea creierului asociată cu durerea fizică și socială s-a luminat ca un pom de Crăciun, ajutând cercetătorii să ajungă la concluzia că compromisul dintre câștig și durere trebuie să aibă sens pentru consumatori să-și deschidă portofelele.
   
   Asta nu înseamnă că trebuie să scazi prețurile, deoarece prețurile semnalează și calitatea produsului. Puteți încerca un font mai mic, puteți oferi plata în avans, puteți afișa reduceri într-un font mai mare sau puteți evita limbajul banilor în copie.
   
   Deci, reducerea durerii de cumpărare înseamnă că trebuie să înțelegeți amestecul de motivații, dorințe și frustrări umane, ceea ce este imposibil fără testarea A/B. Vă puteți testa mesajele, elementele interfeței de utilizare sau puteți revizui procesul de finalizare a comenzii, totul în timp real.

   În unele cazuri, este posibil să nu puteți face modificări majore în coșul de cumpărături și fluxul de plată din cauza limitărilor pe care platforma dvs. de comerț electronic le impune, dar acesta nu este un motiv pentru a abandona testele ambițioase. Puteți testa oricând modificări mai mici care vă oferă o idee despre potențialele ajustări mai mari pe care le-ar putea avea.

   Jonny Longden, director de conversie la Journey Further, recomandă să vă puneți o întrebare:
   
   Care este cel mai mic/cel mai simplu lucru pe care îl putem testa pentru a începe să dovedim acest lucru și pentru a afla despre el?
   
   Nu cădea în capcana „voi testa doar modificări mici” sau dacă ai făcut modificări mai mari „banii sunt deja scufundați, așa că nu îi vom testa”.
3. Analiza mineritului poate fi transformată într-o știință
   
   Cercetarea de conversie bazată pe date calitative este un element de bază în orice fel de testare A/B, dar, în comerțul electronic, datele calitative, cum ar fi analizarea analizelor, pot fi transformate într-o știință care vă ajută să înțelegeți:
   
   
   • Produse USP de evidențiat
   • Beneficii pe care le puteți testa în copie
   • Cum percep clienții concurenții
   • Copiați unghiuri pentru poveștile de produse
   • Punctele dureroase pe care le-ați abordat
   • Puncte de durere neabordate care cauzează abandonul căruciorului Lorenzo Carreri, CRO & Experimentation Consultant, recomandă să gândiți ca un detectiv. Așa cum un detectiv trebuie să descopere povestea din spatele unei crime, puteți folosi recenzii pentru a dezvălui o mulțime de povești.
     

     Oamenii au luat deja o decizie cu privire la cumpărare și acum, fără ca noi să-i supărăm cu un sondaj de ieșire sau un widget, de fapt își împărtășesc în mod organic experiența.

     De fapt, analiza pulsului lui Carreri pentru diferite industrii dezvăluie o temă comună - oamenii nu au tendința de a împărtăși informații despre experiența lor la fața locului. Deci nu contează ce întrebare pui sau cum o pui.
     
     Dar cu mineritul de recenzii, în special pe Amazon, oamenii tind să-și împărtășească cunoștințele. Cu cât adunați mai multe informații, cu atât datele dvs. devin mai semnificative, ceea ce vă ajută să vă formați o ipoteză mai bună pentru testare.
4. Fără lipsă de trafic pentru comerțul electronic
   
   Un obstacol semnificativ cu testarea A/B este faptul că nu aveți suficient trafic, ceea ce înseamnă că rezultatele pot fi părtinitoare.
   
   Dar aceasta nu este o problemă pentru magazinele de comerț electronic. Un magazin Shopify cu 7 cifre primește cu ușurință sute de mii de vizitatori, dar o companie B2B din seria D ar obține probabil 1/4 din acest trafic.

De ce ar trebui întreprinzătorii Shopify (serios) să ia în considerare testarea A/B?

Comerțul electronic este pregătit pentru testarea A/B. Potențialul de a vedea rezultate rapid cu un număr mare de vizitatori și mult spațiu pentru a vă juca este un motiv suficient pentru a adopta o cultură a testării A/B.

Dar poate că nu ești încă acolo. O creștere a traficului dvs. chiar acum aduce o creștere a veniturilor.

Întrebarea este, cât timp poți ține așa?

Mai mult trafic ≠ mai mult venit peste un punct. Această cale vă presupune să cheltuiți mai mult pe reclame și, în același timp, să vă consumați marjele de profit cu reduceri.

Și când te uiți la giganți de comerț electronic precum Amazon, eBay sau Etsy, vei observa că au în ADN-ul lor teste A/B. Acesta este tocmai motivul pentru care prosperă. Ca să nu mai vorbim, este firul comun pe care îl au toate magazinele de succes Shopify.

Este ușor de înțeles de ce testarea A/B stimulează creșterea. Uită-te la cât de granulare sunt testele pe care le rulează Amazon:

Dar când vine vorba de asta, testarea A/B nu este doar o modalitate de a rămâne competitiv - este o decizie de afaceri bună.

De ce? Pentru că strategiile tale actuale probabil nu funcționează în favoarea ta.

1. Rentabilitatea cheltuielilor publicitare scade vertiginos datorită iOS 14
   Probabil că cheltuiți mai mulți bani decât înainte de a încerca să obțineți atenție asupra produsului dvs., dar lumea post-ATT a încurcat cu modul în care funcționează conversiile bazate pe pixeli. Și retargeting și audiențe asemănătoare? Nu mai sunt la fel de eficiente. În cazul în care obțineți unele conversii, fiți pregătit să faceți față discrepanțelor dintre Managerul publicitar și backend-ul dvs. Shopify.

2. Ratele dvs. de deschidere sunt denaturate
   Numerele de e-mail nu mai sunt exacte. Mail Privacy Protection (MPP) s-a asigurat de asta. Și listele dvs. bazate pe implicare pot avea direcționare discutabilă și conversii mai scăzute.

3. Ecuația ta nu are reținere
   Urmărirea traficului rece este o mișcare de afaceri proastă. 40% din veniturile dvs. provin de la clienți fideli. Traficul atrage cumpărătorii în canalul dvs., dar păstrarea crește valoarea de viață (LTV) a acestor cumpărători.

4. Atribuirea ta de marketing este nasolă
   Instrumentele nu vă pot oferi date utilizabile, iar echipa dvs. nu poate atribui veniturile unor anumite modificări. Nu poți apăsa toate butoanele sperând să vezi creștere. Trebuie să obțineți o afacere specifică sau să construiți o afacere cu 8 cifre nu este pusă în discuție.

Testarea A/B răstoarnă vechiul manual și vă oferă șansa de a utiliza o abordare validă științific, care este repetabilă, de încredere și profitabilă.

Iată de ce OLIPOP, o companie alternativă la sifon DTC, susține testarea A/B:

Testarea A/B îmbunătățește implicarea conținutului, reduce ratele de respingere, crește rata de conversie și minimizează riscul, toate oferind în același timp date ușor de analizat. Efectuând un test A/B, poți să-ți dai seama ce conținut rezonează cu publicul țintă. Puteți utiliza apoi aceste date pentru a vă influența strategia de marketing. Aceste teste vă ajută, de asemenea, să identificați datele irelevante și zonele în care utilizatorii dvs. întâmpină dificultăți pe site-ul dvs. web, reducând astfel rata de respingere odată ce faceți modificările necesare.

Odată ce puteți identifica varianta care vă îmbunătățește experiența clienților, veți observa o creștere a timpului petrecut de utilizatori pe site-ul dvs., ceea ce duce la o rată de conversie mai mare. În cele din urmă, testarea A/B minimizează riscul, deoarece iei decizii bazate pe date exacte în loc de presupuneri educate. Vă permite să faceți modificări minime fără a compromite întregul site. Rentabilitatea investiției dvs. va crește odată cu testarea A/B .

Steven Vigilante, șeful departamentului de dezvoltare a afacerilor noi al OLIPOP

Faceți cu ușurință modificări mici (sau mari).

Optimizarea, știința de a îmbunătăți lucrurile, este ușoară cu testarea A/B. Puteți introduce modificări pentru a găsi versiunea care creează o experiență de cumpărare mai bună și convertește o parte din traficul dvs. PPC.

Reduceți costul eșecului

Costul eșecului este uneori mult prea mare și, în mod nesurprinzător, inhibă inovația. Dar cu testarea A/B, vă puteți testa ideile într-un mediu controlat fără a fi nevoie să construiți sau să implementați nimic.

Privește în viitor

Nimic nu poate garanta succesul. Nu instinctul tău, sugestiile agenției sau chiar cercetările solide ale concurenților. Dar dacă vrei să iei decizii bazate pe date, testarea A/B este prietenul tău. Cele mai bune versiuni dintr-un test nu sunt alese pe baza validității statistice, permițându-vă să obțineți o privire asupra potențialului dvs. de venituri.

Lăsați puțin loc pentru interpretări greșite

Testarea A/B vă permite să vă ascultați cu adevărat publicul prin colectarea de date privind modificările ratei de conversie, abandonul coșului, valoarea medie a comenzii (AOV), venitul și profitul.
În loc să ghicești efectele modificărilor tale, rezultatele sunt transparente și lasă puțin loc pentru interpretări greșite.

Probleme cu testarea A/B pe Shopify (+ Soluții)

În timp ce vă gândiți să puneți testarea A/B în centrul strategiei dvs., este important să abordați problemele potențiale cu care vă puteți confrunta atunci când rulați teste A/B pe Shopify.

Problema #1: Anti-clickjacking-ul Shopify poate interfera cu QA-ul mobil

Clickjacking-ul păcălește utilizatorii să facă clic pe conținut care poate fi acționat pe un site de momeală. Pentru a preveni acest lucru, Shopify folosește tehnologia anti-clickjacking. Dar împiedică instrumentele de testare A/B să funcționeze optim.

Problema #2: Testarea nu este o problemă, dar implementarea este o problemă

Implementarea rezultatelor unui test nu este ceva ce poate face o aplicație sau un plugin - necesită personalizare. Chiar dacă găsiți pluginuri care funcționează pentru dvs., prea multe dintre ele vă pot încetini site-ul, ceea ce anulează efectiv câștigul potențial.

Problema #3: aveți un magazin Shopify standard care limitează ceea ce puteți testa

Magazinele standard Shopify nu pot accesa majoritatea funcțiilor Shopify Plus, ceea ce înseamnă că nu puteți rula teste precum testarea divizată a temelor. Testele de complexitate mai redusă au ca rezultat un impact mai mic asupra veniturilor dvs.

Un ghid rapid pentru elementele de bază ale testării A/B

Acum că ți-ai învăluit creierul în jurul testării A/B, este timpul să intri în mie.

Faceți o pauză pentru un moment și răspundeți da sau nu la aceste întrebări înainte de a derula în jos pentru a vedea răspunsul.

• Testarea A/B este aceeași cu testarea divizată
• Testarea A/B și testarea cu mai multe variante sunt diferite
• Puteți face doar ajustări minore cu testarea A/B
• Nu trebuie să înveți statistici pentru a rula teste A/B
• Nu puteți rula teste A/B pe alte canale
• Ar trebui să opriți testele A/B odată ce vedeți rezultate

Testarea A/B vs. Testarea divizată

Cu testarea A/B, puteți testa unul sau mai multe elemente dintr-o pagină. Practic, creați o versiune similară a paginii originale pentru a vedea impactul asupra ratei de conversie.

Testarea URL împărțită este diferită de testarea A/B. Traficul este împărțit la mijloc și trimis în două versiuni complet diferite pentru a vedea ce pagină web vă ajută să vă atingeți obiectivele specifice.

Când să rulați testele împărțite față de testele A/B: testarea temei

Un exemplu excelent de când să alegeți testarea divizată în locul testării A/B este atunci când doriți să testați temele Shopify. Tema dvs. poate avea un impact asupra CX și, în cele din urmă, asupra veniturilor, așa că este esențial să o testați folosind un instrument precum opțiunea URL împărțită a lui Convert.

Convert folosește Inferența frecventistă pentru a înțelege ce temă o depășește pe cealaltă. Vă recomandăm să rulați acest tip de test timp de cel puțin două săptămâni, cu excepția cazului în care aveți un trafic neobișnuit de mare care vine pe site-ul dvs.

PS Puteți testa teme doar dacă sunteți utilizator Shopify Plus.

Testarea A/B vs. Testarea multivariată

În testele A/B, puneți în față pagini aproape identice cu originalul.

În loc să schimbați un element la un moment dat, ca în testele A/B, testarea multivariată este un proces în care testați mai multe modificări într-un singur test. Scopul testării multivariate este de a afla ce combinație de modificări dă rezultate mai bune.

Exemple de teste A/B pentru a rula în magazinele Shopify

Întrebați pe internet ce ar trebui să testați A/B și adesea vi se va spune să încercați un alt CTA sau o culoare pentru buton sau să schimbați un titlu.

Nu că ar fi lipsit de importanță, dar lumea este locul tău de joacă și te joci în propriul tău nisip doar dacă te limitezi. Gândirea în afara cutiei este crucială pentru spiritul de experimentare.

Am contactat 8 antreprenori Shopify și i-am întrebat acest lucru:

Ce teste A/B ați efectuat, de ce ați ales să efectuați acest experiment și care au fost rezultatele

#1. AOV a crescut, comenzile au scăzut ușor

Folosim Shopify în toate magazinele noastre online și am testat gruparea sau gruparea produselor noastre pentru a crește AOV. Testul este un cărucior care are vânzări suplimentare, sau pachete, față de un cărucior care conține doar produsul inițial. Rezultatele nu sunt încă pe deplin, dar până acum se pare că AOV a crescut, în timp ce numărul total de comenzi a scăzut ușor. Vom rula aceasta încă câteva săptămâni înainte de a face o analiză completă și am putea testa alte configurații pentru a încerca să generăm îmbunătățiri atât în ​​AOV, cât și în conversii .

Sylvia Kang, Mira

#2. Optimizat fiecare element al site-ului pentru CX

În calitate de companie Shopify, am desfășurat o multitudine de teste A/B, pentru funcții precum chat live, CTA, imagini de produse, plasare de upselling, pagini de destinație, meniuri de navigare și multe altele. De exemplu, testarea noastră A/B ne-a ajutat să găsim echilibrul între vânzări încrucișate/upselling fără a irita consumatorii sau a adăuga fricțiuni experienței lor .

Prin numeroase teste, am descoperit că publicul nostru apreciază sugestiile extrem de relevante direct pe paginile produselor, mai degrabă decât oferite în timpul finalizării, și, făcând acest lucru, am crescut valoarea medie de achiziție. Testarea A/B este crucială, deoarece vă permite să identificați exact ce caracteristici funcționează cel mai bine și oferă cele mai mari profituri, fără a pierde timp și energie, implementând orice elemente care nu sunt optime. Aceste teste vă oferă date precise cu privire la alegerile de design care se potrivesc cel mai bine publicului dvs., iar o experiență de utilizator mai puternică este modul în care companiile obțin creștere și longevitate .

Stephen Light, Saltea Nolah

#3. Reluări ale sesiunii utilizate pentru a include videoclipuri pentru rezultate mai bune

Unul dintre cele mai importante aspecte care pot face sau distruge o conversie este cât de ușor ne este pentru un utilizator să navigheze în magazinul dvs. și să facă o achiziție. Cu testarea A/B pe reluări de sesiune, am reușit să vedem cum utilizatorii reali cu intenția de a cumpăra au navigat prin magazinul nostru, unde a fost problema, ce i-a frustrat, ce i-a făcut să se oprească în timpul procesului și îi împiedică să facă o achiziție. Ne-am dat seama că înregistrările care includeau videoclipuri ale procesului au dat rezultate mai bune, iar imaginile cu o calitate slabă sau care nu prezintă mai multe imagini au dus la ezitare.

Michael Nemeroff, Tricouri Rush Order

#4. Conversiile au crescut cu 2% cu modificări de design

În acest test A/B, am vrut să văd cum un nou aspect ar putea afecta rata de conversie a magazinului meu Shopify. Site-ul inițial funcționa de șase luni și avea o conversie de 3%, așa că părea timpul să încercăm ceva diferit. Schimbarea mea de design a inclus mutarea recomandărilor de produse sub pliul pe dispozitivele mobile în loc să fie în conformitate cu produsele, precum și eliminarea bannerelor din navigarea de sus, deoarece oricum nu se făcea clic pe acestea. Acest lucru a dus la o creștere instantanee a conversiilor cu 2%.

Jar Kuznecov, Hub de dedurizare a apei

#5. Clicuri relative crescute cu 14% prin schimbarea culorii butonului CTA

Deși am efectuat o multitudine de teste A/B de-a lungul anilor, unul dintre cele mai eficiente teste pe care le-am efectuat a fost și cel mai simplu: schimbarea culorii butonului CTA. Asta e. Auzisem de la un prieten că, schimbând culoarea butoanelor sale de pe pagină, el a crescut ratele de răspuns cu 16% (față de numărul de clicuri pe care le primea anterior). Acest lucru m-a pus pe gânduri și am decis să rulez propriul nostru test A/B. De fapt, a fost de fapt un test A/B/C, deoarece am încercat 3 culori diferite – culoarea noastră originală verde, precum și portocaliu și roșu. Rezultatul? Butonul roșu a dat o rată de răspuns cu 8% mai mare, în timp ce butonul portocaliu ne-a oferit rezultate cu 14% mai bune în ceea ce privește clicurile relative. Este uimitor că o schimbare la fel de simplă precum realizarea unui buton verde portocaliu poate avea un efect atât de profund. Astfel, cel mai bun sfat al meu este că atunci când încercați să convingeți pe cineva să adauge un produs în coșul său, nu vă uitați doar de culoarea butonului CTA. Gândiți-vă serios – și testați .

John Ross, Test Prep Insight

#6. Creșterea CVR și AOV cu Sticky Add-to-cos și Upsells post-vânzare

Testarea A/B este o sabie cu două tăișuri. Sună bine să vă optimizați magazinul Shopify și să creșteți rata de conversie. Dar trebuie să știți ce înseamnă fiecare test A/B care adaugă un strat de complexitate și vă folosește resursele. Ce să testați este la fel de important ca și cum testați .

Am testat diferite comenzi de fotografii ale produselor. De fiecare dată, am constatat că cea mai simplă imagine face întotdeauna cea mai bună conversie. Pe paginile de produse, clientul dvs. trebuie să înțeleagă exact care este produsul dvs. fără a trebui să se gândească.

Un adaos lipicios în coș este un câștigător cunoscut. Având butonul și pe ecran, la îndemână, a fost o creștere ușoară cu 8% pentru CVR-ul meu.

Nu uitați de vânzările post-vânzare. A fost ușor să măresc valoarea medie a comenzii mele de la 24 USD la 40 USD. Ai fi surprins cât de ușor este să vinzi mai mult oamenilor care deja cumpără .

Matt Phelps, specialist CRO și fondator al STEEL.

Te simți inspirat? Iată peste 20 de elemente cu care începătorii testului A/B se pot juca pe site-ul lor de comerț electronic:

• Oferă transport gratuit
• Imagini cu eroi vs. carusele
• Dimensiunea CTA
• Culoarea CTA
• plasare CTA
• copie CTA
• Imagini umane vs. nicio imagine
• Copie titlu
• Marimea fontului
• Inaltimea liniei
• Personalizare vs. niciuna
• Notificare de revenire la stoc
• Descrieri ale produselor bazate pe beneficii
• Sfat de expert pe pagina produsului
• Evidențierea reducerilor și ofertelor
• Plată cu o singură pagină versus mai multe pagini
• Asistență în timpul comenzii
• Meniuri simple de navigare
• Vizualizare rapidă a produsului
• Videoclipuri despre produse
• Upselling vs. cross-selling
• Etichete pe imaginile de previzualizare
• Conținut generat de utilizatori

Din lista de elemente pe care le puteți testa A/B, este evident că paginile de produse sunt cel mai bun loc pentru a începe.

Dar și alte pagini de pe site-ul dvs. sunt candidați perfect viabili pentru testarea A/B.

Să ne uităm la ce pagini poți pune la încercare cu câteva exemple reale de la mărci:

1. Pagina principala
   
   
   • Salty Captain a schimbat culoarea barei de anunțuri de pe pagina lor de pornire și a obținut cu 234,54% mai multe clicuri și a crescut CVR cu 13,39%
   • Legendary Wall Art a experimentat cu secțiunea eroi și copia CTA și și-a crescut implicarea cu 325,39% și veniturile cu 30,07%
   • byBiehl a adăugat un glisor pentru a-și prezenta produsele importante, ceea ce a rezultat în creșterea numărului de vizite pe paginile categoriei (5,87%), a veniturilor per utilizator (3,25%) și a CVR (19,73%)
2. Pagina de categorie
   
   
   • Copycat Fragrances a adăugat versiunea lor de povești Instagram pe paginile lor de categorii, crescând implicarea cu 4% și venitul per utilizator cu 18%
   • Iceshaker și-a schimbat pagina de categorie pentru a include povestea produsului care abordează obiecțiile comune și a obținut o creștere de 15,95% a conversiilor.
   • Oliver Cabell s-a concentrat pe experiența mobilă a utilizatorului, modificând aspectul și îmbunătățind designul, ceea ce a dus la o creștere a traficului cu 14,86% și la creșterea traficului pe pagina de finalizare a comenzii cu 5,49%
3. Pagina de plată
   
   
   • Oflara le-a recomandat cumpărătorilor alte articole atunci când aceștia plăceau cu un buton Adaugă în coș, ceea ce a rezultat într-o îmbunătățire semnificativă a veniturilor totale.
   • Conscious Items a eliminat frecarea din procesul de finalizare a comenzii cu un coș lipicios, ceea ce a rezultat într-o creștere cu 10% a veniturilor per utilizator și o creștere cu 10% a CVR.
   • Homeware a remarcat că utilizatorii au cumpărat doar un articol din magazinul lor Shopify. Așa că au simplificat procesul de finalizare a achiziției pentru a redirecționa utilizatorii către pagina de finalizare directă, ceea ce a rezultat într-o creștere de 47,7% a CVR și o creștere de 71,4% a veniturilor per vizitator pe mobil.

Sfat de expert: Concentrați-vă pe schimbări mari

Cel mai bun sfat pentru antreprenorii începători care efectuează teste A/B pentru prima dată este să se concentreze pe schimbări mari. De exemplu, o reproiectare completă a unei pagini de produs. Micile modificări, cum ar fi schimbarea culorilor butoanelor, este puțin probabil să miște acul într-un mod semnificativ .

Făcând o reproiectare completă a paginii și adăugând gif-uri cu explicații despre produse în paginile noastre de produse, am reușit să creștem rata de conversie cu 40% .

Philip Pages, fondator la PostPurchaseSurvey.com și o marcă Shopify de comerț electronic cu 7 cifre.

Concepte de statistici cu care trebuie să fii familiarizat când rulezi teste A/B

Deși testarea A/B este folosită pentru a compara două versiuni ale site-ului dvs., doar analizarea numerelor nu este utilă, deoarece aceasta nu ține cont de semnificația statistică a datelor. Veți ajunge să interpretați greșit rezultatele și să vă afectați vânzările.

Deci, indiferent dacă echipa dvs. internă se ocupă de proiect sau dacă angajați o agenție CRO, este important să vă familiarizați cu conceptele statistice de testare A/B de care veți auzi foarte multe.

Eșantion și Populație

Toți vizitatorii care ajung pe site-ul dvs. sunt considerați populație, în timp ce un eșantion este numărul de vizitatori care participă la un test A/B.

Medie, Mediană și Mod

Medie = medie

Mediana = valoare la mijloc

Mod = valoare repetată

Varianta si abaterea standard

Varianta este variabilitatea medie a datelor. Cu cât variabilitatea este mai mare, cu atât media este mai puțin precisă ca predictor al unui punct de date individual.

Deviația standard este rădăcina pătrată a variației și este exprimată în aceleași unități ca și valorile originale, ceea ce face intuitiv mai ușor de înțeles. Pe de altă parte, variația este exprimată în pătratul unității inițiale, dar este încă importantă pentru rezultatele testelor dvs. A/B.

Semnificație statistică

Când un tablou de bord de testare A/B spune că există „95% șanse de a depăși originalul” sau „90% probabilitate de semnificație statistică”, se pune următoarea întrebare: Presupunând că nu există nicio diferență de bază între A și B, cât de des vom avea vedeți o diferență ca și noi în date doar întâmplător ?

Evan Miller, Dezvoltator de software statistic (Sursa)

Nivelul de semnificație trebuie să fie cât mai mic posibil. 1% este ideal, deoarece echivalează cu un nivel de încredere de 99%. Și rezultatele nesemnificative ar putea însemna că ceea ce vedeți este de fapt un fals pozitiv, așa că este important să așteptați semnificația statistică, dar nu numai.

Trebuie să calculați o dimensiune a eșantionului care se potrivește cu o creștere minimă la alegerea dvs. (MDE – Efect minim detectabil), veți avea o schimbare crescută de a face un fals pozitiv.

Valoarea P

Valoarea p este probabilitatea de a obține rezultate cel puțin la fel de extreme ca rezultatele observate la un test de ipoteză statistică, presupunând că ipoteza nulă este corectă.

Dar ceea ce trebuie să știți despre valoarea p este următorul: „Cât de surprinzător este acest rezultat?”

Cât timp ar trebui să rulați un test A/B pe un magazin Shopify?

Există două erori comune cu care te vei întâlni des:

• Încheiați testul A/B când atingeți semnificația statistică
• Monitorizați valorile p și declarați câștigătorul imediat ce atingeți ținta.

Oprirea unui test ar trebui să se bazeze pe dimensiunea eșantionului. Dar, deși nu ar trebui să-ți închei experimentul mai devreme, ele nu ar trebui să ruleze pentru totdeauna. Daca dupa 3 luni tot nu ai ajuns la semnificatie, cel mai bine este sa incerci si alte modificari de partea ta, de preferat mai indraznete.

Convert și Shopify recomandă să vă lăsați testele să ruleze timp de cel puțin două cicluri de afaceri sau 14 zile.

Avid Faruz, CEO Faruzo este de acord:

Noii antreprenori trebuie să știe că în testarea A/B, intervalul de timp contează foarte mult. Cu cât rulați mai mult timp testele A/B, cu atât veți obține teste mai precise. Acest lucru se datorează faptului că testele dvs. vor folosi mai multe puncte de date pentru a obține rezultate. Specialiştii în marketing cu experienţă îşi execută testele timp de două săptămâni. Aș sfătui toți agenții de marketing și antreprenorii să stabilească un interval de timp în funcție de nivelul de trafic pe care îl primesc site-urile lor web .

Acesta este motivul pentru care platforma noastră oferă o perioadă de încercare gratuită de 14 zile, astfel încât să vă puteți testa ipoteza.

Proces în 4 pași pentru a rula teste A/B într-un magazin Shopify

Ești gata să rulezi teste?

Utilizați acest proces de testare A/B în 4 pași pentru a crea teste mai bune și pentru a înțelege impactul acestora.

#1. Efectuați cercetări calitative și cantitative

Cercetarea conversiei este primul și cel mai important pas. Acest lucru vă permite să construiți ipoteze pe care le puteți testa A/B. Cunoscută și sub denumirea de fază de descoperire, aceasta este atunci când îți pui ipoteza de funcționare în repaus și lași datele să te ghideze.

Veți ajunge cu două tipuri de date – cantitative și calitative.

Începeți cu adunarea datelor cantitative. Acestea compun faptele reci și dure pe care nu le puteți contrazice că motoarele de analiză precum Google Analytics, Amplitude sau Mixpanel le pot scuipa.

De exemplu, vă recomandăm să vă uitați la ratele de respingere, numărul total de conversii sau paginile vizualizate/sesiune.

Odată ce ați acumulat datele cantitative, preluați datele calitative. Deoarece acest lucru este subiectiv, există potențialul ca părtinirile subconștiente să se strecoare, dar interpretarea constatărilor tale este singura modalitate prin care poți răspunde la „De ce”.

Utilizați Hotjar pentru a genera hărți termice și pentru a înregistra sesiunile vizitatorilor. Răspunsurile pe care le puteți găsi nu sunt definitive, dar introduc noi posibilități care contribuie la o ipoteză mai bună în general.

Dar înainte de a trece la asta, este important să priviți atât datele calitative, cât și cele cantitative în tandem pentru a avea o înțelegere holistică. Analiza egală cu interogarea datelor și gândirea critică.

#2. Creați ipoteze credibile

Urmând metoda științifică înseamnă că trebuie să creezi o ipoteză credibilă — o soluție propusă a cărei validitate necesită evaluare.

Matt Beischel, fondatorul CorvusCRO, împărtășește cele 3 componente principale ale unei ipoteze: înțelegere, răspuns și rezultat.

Iată un exemplu despre cum ar arăta:

Pentru a vă ajuta să simplificați și să standardizați crearea de ipoteze, avem un generator de ipoteze de testare A/B.

În această etapă, doriți să înțelegeți și dimensiunea eșantionului și să calculați un punct de oprire pentru test pe baza acestuia. Utilizați calculatorul nostru de semnificație a testării A/B pentru asta.

Sfat de expert:

Odată ce știți dimensiunea eșantionului și cât timp ar trebui să rulați testul, trebuie să vă setați prioritățile de testare. Puteți alege să testați diferite părți ale procesului, cum ar fi o singură pagină, un întreg site web, ferestre pop-up sau anunțuri plătite. Cel mai bine este să vă concentrați pe o parte a procesului odată, astfel încât să puteți obține răspunsuri clare despre schimbările care duc la îmbunătățirea experienței clienților și a ratei de conversie .

Allan Borch, fondatorul DotcomDollar.com

Prioritizează-ți ipoteza

Experimentarea are o mulțime de avantaje, motiv pentru care veți vedea adesea experți care pledează pentru testarea tuturor. Cu toate acestea, trebuie să prioritizați ce teste trebuie să rulați acum și ce experimente pot aștepta, deoarece resursele sunt limitate, indiferent cât de mică sau mare este compania dvs.

Deci, experimentatorii recurg la modele de prioritizare precum RICE, PIE, ICE sau PXL. Dar David Mannheim, consultant de personalizare, sugerează că aceste modele sunt defecte:

Le lipsește alinierea la contextul mai larg al afacerii. Prioritizarea ar trebui să fie de sus în jos, concentrându-se pe misiunea de afaceri în primul rând, pe obiectivele de afaceri în al doilea rând și așa mai departe. Cele mai multe modele de prioritizare se concentrează pe „execuție”, adică ultimul lucru dintr-o diagramă triangală-y-ierarhie-lucru de execuție pe bază, concept, problema utilizator, obiective de produs, obiective de afaceri și misiune în vârf .

Aceste modele folosesc, de asemenea, „efortul” ca factor de punctare, ceea ce înseamnă că vă rețineți cu adevărat de la construirea de caracteristici care pot avea cel mai mare impact, deoarece sunt complexe. În cele din urmă, acestor modele le lipsește obiectivitatea.

Andrea Saez, Senior Product Marketing Manager la Product School, spune:

Nu ai cum să cunoști întinderea, impactul sau efortul asupra majorității lucrurilor fără a fi verificat în mod corespunzător dacă chiar lucrezi la lucrurile potrivite, cu atât mai puțin dacă nu ai vorbit cu nimeni despre asta. Deci, cum ai putea avea vreo încredere ?

Răspunsul aici este să vă construiți propriul model de prioritizare.

Pasul 1: Inspiră-te din exemple

Pasul 2: Luați în considerare factori precum alinierea la obiectivele de afaceri, potențialul de iterare, învățarea specifică companiei și investiția în resurse.

Pasul 3: Atribuiți greutatea testelor pe care doriți să le executați

Pasul 4: Clătiți și repetați până când găsiți un acronim care funcționează pentru dvs.

#3. Implementați Testul

Ți-ai pus în aplicare cercetarea și ai construit o ipoteză credibilă. Acum este timpul să mergem la bată.

O implementare cu succes necesită 3 lucruri: platforma potrivită de testare A/B, echipa potrivită pentru codificarea testelor și QA și depanare.

Să începem cu primul.

Ce face pentru o platformă bună de testare A/B pentru Shopify?

În mod ideal, doriți un singur instrument care să vă permită să testați teme, prețuri, meniuri, colecții de produse, pagini de căutare, să efectuați teste multivariate și să urmăriți veniturile.

Multe plugin-uri vă pot ajuta să realizați unul sau mai multe dintre aceste lucruri, dar știm deja că pluginurile cauzează umflarea codului, ceea ce nu este o veste bună pentru SEO sau conversii.

O platformă de testare dedicată, cum ar fi Convert Experiences, se integrează perfect cu magazinul dvs. Shopify, vă permite să rulați toate tipurile de teste dorite și are o aplicație de testare Shopify A/B personalizată pe care o puteți utiliza, eliminând posibila balonare a codului.

Apoi, doriți să aveți echipa potrivită pentru a codifica testele.

Notă: există o diferență între programatori și programatorii care lucrează cu echipe de testare A/B.

Ultimately, testing is incomplete without QA and debugging. Without QA, variation errors can crop up, causing statistical errors—a false positive or a false negative. Not to mention, you may end up collecting the wrong data that delivers zero value to your visitors.

Here are 4 best practices for QA of A/B tests:

• Develop a QA strategy
• Identify what to QA
• Focus on page experience
• Align QA with conversion goals

Pro Tip: Avoid these rookie A/B testing mistakes:

• You only test industry best practices
• You keep peeking at your “results”
• You give up after one test
• You fail to iterate and improve on wins
• You mess up revenue tracking

#4. Analyze & Learn From Your A/B Tests

Whether you have a winner or loser on your hands, analyzing what worked and learning from it to influence future A/B tests is crucial.

Because while A/B testing is a strategy to boost your revenue, you're also effectively “buying data” on your audience.

Here's a 7 step process to learn from A/B tests –

• Make sure your data is accurate, valid, and significant
• Check your micro, macro, and guardrail metrics
• Segment your results
• Check user behavior
• Continue to improve on winners
• Create a learning repository for future tests

The last step allows you to run tests in the future that are backed by your previous experiments' learnings.

Expert Tip: Be prepared to fail.

It is difficult to predict the conversion rate for your website even if you think you've created the perfect A/B test. As a new entrepreneur, I almost succumbed to the frustrations of seeing no success in the first few months. I am not used to failure and many entrepreneurs are like this. The focus should be to give the users the best experience and leave room for the unexpected .

Leslie Radka, Founder & Hiring Manager at GreatPeopleSearch

A/B Testing in Other Realms That Can Compound Your Shopify Store Gains

Don't stick to just your website. A/B testing can and should be applied to other channels and realms where customer engagement occurs.

A/B Testing Pop-Ups (with Privy)

Those pop-ups you have on your website? You can A/B test them too with tools like Privy. Experiment with your headline, offer, form, CTA, or images.

Privy's Convert tool allows you to present the pop-up in different formats and target visitors based on rulesets.

A/B Testing Emails

When it comes to email marketing, 3 core areas of improvement emerge—delivery, open rates, and CTR.

You can test your emails in this order:

• First, the subject lines to improve the open rate
• Then the body copy to make sure it's relevant
• Finally, the CTAs to get more clicks

What else can you test in your email? Check out our complete guide to A/B testing emails.

Here's how 2 Shopify entrepreneurs used A/B testing to grow their email marketing channel: [h5] #1. Grew Email List 3x Using Split Testing

The most effective strategy for testing content is A/B testing. A/B testing has proven, measurable, immediate results that tell us whether one or another content base is more effective at converting customers to sign up for emails, make a purchase, etc.

In retail, vanity metrics like direct traffic to your website are least effective for measuring content success, while A/B testing (ie, tracking conversion rate, user engagement, email funnels) is the most effective. We tested our email subscription CTA with split-testing and grew our email list over three times in one campaign. The better you know your ICP, the more effective your brand strategy will convert. Use A/B tests to understand your target demographic better, and spoon-feed them the content they respond best to .

Zach Goldstein, Public Rec

#2. Increased email open rate by 25% with emojis in subject lines

After seeing a study, I wanted to test out open rates using an emoji in the subject line vs. not using one. The study implied that using an emoji would help to enhance open rates, but I felt that it could come off as unprofessional and spammy.

I use the ActiveCampaign email platform alongside Shopify, and I actually integrate the two together to maximize customer communication. ActiveCampaign allows users to run many A/B tests so they can see what jives with their target audience. When the results were in, I had to admit that I was wrong because the emails with an emoji in the subject received a 25% higher open rate. It's safe to say that I've been pretty liberal with my emoji keyboard ever since, and I've noticed a spike in conversion rates, too .

Stephanie Venn-Watson, fatty15

A/B Testing on Social Media

Like paid ads, you can test your organic content on social to improve engagement. The heading, copy, images, and CTA can all be A/B tested.

When doing this manually, stagger the release of your posts to have a reasonable gap which will allow you to gather meaningful data.

Or you can use scheduling tools like Later, Buffer, or MeetEdgar to automate the publishing.

Ecommerce A/B Testing Pitfalls to Avoid

Our need for instant gratification also seeps into A/B testing. Jon Ivanco, Co-founder of Formtoro, believes most A/B testing is reactionary:

Brands want a quick fix that's cost-effective; they hate the idea of investing in long-term outlooks and gains. The only time they look at these things is when things aren't going well .

There are “experts” that are anything but experts, bad advice presented as best practices, and experiments designed to pick the low-hanging fruit.

Ivanco instead recommends getting the basics right:

– All tests to landing pages
– All tests from specific audiences
– Test one variable at a time
– Don't test unless you have a clearly articulated hypothesis and you can learn from if something goes right or if it fails
– Do all tests from the perspective of the customer journey
– Small things are part of a larger chain, try to isolate things as much as you can one step at a time

Give Privacy a Thought

No one wants to become a lab rat inadvertently.

The backlash to Facebook 2014's emotional contagion study is proof. Even Apple's privacy updates signal that users care about their privacy and don't want to be manipulated into buying products.

Laws around privacy—existing and upcoming—will continue to evolve. Each time a significant change is brought about, it will hurt your business unless you start thinking user-first and bake ethical A/B testing into your strategy.

So what does that mean for you?

• Take data privacy seriously when collecting data
• Rule out manipulative tactics
• Store and process data securely
• Respect user consent and allow them to opt-out of experiments

Do that and you will future-proof your A/B testing and build a better relationship with your audience.