Testare A/B vs testare multivariată vs testare multipagini

Când vine vorba de rularea experimentelor CRO, puteți alege dintre patru tipuri de teste: teste A/B, teste împărțite, teste multivariate și teste cu mai multe pagini.

Fiecare dintre aceste teste are propriile sale puncte forte și limitări.

Și dacă nu alegeți testul potrivit pentru experimentul dvs., luarea deciziilor CRO concludente bazate pe date poate deveni dificilă.

Deci, să înțelegem care sunt aceste tehnici diferite de testare de optimizare și cum se compară între ele... și cum poți fi sigur că alegi testul potrivit de fiecare dată când rulezi un experiment.

Aici merge.

Ce este testarea A/B

Testarea A/B este o modalitate de a testa modificările aduse unuia sau mai multor elemente dintr-o pagină.

Cu testarea A/B, puteți adăuga un element la o pagină sau îl puteți elimina sau schimba și puteți vedea cum adăugarea, eliminarea sau modificarea afectează rata de conversie a paginii.

Aceste elemente pot fi orice elemente grafice sau text din pagină - de exemplu, CTA sau copia titlului sau imaginea eroului.

În testarea A/B, creați una sau mai multe copii exacte ale paginii originale, singurele elemente neidentice fiind elementele de testat.

Și când testați aceste copii (numite challengers ) față de cea originală (numită control ), puteți vedea cum modificările afectează rata de conversie.

Testarea URL împărțită

Există o altă formă de testare care este adesea asociată cu testarea A/B, dar este fundamental diferită de testele A/B.

Ele sunt cunoscute sub denumirea de teste de divizare URL sau teste de împărțire.

În testarea divizată, traficul primit de o pagină este împărțit la mijloc și direcționat către două versiuni complet diferite ale aceleiași pagini, pentru a identifica versiunea care are performanțe mai bune față de obiectivul specificat.

În general, aceste versiuni sunt găzduite la adrese URL diferite, dar scopul final este de a spori conversiile pentru o anumită acțiune, cum ar fi completările de formulare sau adăugarea în coș.

Testarea URL împărțită a folosit pentru a testa modele sau versiuni total diferite ale unei pagini.

Aici scopul este să-l găsim pe cel care are cele mai bune performanțe.

Deci, dacă doriți să testați două idei radical diferite, atunci ar trebui să mergeți cu testarea URL-ului împărțit. De exemplu, dacă doriți să testați două modele de pagini de pornire, atunci aceasta ar fi tehnica potrivită de utilizat.

Un exemplu de test A/B

BestSelf Co, un vânzător de top de instrumente de productivitate, a realizat că vânzările produselor sale emblematice ar putea fi îmbunătățite cu CRO. Așa că a angajat o agenție CRO (SplitBase) pentru a analiza cum s-ar putea întâmpla acest lucru.

SplitBase și-a efectuat cercetarea și a emis ipoteza că adăugarea unui titlu bazat pe beneficii pe pagina de destinație (care nu avea un titlu inițial) ar putea ajuta la creșterea vânzărilor.

SplitBase a decis să ruleze un test A/B și să testeze o pagină cu un titlu față de pagina originală. SplitBase a decis, de asemenea, să testeze două versiuni ale titlului.

Deci, experimentul său folosind un simplu test A/B s-a terminat cu trei versiuni:

• Versiunea A (controlul fără titlu)
• Versiunea B (provocatorul cu titlu)
• Versiunea C (provocatorul cu o variație a titlului)

Traficul a fost împărțit în mod egal în toate cele trei versiuni (~ 33% fiecare) pentru a vedea care versiune a avut cele mai multe vânzări.

După cum puteți vedea, un experiment de testare A/B poate deveni foarte bine un experiment de testare A/B/C/D...n.

Cazuri de utilizare a testării A/B

Testarea A/B are un caz de utilizare foarte specific:

Testarea modelelor foarte asemănătoare (cu excepția modificării elementelor de testare).

Acesta este cel mai obișnuit caz de utilizare al testelor A/B, în care experimentați doar un element și vedeți modul în care modificarea afectează rata de conversie.

Dacă emiteți ipoteza că un anumit element poate avea un impact pozitiv asupra ratei de conversie, ar trebui să mergeți cu această tehnică de testare. De exemplu, puteți utiliza această tehnică de testare de optimizare pentru a vedea impactul unei modificări a CTA a paginii dvs. de pornire.

Avantajele testării A/B

• Testele A/B sunt simplu de implementat: indiferent dacă testați două experiențe foarte similare sau două experiențe complet diferite, configurarea unui test A/B este destul de simplă. De obicei, nu necesită prea mult timp sau resurse.
• Testele A/B necesită un trafic mai mic (în comparație cu testele multivariate) pentru a obține rezultate definitive: dacă aveți un site web unde obțineți suficient trafic pentru a trimite fiecare variantă aproximativ 10.000 de vizitatori, ar trebui să puteți utiliza testele A/B pentru a găsi rezultate semnificative din punct de vedere statistic pentru a face modificări de design, de interfață de utilizare sau de a copia pe site-ul dvs. Acest lucru este valabil mai ales atunci când rulați teste A/B doar cu controlul și un challenger (sau, să zicem, doi challenger), deoarece încă puteți trimite volume bune de trafic de testare fiecăruia.
• Testele A/B nu au nevoie de prea mult timp pentru a fi executate . De obicei, testele A/B pot da rezultate semnificative statistic în 2-3 săptămâni și nu trebuie să ruleze luni și luni la sfârșit.

Limitările testării A/B

• Testele A/B oferă de obicei informații limitate: testele A/B ale experiențelor similare (unde doar un element este variat) rulează de obicei două versiuni. Ceea ce înseamnă că cel mai mult pe care un marketer poate învăța din experiment este care dintre cele trei versiuni (1 original + 2 challenger) a făcut cel mai bine. Asta e tot — perspective despre doar trei posibilități. Dacă doriți să testați mai multe variante (de exemplu, dacă doriți să testați 5 versiuni ale butonului CTA), veți avea nevoie de suficient trafic pentru a produce decizii semnificative statistic chiar și după împărțirea traficului pentru atâtea variante.
• Testele A/B sunt în cea mai mare parte potrivite doar pentru luarea deciziilor de nivel înalt pe site-ul web: Deoarece testele A/B sunt grozave în a oferi răspunsuri obiective cu privire la versiunea cea mai bună, funcționează excelent în luarea deciziilor la nivel înalt. Deci, puteți decide asupra abordării pe care doriți să o adoptați cu designul site-ului sau al paginii de destinație sau al interfeței de utilizare sau să copiați cu teste A/B. DAR dacă doriți să îmbunătățiți elementele mai granulare de design, interfață de utilizare sau copiere, atunci va trebui probabil să rulați mai multe teste A/B, care pot consuma timp și pot necesita muncă.

Instrumente de testare A/B

Convert Experiences este o soluție CRO puternică pe care o puteți folosi pentru a vă alimenta toate experimentele de testare A/B și pentru a descoperi cele mai eficiente butoane CTA, copii de titlu, imagini eroi, scheme de culori, plasări de sigle și multe altele de utilizat pe site-ul dvs. web.

Convert permite atât teste A/B/n convenționale, cât și teste URL împărțite prin editorul său vizual și editorul de cod mai robust.

Ce este testarea multivariată (MVT)

Testarea multivariată sau MVT este o modalitate de a testa mai mult de o variantă față de control .

În testarea multivariată, puteți adăuga, șterge sau modifica un grup de elemente pe o pagină, creând astfel mai multe versiuni cu mai multe modificări și să vedeți cum adăugarea, eliminarea sau modificarea grupului de elemente afectează rata de conversie.

Un grup de elemente în testarea multivariată TREBUIE să cuprindă cel puțin două elemente. Și fiecare element trebuie să aibă două variante. Ceea ce înseamnă că, în testarea multivariată, veți avea cel puțin patru versiuni de testat.

Iată defalcarea unui test multivariat simplu:

Grup de elemente de testat: Elementul 1, Elementul 2.

Variante ale elementului 1:

Elementul 1 Varianta A

Elementul 1 Varianta B

Variante ale elementului 2

Elementul 2 Varianta A

Elementul 2 varianta B

Matematica testării multivariate:

Numărul de versiuni de testat = Numărul de elemente dintr-un grup * Numărul de variante ale fiecărui element

Cazuri de utilizare a testării multivariate

Companiile folosesc de obicei testarea multivariată ca tehnică de optimizare pentru a deveni mai detaliat cu testarea lor. Să ne lămurim imediat. Acesta este motivul pentru care ciclul de experimentare este prelungit.

Dar datorită faptului că puteți face modificări la grupurile de elemente pentru fiecare variantă, puteți trece de la identificarea unei probleme mai mari/obstacol de conversie (ceea ce faceți cu testarea A/B) la reglarea fină a experienței vizitatorilor pentru o anumită pagină.

Un exemplu de test multivariat/studiu de caz

Să creăm o extensie ipotetică de testare multivariată a exemplului de studiu de caz de mai sus.

Acum, deoarece acest magazin de comerț electronic a folosit deja un test A/B pentru a găsi o versiune câștigătoare a paginii de produs emblematic, acum poate continua cu o rundă de testare multivariată pentru a experimenta diferite combinații ale elementelor din designul câștigător pentru a continua. să-și îmbunătățească rata de conversie.

Deci, de exemplu, în testul său multivariat, ar putea crea mai multe variații prin schimbarea culorii butonului CTA, a imaginii eroului și a copiei butonului CTA și a rula-l față de original pentru a găsi o combinație câștigătoare „mai mult”.

Avantajele testării multivariate

• Testele multivariate sunt excelente în luarea deciziilor de microconversie: cu testele multivariate, puteți experimenta multe combinații de modificări de design, interfață de utilizare și text. Ceea ce înseamnă că puteți elimina toate presupunerile din procesul de „a face ajustări” site-ului dvs. pentru rate de conversie mai bune. Puteți valida chiar și alegerile cele mai mici.
• Testele multivariate oferă o perspectivă mai profundă despre modul în care elementele joacă împreună: deoarece testarea multivariată vă permite să testați combinații de elemente, puteți vedea cum diferitele dvs. combinații influențează alegerile utilizatorilor dvs. (mai degrabă decât testarea elementelor de sine stătătoare, ca în cazul A/ testele B). În cazul testării multivariate, efectul observat este întotdeauna mai mare atunci când există mai multe modificări aplicate unei variante, spre deosebire de o singură modificare. Acesta se numește efect de interacțiune .

Limitările testării multivariate

• Testele multivariate au nevoie de mult trafic: dacă te uiți la matematica testării multivariate, vei vedea că numărul de versiuni de testat devine mare, în funcție de numărul de elemente de testat și de variațiile acestora. De exemplu, dacă doriți să utilizați un test multivariat și să testați diferitele combinații ale unui buton CTA (în trei culori: un control și doi contestatori și trei copii: un control și doi contestatori), atunci va trebui să creați 3*3, adică nouă versiuni. A avea suficient trafic pentru a se împărți între atât de multe versiuni este o provocare chiar și pentru site-urile web cu trafic ridicat.
• Testele multivariate pot deveni dificil de planificat: planificarea unui test multivariat semnificativ este dificilă din cauza numărului mare de combinații (a diferitelor elemente de pe pagina dvs.) pe care le puteți testa. Alegerea dintre combinații precum un titlu, o imagine erou și CTA pentru zona eroului sau titlul, USP și antetul poate necesita mult efort. De asemenea, testarea prea multor elemente într-un test multivariat poate denatura rezultatele.
• Testarea multivariată nu este potrivită pentru a lua decizii definitive la nivel înalt: deoarece testarea multivariată testează combinații de elemente, nu puteți spune întotdeauna în mod concludent de ce o anumită combinație a câștigat. Ceea ce înseamnă că luarea unei decizii radicale CRO nu este întotdeauna posibilă cu testarea multivariată. Acest lucru reduce testele multivariate la puterea doar a deciziilor CRO mai granulare, cum ar fi testarea plasărilor/graficelor/copierilor elementelor din versiunea despre care știți deja că funcționează bine.

Instrumente de testare multivariată

Cu Convert Experiences, puteți configura cu ușurință teste multivariate pe site-ul dvs. și puteți vedea cum diferitele combinații ale elementelor vă influențează rata de conversie.

Încă nu sunteți sigur ce instrument de testare multivariată să alegeți? Verificați această defalcare completă a celor mai bune instrumente de testare multivariată.

Testarea multivariată vs. testarea divizată: pe care ar trebui să utilizați?

Consultați tabelul de comparație dintre testarea multivariată și testarea de bază divizată (sau testarea A/B) de mai jos pentru a vedea când ar trebui să utilizați oricare dintre cele două tehnici.

Ce este testarea în mai multe pagini și testarea pâlniei

Testarea în mai multe pagini este o formă de experimentare în care testați modificări ale anumitor elemente de pe mai multe pagini.

Există două moduri de a proceda în acest sens.

Fie luați toate paginile canalului de vânzări și creați versiuni noi ale fiecăreia. Acest nou set de pagini formează pâlnia de vânzări „provocator” și apoi îl rulați împotriva pâlniei de vânzări inițiale (sau „controlul”). Aceasta se numește „Testarea pâlniei”.

Sau puteți testa modul în care prezența/absența elementelor recurente, cum ar fi insignele de securitate, poate afecta conversiile într-un întreg canal. Aceasta este testarea clasică sau convențională cu mai multe pagini.

Testarea în mai multe pagini și cazurile de utilizare pentru testarea pâlniei

Cu testarea pe mai multe pagini, aveți libertatea de a evalua impactul modificărilor efectuate asupra elementelor pe parcursul întregii călătorii a cumpărătorului.

Companiile care aleg să investească în testarea pâlniei oferă tone de informații la nivel înalt.

De exemplu, puteți utiliza testarea pâlnie pentru a găsi cele mai eficiente:

• Puteți rula teste de pâlnie pentru a testa diferite voci și tonuri pe paginile dvs. - de exemplu, dacă sunteți un furnizor de servicii antivirus, puteți testa o copie care vă inspiră frică în pâlnia dvs. de vânzări față de cea neutră sau care vă inspiră încredere - și vedeți ce mesaje rezonează cel mai bine cu vizitatorii dvs. și obține cele mai multe vânzări.
• Filosofii de design. Puteți experimenta diferite teorii de design și puteți vedea care funcționează cel mai bine.
• Strategii de vânzări/suport. Puteți crea o versiune de canal de vânzări challenger în care oferiți asistență prin chat live pe câteva pagini selectate ale canalului dvs. și să vedeți cum se compară canalul activat prin chat live cu canalul de vânzări obișnuit (fără suport prin chat live). De asemenea, puteți testa o serie de strategii de vânzări/asistență și puteți vedea cum puteți ajuta mai multe conversii în canalul dvs. de vânzări.

Un exemplu de test de mai multe pagini/studiu de caz

Din nou, să construim o extensie ipotetică a aceluiași exemplu de studiu de caz de mai sus.

Acum, deoarece acest site web este un magazin online, cel mai elementar canal de vânzare este:

Pagina produsului > Pagina de adăugare în coș > Pagina de finalizare a achiziției

Așadar, pentru a rula un test cu mai multe pagini, acest magazin ar trebui să creeze o variație pentru fiecare dintre aceste pagini și să creeze o pâlnie de provocare, cum ar fi:

Versiunea A a paginii produsului > Versiunea A a paginii de adăugare în coș > Versiunea A a paginii de plată

În canalul său challenger, retailerul electronic ar putea decide să testeze modul în care adăugarea legendei „Încredere de 10.000 de profesioniști” se traduce în conversii pentru fiecare etapă a călătoriei cumpărătorului. Sau, ar putea alege să afișeze pagini foarte diferite (similar cu testarea împărțită cu două pagini total unice).

Dacă se simt ambițioși, pot merge la testarea pâlniei și se pot juca cu copiere, o strategie de abandonare a coșului și multe altele.

Ai înțeles ideea, nu?

Avantajele testării pe mai multe pagini

• Testarea pâlniei cu mai multe pagini ajută la blocarea scurgerilor în pâlnia de vânzări: dacă datele dvs. Google Analytics arată scăderi majore pe anumite pagini ale pâlniei dvs. de vânzări, puteți configura un test pe mai multe pagini pentru a afla ce le poate reduce și obține mai multe conversii.
• Testele pe mai multe pagini pot oferi o perspectivă mai profundă asupra comportamentului utilizatorilor: cu testarea pe mai multe pagini, puteți identifica diferitele elemente ale canalelor dvs. de control și challenger cu care utilizatorii dvs. se implică cel mai mult. Puteți folosi astfel de informații pentru a lua decizii și mai informate privind designul, copierea și experiența utilizatorului.

Dezavantajele testării pe mai multe pagini

• Experimentele cu mai multe pagini pot dura luni de zile. Deoarece B2B are călătorii lungi de cumpărare (deseori întinse pe luni de zile), testele B2B pe mai multe pagini pot rula luni la rând.
• Obținerea de informații din rezultatele unui test cu mai multe pagini poate fi dificilă: dacă versiunea challenger experimentează cu prea multe variabile (de exemplu, dacă experimentezi atât designul, cât și copierea într-un challenger), este posibil să nu poți spune dacă designul a cauzat mai multe conversii sau copie. Pentru a crea o grămadă de contestatori (de exemplu, unul pentru testarea designului și unul pentru testarea copiei), va trebui să vă împărțiți traficul în trei. Dacă nu obțineți mii de vizitatori pe site-ul dvs. web, este posibil să nu aveți suficient trafic pentru a obține rezultate semnificative statistic atunci când rulați prea multe astfel de variante.

Instrumente de testare cu mai multe pagini

Cu Convertiți, puteți configura cu ușurință teste cu mai multe pagini sau experimente în canal și puteți vedea modul în care diferitele modificări influențează conversiile din pagini.

Testare A/B vs. testare multivariată vs. testare cu mai multe pagini

Testare A/B

Ce este:

În testarea A/B, testați două versiuni foarte similare ale aceleiași pagini/anunț/material pentru a găsi varianta cu cele mai bune performanțe.

Când să utilizați:

În esență, testarea A/B este metoda folosită de optimizatori pentru a identifica cele mai mari obstacole în calea conversiei. Trebuie să creați o ipoteză care să identifice motivul (pretins) al conversiilor scăzute și să testeze modul în care modificarea/ajustarea unui element poate atenua problema.

Prin testarea A/B puteți lua decizii la nivel înalt de proiectare și copiere.

De exemplu, o rată de respingere ridicată de pe o pagină de pornire indică, în general, faptul că vizitatorii nu primesc „valoarea” oferită de produsul sau soluția. Testele A/B cu diferite versiuni ale titlului unei propuneri de valoare sunt comune.

Ușurința de a obține informații:

Testele A/B au nevoie de aproximativ 10.000 de vizitatori pentru fiecare variantă și aproximativ 1000 de conversii pentru a oferi informații. Dar sunt relativ mai rapid de efectuat în comparație cu testele multivariate.

Testare multivariată

Ce este:

În testarea multivariată, testați mai mult de o variantă față de control (pe care știți deja că are rezultate bune).

Când să utilizați:

Testele multivariate pot fi folosite pentru a lua decizii mai granulare. De exemplu, dacă aveți o pagină de pornire cu performanțe ridicate pe care doriți să o optimizați în continuare, puteți utiliza teste multivariate pentru a experimenta variații mai fundamentale diferite ale unui grup de elemente de pe pagina dvs. de pornire.

Gândiți-vă la asta ca astuparea scurgerilor mai mici după ce potopul a fost oprit prin testarea A/B.

Ușurința de a obține informații:

Testele multivariate sunt extrem de complicate datorită includerii mai multor elemente pe mai multe variante. Deci, atât nevoile de trafic, cât și timpul necesar pentru a ajunge la un rezultat concludent sunt agravate.

Testare pe mai multe pagini

Ce este:

În testarea cu mai multe pagini, testați diferite călătorii de cumpărare pentru a găsi cea mai optimă. Testarea în mai multe pagini este similară cu rularea a mai multor teste A/B/N și multivariate împreună pe mai multe pagini din canalul de vânzări.

Când să utilizați:

Testele cu mai multe pagini sau testele pâlnie pot fi folosite pentru a lua decizii la nivel înalt pe parcursul întregii călătorii de vânzări.

De exemplu, puteți testa o călătorie de vânzări personalizată față de una obișnuită.

Ușurința de a obține informații:

Testele cu mai multe pagini cu versiuni limitate (de exemplu, 2) pot da rezultate semnificative relativ rapid.

Comparând testarea A/B, testarea multivariată și multipagina

Un experiment poate da rezultate definitive numai atunci când folosește formatul de test potrivit.

Ca rezumat, iată ceea ce ar trebui să rețineți:

• Teste A/B – În general, testați cel puțin un element semnificativ care a fost identificat ca un blocaj de conversie în ipoteza dvs. într-o altă versiune (variantă).
• Teste împărțite – Testele împărțite se concentrează pe găzduirea a două pagini și experiențe complet diferite pentru vizitatori pe două adrese URL separate, în timp ce le evaluează pentru același obiectiv de conversii. Prin testele împărțite, puteți testa două configurații complet diferite, cum ar fi platformele de găzduire și temele unul împotriva celuilalt.
• Teste multivariate sau teste A/B/N – MVT-urile sunt de obicei efectuate pe câștigătorii testelor A/B. În testarea multivariată, modificați grupurile de elemente ale unei pagini, fiecare grup unic sau modificat devenind o variantă sau o versiune proprie. Este dificil să atribui conversii mai mari pentru o variantă MVT unui anumit element, dar optimizatorii pot testa modificări granulare pentru copiere și proiectare.
• Teste cu mai multe pagini – Rularea unui test cu mai multe pagini este similară cu rularea mai multor teste A/B/N împreună pe o grămadă de pagini ale pâlniei de vânzări. Alternativ, puteți testa experiențe complet diferite ale canalului de vânzări (de exemplu, trimiterea jumătății din trafic către versiunea de control Pagina 1> Pagina 2> Pagina 3 și trimiterea celeilalte jumătate către versiunea challenger Pagina 1 varianta> Pagina 2 varianta > Pagina 3 variantă cu challenger-ul fiind destul de diferit de control.)

Alegerea testului potrivit pentru un experiment depinde în mare măsură de obținerea corectă a ipotezei. Iată câteva instrumente CRO care vă vor ajuta să scrieți o ipoteză clară de fiecare dată când rulați un experiment.

De asemenea, când sunteți gata să începeți cu teste A/B, cu mai multe variante sau cu mai multe pagini pentru experimentele dvs., consultați Conversie. Convert Experiences poate gestiona toate experimentele de optimizare la care vă puteți gândi cu ușurință pentru site-urile web cu trafic ridicat, chiar și în industriile sensibile la confidențialitatea datelor.

Oferă Convert Experiences o probă gratuită completă de 15 zile fără obligații și regândește modul în care testarea vă poate îmbunătăți KPI-urile.