Cele mai populare instrumente de testare multivariată în 2022

Deci, în prezent rulați teste A/B și căutați să extindeți programul de testare.

Aveți un trafic bun, vedeți rezultate grozave și acum doriți să rulați mult mai multe teste și să obțineți acele date cât mai curând posibil.

Dar cum poți începe să testezi mai repede? Sau și mai bine, cum puteți rula mai multe teste și obține mai multe informații în aceeași perioadă de timp?

Aici intervine testarea multivariată. Vă permite să testați mai multe variații simultan, pentru a vedea care dintre ele funcționează cel mai bine.

În acest ghid, vom detalia ce este MVT, cum funcționează, de ce aveți nevoie pentru a-l folosi și vom detalia o selecție de instrumente de testare multivariată de top disponibile.

Totul, de la prețul și caracteristicile lor, până la modul în care își desfășoară activitatea, astfel încât să puteți face alegerea corectă atunci când decideți ce instrument de testare multivariat să obțineți.

Așa că hai să ne aruncăm în ea...

Ce este testarea multivariată?

Cel mai bun mod de a înțelege testarea multivariată este să o comparați cu alte metode de testare și să vedeți cum diferă.

Deci, să ne uităm la un test A/B și un test multivariat și cum se compară.

Cu un test A/B, testăm o singură variantă față de o versiune de control originală. Poate că avem o idee despre cum să îmbunătățim titlul, așa că creăm acea variație și apoi vedem care funcționează cel mai bine.

Testul dvs. A/B va arăta astfel:

Titlul 1 (control) vs Titlul 2 (ideea variației)

Un alt test pe care l-am putea rula este un test A/B/n.

Aici putem testa mai multe variații împotriva controlului, pentru a găsi câștigătorul general. Testele A/B/n sunt univariabile.

De exemplu, am putea avea o grămadă de idei de titlu și nu suntem siguri care va funcționa. Dar pentru că avem trafic pentru a rula câteva variante de testare și pentru a obține rezultate exacte, decidem să testăm mai multe idei de titluri pentru a vedea care are cele mai bune performanțe.

Titlul 1 (control) vs Titlul 2 vs Titlul 3

Odată ce găsim varianta câștigătoare a titlului, s-ar putea să testăm apoi o grămadă de imagini cu filmări eroice și apoi poate o grămadă de unghiuri CTA.

După cum puteți ghici, totul necesită timp, nu?

O altă opțiune este să rulăm un test în care schimbăm o grămadă de lucruri dintr-o dată și să vedem dacă asta îmbunătățește valorile.

Avem tendința de a nu face acest lucru cu majoritatea testelor A/B decât dacă ne gândim să facem o schimbare radicală, adică să aruncăm o salută Maria pentru a încerca să găsim un nou câștigător, deoarece toate celelalte idei de testare stagnează sau nu au niciun impact.

Așadar, de ce nu recomandăm să faceți schimbări radicale ca aceasta pentru campaniile normale și ce legătură are cu testarea multivariată?

Testăm câte un element, deoarece dacă facem modificări uriașe și noua pagină câștigă sau eșuează, nu suntem siguri care dintre acele modificări a cauzat această creștere.

Testarea multivariată sau MVT ne permite să testăm mai multe variante, urmărind în același timp fiecare dintre aceste modificări și modul în care acestea afectează rezultatul.

Nu numai că putem testa mai multe variante de elemente, dar putem chiar să rulăm diferite combinații ale acestora până când găsim câștigătorul final.

Să presupunem că am vrut să ne îmbunătățim pagina de pornire și avem câteva idei despre ce să testăm pentru a vedea cel mai mult:

• Titlul
• Eroul a filmat imaginea
• CTA.

Cu un test multivariat, nu am putea testa numai fiecare idee de titlu, opțiune de imagine eroă și unghiul CTA, dar putem și testa fiecare combinație a acelor variații pentru a găsi combinația câștigătoare:

Titlul 1 + Imaginea eroului 1 + CTA 1 vs

Titlul 1 + Imaginea eroului 2 + CTA 1 vs

Titlul 1 + Imaginea eroului 1 + CTA 2 vs

Titlul 2 + Imaginea eroului 1 + CTA 1 vs

Titlul 2 + Imaginea eroului 2 + CTA 1 vs

Titlul 2 + Imaginea eroului 2 + CTA 2

Testarea multivariată vă poate ajuta să aflați cea mai bună combinație de elemente și să înțelegeți ce a cauzat aceste modificări.

Cu toate acestea, efectuarea unei teste multivariate adecvate implică cheltuirea multor timp și resurse. Sunteți dispus să investiți atât de multe resurse, nu doar pentru testare, ci și pentru QA și analiză? În unele scenarii, totuși, ar putea fi opțiunea mai bună. Să vedem care sunt acestea.

Când să folosiți testarea multivariată?

Pentru ce este folosită testarea multivariată? Iată câteva dintre cazurile în care un test MVT ar putea fi mai util decât un test A/B.

1. Când aveți un trafic ridicat și doriți să vă intensificați programul de testare

Traficul este cheia majoră a testării multivariate. Aveți nevoie de un volum mare de trafic pentru a putea testa fiecare modificare și pentru a avea încredere în rezultatele testelor.

Dar dacă aveți trafic și doriți să extindeți testarea pentru a obține mai multe date și a lua mai multe decizii, atunci MVT vă va permite să rulați mai multe idei simultan.

2. Când doriți să creșteți forța și aveți câteva idei, dar nu doriți să așteptați să le testați unul câte unul

Unii oameni cred că ar trebui să folosești MVT doar pentru a rafina paginile web actuale cu modificări minore, din cauza investiției de timp, dar nu este adevărat. Sigur, îl puteți folosi pentru asta, dar îl puteți folosi și pentru teste mai ample „ce ar fi dacă” ale elementelor mai mari.

(Poate că nu sunteți sigur care element va oferi cel mai bun lift și așa că doriți să încercați să aruncați câteva idei inteligent ipoteze în perete pentru a vedea care funcționează.)

Dacă aveți volumul de trafic pentru a rula un MVT, atunci este o idee deloc să nu încercați să găsiți combinații mari de pagini mult mai rapid. Asigurați-vă că măsurați efectele traficului respectiv DUPĂ testarea fiecărei variante, de asemenea, deoarece acest lucru vă va oferi mai multe informații despre publicul dvs. și de ce a funcționat.

De exemplu, pe Facebook, puteți configura anunțuri de testare multivariate de bază, adăugând variante ale unei imagini în miniatură, titlu și copie de corp etc.

Testul se va desfășura și vă va spune care variantă a anunțului respectiv obține cel mai mare CTR.

Dacă scopul tău ar fi să obții clicuri, atunci acest anunț ar câștiga, nu?

Dar dacă tot acest trafic revine apoi pe pagina către care îi trimiteți, atunci tot ceea ce ați găsit este o variantă care face ca acel public să facă clic, nu una care îi face să rămână și să convertească.

Este același lucru atunci când rulați un test MVT pe o pagină, mai ales dacă îl utilizați ca metodă mai largă de colectare a ideilor. Verificați ce se întâmplă pe pagină, dar și ce se întâmplă după ce fac clic.

3. Când rafinați un test anterior pentru a obține o creștere incrementală

De asemenea, puteți utiliza MVT pentru a măsura și îmbunătăți micile rafinamente. De fapt, multor agenții le place să le folosească pentru a obține și mai multă putere în campaniile câștigătoare actuale și pentru a testa mici modificări.

Să presupunem că ați testat deja A/B o pagină de mai multe ori pentru a găsi o variantă câștigătoare, dar doriți să obțineți o creștere cât mai mare posibil, chiar dacă este de doar 0,5%. Puteți rula teste MVT pe pagina respectivă pentru a testa în continuare (pentru că la 100.000 de vizitatori pe lună, fiecare 0,5% ajută este vizibil!)

4. Când căutați creșterea maximă posibilă dintr-o combinație de idei (Efecte de interacțiune)

Uneori, un test A/B consecutiv ne poate oferi câștigători pe hârtie, dar atunci când îi combinăm, nu sunt întotdeauna opțiunea cea mai performantă pentru pagina noastră.

Iată un exemplu:

• Efectuați un test de titlu și alegeți un câștigător și implementați.
• Apoi executați un test de imagine cu captură de erou pe aceeași pagină cu varianta și implementarea titlului câștigătoare.
• Apoi rulați un test CTA pe aceeași pagină cu elementele câștigătoare anterioare și implementați.

În teorie, aceasta ar trebui să fie versiunea cu cele mai bune performanțe a paginii dvs., dar se pot întâmpla lucruri ciudate din cauza interacțiunii sau a lipsei acestora. Mai simplu spus, este posibil ca un element care pierde dintr-un test să depășească uneori câștigătorul testului A/B secvenţial atunci când este combinat cu o altă variantă de element.

Cum?

Ei bine, poate un titlu pierdut de la primul test oferă o rată de conversie backend mai mare atunci când este combinat cu câștigătorii testului de imagine și CTA.

Acest lucru se poate întâmpla, dar nu ați ști niciodată acest lucru dacă doar ați rula teste A/B. În schimb, l-ați fi eliminat din opțiuni înainte de a testa vreodată celelalte elemente. Acesta este motivul pentru care testarea multivariată este atât de puternică. Vă permite să găsiți cea mai mare performanță generală a paginii, chiar dacă înseamnă că ia un element mai puțin performant dintr-o parte a testului.

Mai bine, vă poate spune chiar ce element a ajutat cel mai mult...

5. Când căutați cel mai important element de pe pagină pentru audiența dvs., pentru teste și pagini viitoare

MVT nu va arăta doar combinația câștigătoare a diferitelor variații și elemente, dar vă va arăta și elementul care oferă cea mai mare putere.

Poate că împușcătura cu eroul tău are mai multă putere, dar vezi, de asemenea, că dintre toate elementele tale de pe pagina ta de variante, aceasta contribuie cel mai mult la rezultatul final?

Acest lucru vă va oferi apoi o perspectivă despre unde să testați mai întâi pentru îmbunătățiri chiar și ulterioare, astfel încât să vă puteți concentra mai întâi asupra îmbunătățirilor pentru loviturile de erou etc.

6. Când aplicați Machine Learning la procesul dvs. de testare

Datorită naturii MVT care necesită și urmărește cantități mari de date și interacțiuni, poate fi folosit de fapt ca o sursă excelentă pentru a alimenta programele de testare a învățării automate.

ML necesită date mari pentru a funcționa cel mai bine, dar odată ce le primește, poate începe să vadă tipare și să prezică rezultate și comportamente cu mai puțin trafic în timp. De fapt, site-uri precum Amazon fac exact asta...

Exemple de testare multivariată

Exemplul de testare multivariată #1

Amazon a folosit MVT și învățarea automată pentru a-și ajusta aspectul paginilor de destinație, rezultând o creștere cu 21% a ratei de achiziție în doar 7 zile!

Testare multivariată Exemplul #2

Booking.com folosește testarea multivariată pentru a testa noi funcții unice pentru anumite audiențe și apoi măsoară performanța acestora înainte de a le implementa pe tot site-ul.

Exemplul de testare multivariată #3

Microsoft a înregistrat o creștere cu 40% a ratei de conversie pentru site-ul său IMM-uri, după ce a efectuat un test MVT pe mai multe elemente de pagină (8×4!)

Testare multivariată Exemplul #4

Totuși, nu doar juggernauts pot folosi MVT. HawkHost a înregistrat o creștere de 204% a vânzărilor atunci când a efectuat un test MVT pe pagina lor de pornire (testându-și titlul, subtitlul și filmarea eroului).

Avantajele și dezavantajele testării multivariate

Dacă testarea multivariată este atât de puternică, de ce nu o folosim cu toții?

Vedeți, frumusețea unui test A/B este că puteți testa o idee rapid, cu un public relativ mic. Aceasta înseamnă că majoritatea companiilor pot rula un test chiar dacă au un trafic destul de scăzut, apoi pot vedea un rezultat în 14-30 de zile.

Dar cu un test multivariat, aveți nevoie de un public mult mai mare cu care să rulați, deoarece testați mai multe lucruri deodată. (Mai ales dacă testați mai multe pagini sau testați mai multe combinații de variații.)

Să presupunem că am vrut să testăm un titlu pe pagina noastră de pornire:

• Controlul titlurilor
• Variația titlului

Testăm doar varianta unică, deci sunt 2 opțiuni în total.

Acum, ca exemplu simplu, să presupunem că vrem să obținem 1.000 de vizitatori la fiecare versiune a paginii (varianta și controlul), astfel încât să putem fi siguri că rezultatele testelor sunt de încredere.

(Traficul necesar poate varia în funcție de pagină și de rata de conversie a acesteia, dar haideți să simplificăm aici doar ca să înțelegeți ideea.)

Asta înseamnă că am avea nevoie de 2.000 de vizitatori pentru a rula testul și a avea încredere în rezultate, 1000 de vizitatori mergând pe fiecare pagină.

Dar dacă am vrea să testăm:

• 3 titluri
• 3 imagini cu eroi și
• 3 CTA-uri?

Nu sunt 9 variante în total, ci de fapt 27 de combinații de 9 variante (3x3x3).

Aceasta înseamnă că, dacă am dori 1.000 de vizitatori per variantă, atunci necesarul nostru de trafic ar fi de 27.000 de vizitatori, în schimb pentru a rula testul și a avea încredere în rezultate (pe baza simplificării noastre excesive de 1.000 de vizitatori fiind suficient pe pagină.)

În realitate, probabil că veți avea nevoie de aproximativ 10.000 de vizitatori pentru fiecare variantă pentru a obține date exacte, deoarece numai traficul nu este suficient, trebuie să vedeți și conversiile.

Acesta este motivul pentru care multe companii nu rulează teste MVT, pur și simplu pentru că nu au trafic pentru a le rula eficient. De fapt, majoritatea agențiilor recomandă să aveți aproximativ 100.000 de vizitatori lunari înainte de a începe să rulați campanii MVT, cu excepția cazului în care pagina are deja o rată de conversie foarte mare. Și chiar și atunci, ei totuși recomandă rularea doar a maxim 6 variante, pentru a le putea rula mai repede.

Dar dacă ai acest tip de trafic?

Ei bine, atunci MVT vă poate permite să efectuați echivalentul a mult mai multe teste în aproape exact același interval de timp...

Ce se întâmplă dacă luăm acel exemplu de mai sus și permitem fiecărui test să ruleze pentru un ciclu complet de vânzări de 30 de zile pentru a obține o fereastră de măsurare precisă?

Presupunând că avem trafic, am putea rula 27 de combinații de teste simultan pe acea singură pagină timp de 30-60 de zile ca un singur test multivariat. Nu e rău când compari asta cu rularea a 27 de teste A/B consecutive pe pagina respectivă, într-un interval de timp de 27 de luni!

(Din nou, simplific aici și presupun că rulați pentru un ciclu complet de vânzări la fiecare test.)

Dar, după cum puteți vedea, testarea multivariată vă permite să obțineți perspective și idei, să le implementați mai rapid și să reduceți timpul de funcționare la testele de pierdere consecutive.

Destul de bine, nu!?

Evident, există și alte dezavantaje ale testării MVT, altele decât cerințele de trafic.

Datorită numărului mare de variații și combinații pe care le puteți rula, vă crește foarte mult timpul de QA înainte și post-test.

Trebuie să vă asigurați că fiecare variație funcționează și are, de asemenea, sens. (Nu se afișează un titlu și o imagine care nu se potrivesc etc.), și astfel crește timpul și costul de configurare dramatic.

De asemenea, asigurați-vă că verificați efectele.

Doar pentru că observați o creștere a conversiilor pe pagina respectivă, urmăriți-o până la obiectivele tale finale. Ultimul lucru pe care îl doriți este mai multe clicuri, dar o experiență slabă a utilizatorului sau o rată de respingere ridicată (sau mai multe clicuri, dar fără vânzări).

Avantajele testării multivariate

• Presupunând că aveți trafic, testarea multivariată vă permite să testați o mulțime de variații, rapid.
• MVT vă poate ajuta să extindeți programul de testare pentru a găsi mai multe date despre ceea ce funcționează și ce nu.
• Vă poate ajuta să găsiți combinații câștigătoare mai rapid decât testele A/B consecutive.
• Vă poate ajuta să găsiți combinații câștigătoare pe care este posibil să le fi ratat atunci când rulați teste consecutive. (Imaginați-vă dacă un titlu a fost al 2-lea și l-ați decupat, dar împreună cu a treia variație de imagine, a dublat cumva creșterea? Cu un test consecutiv, ați fi ratat acest lucru. Un test multivariat are un grad mai mare de efecte de interacțiune).
• Unele software de testare A/B vă vor permite să vedeți care element anume a ajutat să vă ofere cel mai mult impuls (oferându-vă o înțelegere mai profundă a publicului dvs.).
• De asemenea, poate fi folosit pentru a ajuta la găsirea unor ridicări minore pe paginile de înaltă performanță. (Imaginați-vă că aveți deja o pagină de înaltă performanță și că căutați idei noi pentru a vedea creșteri minore, cum ar fi schimbări de culoare.)

Dezavantajele testării multivariate

• Aveți nevoie de un volum mare de trafic pentru a rula, mai ales dacă doriți un simbol statistic, astfel încât să aveți încredere în rezultatele dvs. și să nu vedeți false pozitive sau negative (erori de tip 1 și tip 2) și puterea statistică pentru a măsura un procent mai mic.
• Cerințele de trafic cresc rapid cu cât testezi mai multe variații și combinații, așa că ține cont de asta. Luați în considerare eliminarea elementelor suplimentare în cazul în care acestea nu oferă multă portare. (adică testați titlul înainte de a vă face griji cu privire la testarea culorilor subsolului etc. Puteți oricând să le testați după, dacă doriți cu adevărat.)
• Nu doar traficul afectează dimensiunea eșantionului. Rata de conversie a paginii curente și a variabilelor, toate afectează volumul dimensiunii eșantionului necesar pentru a atinge semnificația statistică. Conversiile mai bune pot reduce traficul necesar, conversiile mai mici cresc această cerință.
• Marja de eroare la testarea mai multor variabile crește, de asemenea, volumul de trafic necesar înainte de a putea avea încredere în rezultate.
• Trebuie să rulați teste intensive de QA pentru a vă asigura că toate funcționează în avans.
• De asemenea, trebuie să rulați QA pentru a vă asigura că variațiile au sens împreună și nu au combinații opuse sau conflictuale. (CTA care nu se potrivesc cu ofertele, titluri pentru o vacanță la plajă în timp ce faceți publicitate unei excursii la schi sau chiar conflicte sau combinarea culorilor fontului și al fundalului.)
• Dacă nu aveți o sursă de trafic mare, puteți rula în continuare un test MVT, pur și simplu ar putea dura mult mai mult până când atingeți simbolul statistic și puteți încheia testul. (Uneori mai multe luni sau mai mult). De fapt, uneori poate fi mai rapid și mai eficient să rulezi teste A/B consecutive.
• Este posibil să pierdeți câteva informații despre public, pur și simplu testând mai multe lucruri simultan. (Testarea unui singur element sau unghi vă poate ajuta uneori să vă înțelegeți mai bine publicul.)

Statistici de testare multivariată: matematica din spatele MVT

Așa că hai să ne dezvăluim puțin...

Când vine vorba de testarea multivariată, folosim o metodă de analiză statistică diferită de testarea standard A/B sau testarea divizată.

Nu vreau să intru prea mult în matematică, dar iată o simplificare:

• Cu testarea A/B, folosim un test t (sau test z) pentru a măsura diferența dintre 2 sau mai multe seturi de rezultate.
• Cu testarea multivariată, se utilizează o altă metodă pentru a găsi rezultatele testului numită ANOVA sau „Analiza varianței”. Nu trebuie să cunoașteți toate detaliile, dar aici este chestia de bază. Principala diferență este că ANOVA măsoară și conexiunea și impactul dintre variabile. Acesta este unul dintre principalele puncte forte ale MVT , deoarece ne permite să vedem cum se influențează reciproc combinațiile de elemente.

În funcție de instrumentul pe care îl utilizați, pot exista 3 tipuri de metode de testare multivariată oferite atunci când rulați o campanie MVT. Fiecare dintre ele afectează matematica asupra modului în care va funcționa testul tău.

Le numim:

• Factorial complet,
• Fracție factorială și
• Taguchi.

Deci, ce înseamnă ele?

Factorial complet

Aproape fiecare instrument MVT va oferi testarea factorială completă ca bază pentru modelul său principal de testare și este aproape ceea ce doriți să utilizați tot timpul.

Această metodă se referă la distribuția „completă” a traficului în testul dvs.

Mai simplu spus, este locul în care testezi fiecare combinație deodată, împărțind traficul de testat în mod egal între fiecare variantă.

Cu un test A/B, împărțiți traficul 50:50. Dar cu un MVT, dacă ai avea 10 variante, atunci asta ar însemna că doar 10% din trafic merge către fiecare variantă.

Din cauza numărului de variante și a traficului necesar pentru a atinge semnificația statistică cu fiecare variație, factorial complet necesită o sursă de trafic foarte mare, dar este cea mai precisă metodă.

Cu toate acestea, unele platforme de testare A/B vor oferi, de asemenea, ceva numit testarea „Fracție factorială” ca alternativă.

Factorial de fracție

Această metodă încearcă să ocolească unele dintre cerințele de trafic mai mari testând doar un eșantion mai mic de variații și apoi estimând ratele de conversie finale pe baza rezultatelor testelor curente .

Scopul său nu este în acuratețea prezicerii rezultatelor de încredere pentru extinderea normală, adică dacă extindem acest lucru la X public, va funcționa la fel.

În schimb, este conceput pentru a vă ajuta să vedeți unde începe să se producă tracțiunea timpurie, astfel încât să puteți obține o perspectivă înainte de a testa mai profund sau cu o altă metodă.

Să presupunem că aveți 10 variante pe care doriți să le testați.

Factorialul fracționar va testa de fapt 5 dintre ele și apoi va încerca să deducă rata de conversie pe acele alte 5 teste, pe baza rezultatelor de până acum.

După cum puteți ghici, acest lucru nu este la fel de precis și poate duce la erori și fals pozitive și este de fapt o sursă de argumente între optimizatori și marketeri. (Aproape toți recomandând factorial complet ca metodă principală de testare.)

Taguchi

În cele din urmă, aveți metoda Taguchi de testare multivariată. Proiectat inițial ca o metodă de măsurare a controlului calității în raport cu ipotezele de pierderi acceptabile în cercetare și dezvoltare pentru fabricarea produselor.

Majoritatea instrumentelor nu vor oferi acest lucru din cauza complexității de utilizare.

Când să opriți un test multivariat?

Există 3 lucruri principale pe care trebuie să le luăm în considerare atunci când rulăm orice test înainte de a-l opri:

• Pentru ca testul să fi derulat suficient de mult pentru a fi colectat o dimensiune a eșantionului suficient de mare pentru fiecare variantă și pentru ca testul să fi colectat suficiente conversii pentru a fi relevant.
• Pentru ca testul să fi rulat fie 1, fie chiar 2 cicluri complete de vânzări (pentru a echilibra traficul și perioadele de cumpărături de peste 30-60 de zile).
• Și, în sfârșit, pentru ca rezultatele să fie semnificative statistic, adică dacă luăm acest test în sălbăticie și îl extindem, atunci putem fi 95% siguri că va continua să funcționeze în același mod.

Vă recomandăm să nu opriți niciun test înainte de acest punct. În caz contrar, datele vor fi insuficiente pentru a lucra. Cu toate acestea, am putea opri și apoi reporni un test dacă există probleme cu performanța, cum ar fi că formele de plată ale unei variante nu funcționează etc., dar în mod ideal, încercăm să nu aruncăm nici măcar privirea când rulează.

(Unele agenții recomandă să se oprească mai devreme dacă există un câștigător clar sau chiar să oprească anumite variații dacă rata lor de conversie scade sub 10% și apoi să permită testului să continue, în timp ce se filtrează mai mult trafic către cei cu performanțe mai mari. Evident, acest lucru poate afecta rezultatele testului sunt foarte bune.)

Cum se configurează și se efectuează un test multivariat?

Procesul de configurare a unui test multivariat este foarte asemănător cu un test A/B.

Pasul #1: Decideți-vă obiectivul final

În primul rând, trebuie să formați o ipoteză pentru pagina dvs., scopul acesteia, rezultatele sale curente și modul în care credeți că poate fi îmbunătățită.

Puteți folosi generatorul nostru de ipoteze pentru a vă ajuta să clarificați ceea ce doriți să realizați și să stabiliți câteva obiective concrete.

Pasul 2: Aflați ce să testați

Apoi, decideți ce elemente să testați și ce variații credeți că ar putea îmbunătăți rezultatele actuale.

De exemplu, s-ar putea să credeți că testarea „elementelor de bază” de deasupra pliului va crește conversiile, așa că doriți să testați titlul, imaginea eroului și textul butonului CTA.

Pasul 3: Calculați perioada de testare

Înainte de a rula testul sau de a crea materiale, vă recomandăm să efectuați un calcul pre-test pentru dimensiunea eșantionului, astfel încât să puteți estima intervalul de timp și cerințele de trafic pentru rularea acestui test. Acest lucru vă va ajuta să vă dați o perspectivă asupra câte variații puteți rula în mod fezabil cu traficul dvs. recurent și să obțineți totuși rezultate rapide. (Sau chiar vă anunță dacă trebuie să testați mai puține opțiuni).

În exemplul de mai sus, aveți 3 elemente: titlul, fotografia eroului și textul butonului CTA.

Dacă doriți să testați o singură variație pentru fiecare, aceasta ar fi 2x2x2=8 combinații. Știind acest lucru, puteți începe să vă dați seama de cât trafic aveți nevoie.

Introduceți traficul de pagină săptămânal curent și rata de conversie în calculator (împreună cu orice setări de putere și încredere).

Apoi, setați numărul de pagini pe care doriți să le testați. (8 în acest exemplu)

Acest lucru vă va oferi apoi un interval de timp pentru cât timp trebuie să alergați pentru a putea detecta ridicarea minimă.

Pasul #4: Construiește testul

Apoi, mergeți la instrumentul dvs. și configurați diferitele versiuni și combinații pentru testul multivariat.

Începeți prin a selecta opțiunea de test multivariat.

Dați-i un nume și apoi adăugați adresa URL a paginii pe care doriți să o testați (astfel încât instrumentul să o poată introduce pentru editările WYSIWYG.)

În acest exemplu, vom lucra la îmbunătățirea ratei de conversie a paginii de pornire.

Odată ce pagina se încarcă în instrument, trebuie să configurați elementele de testare.

Aici, la Convert, folosim 2 conversii de denumire pentru piese de editat în teste multivariate:

• Secțiunea, care se referă la elementul din pagină pe care doriți să-l testați, cum ar fi un titlu sau un CTA, și
• Variația, care este editarea ta a acelui element anume.

Vă recomand să alegeți câte o secțiune pentru a edita și adăuga fiecare variantă.

Dați secțiunii un nume, cum ar fi „Titlu”, apoi continuați și editați și adăugați variantele pentru acea secțiune. (Asigurați-vă că salvați fiecare variație pe măsură ce lucrați la ea.)

Apoi treceți la următoarea „secțiune” sau element pe care doriți să-l testați. În acest exemplu, ar fi configurarea unei alte fotografii de erou de fundal și apoi configurarea unei variante de text pentru butonul CTA.

Pasul #5: Asigurați-vă că totul funcționează

Odată ce ați configurat fiecare variantă, rulați un test QA pentru fiecare tratament nou pentru a vă asigura că toate funcționează și că fiecare element se potrivește în mod sensibil. (Fără CTA concurente sau informații/imagini nepotrivite sau dublați culoarea fontului și butoane.)

Faceți clic pe „Salvați și continuați” și se va încărca o pagină nouă. Apoi, mergeți mai departe și faceți clic pe fila „Rapoarte”.

De aici veți vedea variațiile de pagină și informații despre acestea. Faceți clic pe „pictograma ochi” de lângă fiecare pagină pentru a vedea o previzualizare a acesteia și pentru a testa funcționarea linkurilor.

De aici puteți rula un test QA și puteți utiliza aceeași adresă URL pentru testele mobile.

Pasul #6: Push It Live

Atâta timp cât fiecare variație funcționează, acum puteți începe testul și îl puteți lăsa să ruleze până când aveți suficiente date.

(Rețineți că există o opțiune de a împinge testul în direct direct din pagina de raport unde ați deschis testele QA.)

Cele mai bune instrumente de testare multivariată pentru a vă maturiza programul de optimizare

Acum că înțelegi cum funcționează testarea multivariată, haideți să defalcăm platformele de optimizare a site-urilor de pe piață care oferă testare multivariată. Vom acoperi caracteristicile lor împreună cu prețurile lor dacă oferă probe gratuite și alte câteva detalii.

Un lucru rapid înainte de a face asta.

Amintiți-vă că instrumentul pe care îl utilizați este NUMAI la fel de bun ca și persoana care îl instalează . Dacă fluxul de numerar este strâns, atunci investiți în cineva care să ajute mai întâi intern (sau contactați o agenție externă) și utilizați doar un instrument mai ieftin deocamdată.

Este foarte bine să ai un instrument uimitor de testare MVT, dar este inutil dacă persoana nu-l poate configura corect, suficient de rapid sau nu poate înțelege datele!

#teamovertools

1. Convertiți experiențe

Evaluare G2 : 4.7/5.0 (46 recenzii)

Prețuri: începând de la 699 USD pe lună, cu 199 USD pentru fiecare 100.000 de vizitatori după aceea.

Oferă un plan gratuit sau o probă? Da, 14 zile de încercare gratuită fără card de credit necesar.

Cost pentru 100.000 de vizitatori: 199 USD.

Pro

• Complet în conformitate cu confidențialitatea: nu sunt stocate niciodată date personale
• Raportare precisă datorită utilizării cookie-urilor de la prima parte
• Rapid și fără pâlpâire
• Rulați teste nelimitate
• Stivuire de condiții cu peste 40 de filtre pentru a viza segmente de public granulare
• Inserare JavaScript flexibilă la nivel de proiect, experiment și variație
• Declanșarea obiectivului de condiție JS personalizată
• Se integrează cu peste 100 de instrumente terță parte (de exemplu, Shopify, WordPress, Mixpanel, Hotjar)
• Asistență pentru clienți umană de 4 ori mai rapidă prin telefon, e-mail și chat.

Contra

• Segmentarea de bază a postului pe planul Kickstart

Caracteristici de testare multivariată : factorial complet. Oferim, de asemenea, suport direct și sfaturi atunci când rulăm aceste teste

Partea client, partea serverului sau ambele? Convert funcționează ca un editor WYSIWYG pe partea clientului, dar poate fi configurat și pe partea serverului și poate rula JS personalizat.

Deservesc Enterprise? Da. Suntem instrumentul ales pentru companii precum Sony, Jabra, Unicef ​​și altele.

Oferă asistență pentru clienți? Da, chiar de la începutul procesului. Ce tip? Chat live, blog și bază de cunoștințe cu multe altele care urmează.

Le pasă de confidențialitate ? Suntem pe deplin conformi GDPR. Am încetat chiar să mai folosim instrumente pentru munca noastră internă de la alte companii care nu respectă GDPR, atât de mult înseamnă pentru noi.

Le pasă de lume? Da. Este în ADN-ul nostru. Plantăm copaci, derulăm programe comunitare, promovăm diversitatea din aplicația inițială, donăm organizații caritabile și multe altele. La naiba, suntem de 15x carbon negativ.

Revizuire TrustRadius:

2. AB Gustos

Evaluare G2: 4.5/5.0 (76 recenzii)

Preț: Începe de la 1900 USD/lună pentru 400.000 de vizitatori testați lunar pentru planul Essentials. Planul de creștere costă 3800 USD/lună, în timp ce planul Elite începe de la 5700 USD/lună.

Oferă un plan gratuit sau o probă? Nu. Puteți solicita un apel demonstrativ pentru a vedea noile lor funcții.

Cost pentru 100.000 de vizitatori: aproximativ 475 USD.

Pro:

• AI și ML integrate în optimizare
• Rulați experimente nelimitate
• Interfață de utilizator curată și ușor de utilizat
• Ușor de configurat și de previzualizare teste
• Widgeturi dinamice
• Integrari multiple
• Rapoarte ample de analiză
• Gamă largă de opțiuni de direcționare disponibile, împreună cu personalizare
• Suport de încredere pentru clienți
• Pretul este de gama medie

Contra:

• Nu există automatizări de marketing care să ofere informații despre performanța publicului (mai ales pentru un experiment activ) și uneori va necesita asistență pentru clienți pentru a vedea.
• Calculatorul de semnificație statistică este puțin de bază în UX
• Integrarea Google Analytics este complexă, necesită codificare
• Fără probă gratuită

Caracteristici de testare multivariată: Factorial complet

Partea client, partea serverului sau ambele? Ambii

Frecventist sau Bayesian? Bayesian.

Acceptă Full Stack? Da.

Core Web Vitals gata? Da. Acest instrument se încarcă rapid.

Are ML sau AI? Da.

Deservesc Enterprise? Da. Sunt instrumentul ales pentru companii precum Disney, L'Oreal, Kalviyo și altele.

Oferă asistență pentru clienți? Da. Au o bază de cunoștințe și chat live.

Le pasă de confidențialitate? Da. Adresele IP ale utilizatorului sunt folosite pentru a crea un cod de identificare și apoi sunt șterse imediat înainte de a trece în instrument. Codurile de identificare sunt anonimizate și apoi șterse după 13 luni.

Le pasă de lume? Ei donează direct ONG-urilor, lucrează cu grupuri de acțiune socială, reciclează și sponsorizează stupi.

Revizuire TrustRadius :

Cum arată acest instrument de testare multivariată în acțiune:

3. Google Optimize și Optimize 360

Evaluare G2: 4.3/5.0 (27 recenzii)

Preț : Există 2 versiuni ale acestui instrument. Optimize este gratuit, dar pentru funcții avansate, trebuie să optați pentru Google Optimize 360.

Prețul pentru Optimize 360 ​​este personalizat (deși se zvonește a fi în jur de 150.000 USD pe an). Pentru a obține prețul lunar, va trebui să completați un formular pentru a contacta echipa de vânzări.

Oferă un plan gratuit? Da.

Cost pentru 100.000 de vizitatori: N/A

Pro:

• Ușor de utilizat — sunt necesare puține cunoștințe tehnice
• Excelent pentru testerii A/B pentru prima dată
• Integrare rapidă cu Google Analytics
• Are o segmentare a publicului foarte detaliată, datorită resurselor uriașe de date ale Google

Contra:

• Limitat la 5 teste simultan pe nivelul gratuit
• Fără funcționalitate de editor drag-and-drop
• Nu se pot încărca imaginile dvs. direct
• Nu se pot testa aplicațiile, doar browserele
• Nu este potrivit pentru teste complicate
• UI/UX și rapoartele nu sunt la fel de atractive din punct de vedere vizual ca majoritatea instrumentelor de pe piață
• Pâlpâirea se întâmplă uneori.

Caracteristici de testare multivariată: Aparent Optimize folosește o abordare hibridă care nu este nici factorială completă, nici fracțională. Conform bazei lor de sprijin

„Modelele noastre ne permit să folosim o abordare hibridă, astfel încât nu trebuie să faceți acest compromis. Servim toate combinațiile unui test, astfel încât să puteți afla despre interacțiuni și cele mai bune combinații. Dar, modelăm și faptul că unele variante apar în combinații - și astfel putem învăța despre variante dintr-un factor, nu doar combinații.”

Partea client, partea serverului sau ambele? Ambii.

Frecventist sau Bayesian? Google Optimize folosește mai degrabă metode bayesiene decât metode frecventiste, cunoscute și sub numele de Testare a semnificației ipotezei nule (NHST).

Acceptă Full Stack? Da.

Core Web Vitals gata? Da. Acest instrument se încarcă rapid, deși poate pâlpâi, ceea ce ar putea cauza probleme CLS.

Are ML sau AI? Nu.

Deservesc Enterprise? Da, dar numai prin Optimize 360.

Oferă asistență pentru clienți? Au un centru de resurse cu sfaturi, tutoriale video, comunitate de ajutor și multe altele.

Le pasă de intimitate? Acestea respectă legile aplicabile privind protecția datelor în țările în care sunt utilizate produsele lor.

De asemenea, lucrează cu terți și autoritățile de protecție a datelor pentru a păstra datele utilizatorilor în siguranță.

Le pasă de lume? Google este neutru în carbon din 2007 și intenționează să fie fără emisii de carbon până în 2030. În afară de asta, sunt cunoscuți pentru numeroasele gesturi filantropice cu angajamentul lor de un miliard de dolari.

Revizuire TrustRadius :

Cum arată acest instrument de testare MVT în acțiune:

4. Adobe Target

Evaluare G2: 4.0/5.0 (29 recenzii)

Preț : disponibil numai după un formular din 11 părți, un e-mail și un apel. Rata de pornire este de 10.000 USD pe lună.

Oferă un plan gratuit sau o probă? Nu.

Cost pentru 100.000 de vizitatori: N/A

Pro

• Interfața este ușor de utilizat
• Oferă rapoarte precise de date în timp real
• Se integrează bine cu Adobe Analytics și este conceput ca o ofertă de vânzare în plus
• Instrumente de personalizare a site-ului web atât pentru începători, cât și pentru experți
• Vă ghidează prin procesul de configurare și testare
• Are IA avansată pentru a testa și îmbunătăți continuu campaniile și personalizarea

Contra

• Optimizarea la scară largă poate fi lentă
• Necesită un volum foarte mare de trafic pentru a funcționa cel mai bine
• Editorul bazat pe formular necesită o curbă de învățare
• Punct de preț ridicat
• Nicio opțiune de probă
• Funcționează cel mai bine atunci când utilizați deja Adobe Analytics
• Poate obține informații excelente atunci când este conectat la alte instrumente plătite Adobe Marketing Cloud

Caracteristici de testare multivariată: Factorial complet și Taguchi (ca metodă de factorial parțial).

Partea client, partea serverului sau ambele? Ambii.

Deservesc Enterprise? Da. Aproape exclusiv din cauza costului.

Oferă asistență pentru clienți? Da, sub forma unei baze de cunoștințe și a unor programe de instruire video.

Le pasă de confidențialitate? Da, dar în mod ironic, au nevoie de e-mailul și numărul de telefon pentru a afla mai multe despre asta. Cu toate acestea, lucrează mult în datele de la prima parte pentru urmărirea neintruzivă.

Le pasă de lume? Foarte mult. Ei susțin diversitatea, lucrează pentru clădiri 100% cu energie regenerabilă, scăderea emisiilor, derulează programe de acțiune comunitară și multe altele.

Revizuire TrustRadius :

Cum arată acest instrument de testare multivariată în acțiune:

5. Kameleoon

Evaluare G2: 4.7/5.0 (24 recenzii)

Preț : Personalizat în funcție de cerințele dumneavoastră. Obțineți prețul dvs. unic contactând echipa de vânzări.

Oferă un plan gratuit? Da.

Cost pentru 100.000 de vizitatori: N/A

Pro

• Urmărirea clicurilor ușor de configurat
• Integrare ușoară cu multe alte instrumente
• Are un editor WYSIWYG ușor de utilizat pentru non-dezvoltatori
• Tehnologie avansată anti-pâlpâire
• Echipa de suport bine informată și utilă
• Planificarea și executarea corectă și detaliată a testelor

Contra

• Editorul WYSIWYG se încarcă lent
• Tabloul de bord de raportare ar putea folosi ceva mai multă personalizare
• Aveți nevoie de abilități la nivel de dezvoltator pentru a implementa unele scenarii complexe
• Testele nu pot fi arhivate
• Browserele vechi precum IE7 sunt excluse din teste

Caracteristici de testare multivariată: factorial complet și factorial fracționar (prin alocări în configurarea testului).

Partea client, partea serverului sau ambele? Ambii. Puteți face modificări în editorul WYSIWYG și puteți utiliza editorul de cod încorporat Kameleoon pentru a edita CSS și JS.

Deservesc Enterprise? Da. Lexus, Unity, Providence, Toyota și Rakuten folosesc Kameleoon.

Oferă asistență pentru clienți? Da. Puteți chiar să obțineți un manager de cont dedicat care să vă asiste în proiecte complicate.

Le pasă de confidențialitate? Sunt conforme cu HIPAA, GDPR și CCPA. De asemenea, au o funcție flexibilă de gestionare a consimțământului pentru a vă adapta politica de confidențialitate pentru fiecare test A/B.

Le pasă de lume? Nu am putut găsi dovezi ale vreunei organizații caritabile pe care le sponsorizează sau ale cauzelor de mediu pe care le susțin. Deși, este interesant de știut că au doi cameleoni vii în birourile lor din Germania și Franța.

Revizuire TrustRadius :

Cum arată acest instrument de testare MVT în acțiune:

6. Optimizează

Evaluare G2: 4.3/5.0 (109 recenzii)

Prețuri : folosesc un model de preț personalizat. Dar Splitbase prevede că costă cel puțin 36.000 de dolari pe an.

Oferă un plan gratuit? Nu. Au oprit planul gratuit în 2018.

Cost pentru 100.000 de vizitatori : N/A

Pro:

• Rulați experimente nelimitate
• Interfață de utilizator curată și ușor de utilizat
• Funcția widget este distractiv de utilizat
• O gamă largă de opțiuni avansate de direcționare disponibile
• Suport de încredere pentru clienți

Contra:

• Nu oferă informații automate despre performanța publicului (mai ales pentru un experiment activ)
• Integrarea Google Analytics este complexă, necesită codificare
• Fragmentul Optimizely crește de obicei timpul de încărcare a paginii

Caracteristici de testare multivariată: Factorial complet, parțial și Taguchi.

Partea client, partea serverului sau ambele? Ambii. Optimizely oferă experimentare pe partea client printr-un fragment Javascript și experimentare pe partea server prin SDK-uri pentru dezvoltatori.

Frecventist sau Bayesian? Motorul de statistici al lui Optimizely folosește experimente secvențiale, nu experimentele cu orizont fix pe care le-ați vedea pe alte platforme.

Acceptă Full Stack? Da.

Core Web Vitals gata? Da, acest instrument se încarcă rapid.

Are ML sau AI? Da.

Deservesc Enterprise? Datorită prețurilor, se adresează în mare parte la nivel de întreprindere. O folosesc mărci precum Microsoft, IBM, HP, eBay, Yamaha, Pizza Hut și Atlassian.

Oferă asistență pentru clienți? Da. Au o bancă de resurse pentru a ajuta utilizatorii să se deblocheze și numere de telefon pentru a apela pentru ajutor 24/7.

Le pasă de confidențialitate? Ei iau în considerare legile vechi și noi de confidențialitate și le integrează în produsele lor, astfel încât dvs., utilizatorul, să nu vă faceți griji cu privire la conformitate.

Le pasă de lume? Majoritatea angajaților noi sunt trimiși să facă voluntariat în comunitate în a doua zi.

Revizuire TrustRadius :

Cum arată acest instrument de testare multivariată în acțiune:

7. SiteSpect

Evaluare G2: 4.4/5.0 (50 recenzii)

Preț : Va trebui să contactați SiteSpect pentru un preț personalizat în funcție de nevoile dvs.

Oferă un plan gratuit? Da, oferă o probă gratuită.

Cost pentru 100.000 de vizitatori: N/A

Pro:

• Acceptă toate limbajele de marcare (HTML, WML, XML și JSON), foi de stil și limbaje de scripting
• Fără etichetă javascript înseamnă că nu există reîmprospătare sau pâlpâire a conținutului
• Destul de versatil pentru a testa aproape orice scenariu
• Testare non-intruzivă
• Se integrează cu instrumentele de analiză
• Nu este nevoie să modificați versiunea de producție a codului dvs

Contra:

• Cunoștințe tehnice necesare pentru implementarea testelor
• Adaugă un hop suplimentar care ar putea încetini puțin site-ul
• Interfața de raportare ar putea fi mai bună

Caracteristici de testare multivariată: Factorial complet și factorial fracționat (instrumentul recomandă trecerea la fracțional dacă testați mai mult de 128 de combinații).

Partea client, partea serverului sau ambele? Ambii.

Frecventist sau Bayesian? SiteSpect folosește un test t cu două cozi atunci când compară variațiile cu controale pentru a determina punctul în care intervalele de încredere nu se suprapun și astfel indică semnificația. SiteSpect calculează, de asemenea, scorul z și îl folosește în rapoarte.

Acceptă Full Stack? Da.

Core Web Vitals gata? Da. Acest instrument este incredibil de rapid.

Are ML sau AI? Da.

Deservesc Enterprise? Da. Staples, PetSmart, AmericanGirl și Urban Outfitters folosesc SiteSpect.

Oferă asistență pentru clienți? Asistența pentru clienți este disponibilă prin apel telefonic și e-mail pentru versiuni gratuite și plătite. Există, de asemenea, webinarii preînregistrate disponibile în baza lor de cunoștințe.

Le pasă de confidențialitate? Ei fac. Sunt certificate PCI DSS 3.2; Conform GDPR, CCPA și scutul de confidențialitate și gata HIPAA.

Le pasă de lume? SiteSpect este cunoscut pentru sponsorizarea unor proiecte caritabile din 2014.

Revizuire TrustRadius :

Cum arată acest instrument de testare multivariată în acțiune:

8. Testarea VWO

Evaluare G2: 4.2/5.0 (239 recenzii)

Preț : Începe de la 99 USD/lună. Orice altceva necesită prețuri personalizate în funcție de nevoile dvs. Și va trebui să contactați echipa de vânzări VWO pentru a dvs.

Oferă un plan gratuit? Da, puteți începe cu o încercare gratuită de 30 de zile.

Cost pentru 100.000 de vizitatori: ~500 USD

Pro:

• Opțiuni flexibile de personalizare pentru a vă adapta testul la o mulțime de scenarii
• Ușor de planificat și executat teste cu puține cunoștințe de codare
• Echipa de asistență dedicată pentru a vă ghida prin orice provocări
• Are capacitatea de a urmări obiectivele pe termen lung
• Abilitatea de a grupa testele împreună
• Înregistrări utile pentru observarea utilizatorilor și depanare

Contra:

• Există o curbă de învățare pentru a înțelege funcționalitatea completă a VWO
• Planurile de prețuri se schimbă frecvent
• Ei testează doar partea clientului

Funcții de testare multivariată: Factorial complet (deși puteți seta procente de trafic pe variație de pagină).

Partea client, partea serverului sau ambele? Doar partea clientului.

Deservesc Enterprise? Da. Printre clienții lor se numără Ubisoft, AMD, Penn Foster, Optimeria și IMB Bank.

Oferă asistență pentru clienți? Da, îi poți suna când ai nevoie de ajutor. Sau consultați pagina lor de resurse.

Le pasă de confidențialitate? Da. Acestea respectă legile și reglementările majore privind confidențialitatea, dar stochează unele date despre vizitatori pe serverele lor.

Le pasă de lume? Recent, președintele Wingify (marca din spatele VWO) Paras Chopra, și-a postat pe Twitter sprijinul pentru câteva inițiative de asistență COVID, inclusiv înființarea unei unități de îngrijire COVID cu 10 paturi în Delhi.

Revizuire TrustRadius :

Cum arată acest instrument de testare MVT în acțiune:

9: Webtrends Optimize

Evaluare G2: 4.9/5.0 (107 recenzii)

Preț : Începe de la 212 USD pe lună, dar poate fi mai mic sau mai mare în funcție de ceea ce aveți nevoie. Au o structură de prețuri foarte flexibilă, dar trebuie să discutați cu echipele de vânzări pentru a vă confirma prețul.

Oferă un plan gratuit? Da, pentru mai puțin de 1.500 de ședințe pe lună.

Cost pentru 100.000 de vizitatori: N/A

Pro:

• Ușor de utilizat, potrivit pentru utilizatorii non-tehnici cu un editor WYSIWYG
• Sprijină colaborarea în echipă
• Oferă perspective bazate pe date
• Echipa de asistență arată un interes real pentru succesul dvs
• Integrare ușoară cu site-ul dvs. web și instrumentele existente
• Rapoarte clare și directe

Contra:

• Interfața de utilizare poate fi dificil de utilizat pentru utilizatorii noi
• Este nevoie de timp pentru a configura chiar și teste simple
• Costul serviciului complet este unul ridicat

Caracteristici de testare multivariată: factorial complet și factorial fracționat.

Partea client, partea serverului sau ambele? Ambii. Au un editor vizual fără proxy pentru redarea pe partea clientului și capabilitățile de testare pe partea serverului.

Deservesc Enterprise? Microsoft, London North Eastern Railway, Marks and Spencer și Virgin Wines folosesc Optimize.

Oferă asistență pentru clienți? Da. Aveți acces la asistență tehnică, instruire și propriul consultant dedicat pentru optimizarea conversiilor.

Le pasă de confidențialitate? Sunt pe deplin conforme GDPR.

Le pasă de lume? În aprilie 2021, Webtrends Optimize s-a provocat să facă 100 de push-up-uri pe zi într-un eveniment GoFundMe pentru a strânge fonduri pentru Cancer Research UK. Și au făcut ceva similar în 2020 numit Xmas Charity Donations. Deci, le pasă.

Review Radius de încredere :

Deși există recenzii pe Trust Radius pentru acest instrument, cea mai recentă a fost decembrie 2019 și înainte de 2018. Deoarece un instrument se poate schimba, la fel și serviciul, am scos cea mai recentă recenzie a lor de la G2.

Cum arată acest instrument de testare multivariată în acțiune:

Concluzie

Deci iată-l.

Lista noastră cu cele mai bune instrumente de testare A/B care oferă testare multivariată în 2021. De asemenea, arătăm ce metodă folosesc pentru a testa, caracteristicile, prețurile și recenziile lor.

Acum puteți compara cele mai bune instrumente multivariate pentru acești parametri diferiți și puteți alege unul care ar funcționa cel mai bine pentru nevoile dvs. de testare.