Cum să testați A/B pe site-uri cu trafic redus

Avertisment de declanșare:

Știm că există o mulțime de dezbateri în jurul semnificației statistice, marcajului mitic de 95% (sau nu?), testării și traficului și multe altele.

Dacă sunteți un optimizator care simte cu tărie aceste lucruri, s-ar putea să fiți declanșat. Ei bine, comentariile sunt deschise și putem avea o conversație cu adevărat lămuritoare.

Sa incepem!

Testarea nu funcționează pentru site-urile web cu trafic redus.

Asta e sigur.

Deoarece pentru a obține informații semnificative din punct de vedere statistic, trebuie să afișați variantele experimentului pentru (cel puțin) mii de utilizatori.

De fapt, la Convert Experiences, recomandăm adesea utilizatorilor noștri să execute teste A/B – care sunt cele mai simple experimente CRO – numai dacă pot trimite aproximativ 10.000 de vizitatori la fiecare variantă.

De asemenea, vă sugerăm să înregistrați aproximativ 1000 de conversii pentru a obține dovezi concludente ale superiorității controlului sau variantei.

Acest tip explică de ce CRO nu este un tip de piață pentru un milion de clienți, deoarece există doar câteva 100.000 de site-uri web (sau afaceri) cu un pas de testat cu succes și bugetele pentru soluțiile de optimizare costisitoare („întreprinderi”). !

Ar trebui site-urile cu trafic redus să excludă testarea?

Având în vedere că o afacere mică în medie primește doar câteva sute de vizitatori pe zi pe site-ul său, experimentele de testare A/B nu au sens pentru ei.

Dar:

Asta nu înseamnă că o afacere mică nu poate efectua deloc experimente.

De fapt, există multe experimente pe care chiar și o mică afacere le poate derula.

Și există multe beneficii în a le rula.

De exemplu, dacă dețineți o afacere mică, desfășurarea de experimente vă va ajuta să treceți de la luarea deciziilor bazată pe instinct, la luarea deciziilor bazată pe date. Vă va forța să vă uitați la date... și, cu numerele în față, veți înceta să utilizați în mod implicit strategiile * cred *. Numai această abordare bazată pe date va transforma modul în care vă construiți și vă dezvoltați afacerea.

Derularea de experimente vă va învăța, de asemenea, să învățați încercând, mai degrabă decât acceptând status quo-ul. Te va inspira să vezi dacă principiile despre care se crede că funcționează într- adevăr pentru tine.

În cele din urmă, desfășurarea experimentelor vă va pregăti pentru un CRO „adevărat” atunci când aveți trafic „suficient” , deoarece vă ajută să dezvoltați mentalitatea potrivită pentru testare - o condiție prealabilă pentru CRO eficient.

Așa că începeți să desfășurați orice experimente puteți pe orice canale de marketing pe care le utilizați. Iată câteva dintre opțiunile dvs.

Testare cu e-mail

În mod surprinzător, marketingul prin e-mail este un canal care vă permite să experimentați cu idei diferite, fără a avea nevoie de tone de abonați (sau „contacte”).

"Spune cine?"

Spune fiecare furnizor de software de marketing prin e-mail chiar de la MailChimp, ConstantContact și Campaign Monitor până la HubSpot (care acceptă marketingul prin e-mail în software-ul său de automatizare a marketingului).

Să începem cu HubSpot.

Deci, dacă doriți să efectuați un test A/B folosind platforma de e-mail HubSpot, tot ce aveți nevoie sunt 1.000 de contacte: 1.000 de contacte este, de asemenea, punctul nostru de referință pentru efectuarea de teste A/B pe mostre de e-mailuri trimise. — HubSpot

Campaign Monitor spune, de asemenea, că puteți rula teste A/B chiar și cu liste mici de e-mailuri. Iată matematica din spatele ei:

Acum, s-ar putea să vă gândiți: „Dimensiunea listei mele este de doar 500 de abonați, cum vă așteptați să rulez un test cu succes?” Răspunsul meu este că va trebui să vă puneți ochii pe un MDE mai mare [Efect minim detectabil (MDE)]. Când creșteți MDE, dimensiunea necesară a eșantionului scade. Deci, în loc să aveți nevoie de 592 de abonați per variație pentru a detecta un efect relativ de 20%, veți avea nevoie doar de 94 de abonați per variație pentru a detecta un efect relativ de 50%. Rețineți că rata de conversie de bază joacă, de asemenea, un rol în dimensiunea eșantionului dvs. – cu cât rata de conversie este mai mică (în acest caz, %), cu atât veți avea nevoie de mai mulți abonați pentru a efectua un test precis. — Monitorul campaniei

Deci, dacă ai vreo 500 sau 1000 de abonați, ești bine să testezi, cu condiția să ai o bază de date responsive care să fie interesată de ceea ce ai de spus.

Cu toate acestea, câțiva furnizori de e-mail marketing recomandă o bază de contact puțin mai mare.

De exemplu, furnizorul de soluții de marketing prin e-mail ConstantContact recomandă o dimensiune mai mare a eșantionului, de două ori dimensiunea minimă pe care HubSpot o permite. Acesta sugerează că pentru testarea A/B semnificativă, dimensiunea eșantionului trebuie să fie de cel puțin 1.000 de contacte. Deci, dacă aveți 2000 de abonați, ar trebui să fiți bine să testați (versiunile dvs. A și B obțin fiecare 50% din totalul de contacte ca trafic de testare).

Pentru testarea liniei de subiect, vă recomandăm să testați fiecare linie pe o dimensiune a eșantionului de cel puțin 1.000 de contacte, dacă este posibil. 1.000 de utilizatori pentru fiecare versiune este de obicei un punct de referință bun pentru orice test A/B, dar dacă nu aveți suficiente contacte sau vizitatori pentru a atinge acele numere, merită totuși să rulați testul. — ConstantContact

MailChimp recomandă, de asemenea, liste ceva mai mari pentru a rula teste A/B. Acesta sugerează că trebuie să aveți cel puțin 5.000 de contacte pentru a rula teste. Dar, deoarece atât de multe baze de contact pentru afaceri mici sunt mult mai mici decât atât, recomandă testarea ideilor pe lista completă:

Vă recomandăm să trimiteți combinații la cel puțin 5.000 de persoane de contact abonate pentru a obține cele mai utile date din test. Dacă dimensiunea listei sau a segmentului dvs. nu permite 5.000 de abonați în fiecare combinație, luați în considerare testarea întregii liste și folosiți rezultatele campaniei pentru a informa deciziile viitoare privind conținutul campaniei. — MailChimp

Deși este adevărat că având o dimensiune uriașă a eșantionului, vă va ajuta să ajungeți la semnificația statistică mult mai devreme (și cu mult mai multă încredere), dar puteți începe să testați și cu lista dvs. mică!

Iată peste 150 de idei de testare a împărțirii e-mailurilor pentru campaniile tale de e-mail.

De asemenea, iată un ghid rapid despre testarea A/B prin e-mail.

Testare cu Social Media

Rețelele sociale sunt un alt canal care vă permite să vă testați ideile, indiferent cât de mici ar fi urmărirea dvs. În plus, într-un fel, pe rețelele de socializare, nimic nu vă limitează efectiv raza de acțiune.

Așa că, de exemplu, la Convert Experiences, chiar și noi nu avem zeci de mii de urmăritori, totuși minunatul nostru Social Seller continuă să experimenteze cu elemente ale copiei noastre din rețelele sociale, cum ar fi hashtag-urile, imaginile și multe altele.

Iar testele ei ne aduc niște câștiguri grozave. De exemplu, experimentul ei folosind un anumit set de hashtag-uri ne-a câștigat odată un retweet de la Google Analytics!

Acum, aceasta este o expunere pe rețelele sociale, nu-i așa?

Ai putea spune că este ușor să respingi câștigurile rapide ca (poate) întâmplări DAR când vezi că un set de hashtag-uri câștigă în mod obișnuit mai multă expunere decât celelalte împotriva cărora le testezi, ai mai mult decât un rezultat al testului... ceea ce ai este o tendință. .

Puteți rula o serie de teste A/B pentru rețelele sociale pentru a descoperi astfel de tendințe și pentru a vă crește performanța rețelelor sociale. Am publicat aici un ghid excelent despre testarea A/B a rețelelor sociale. Citiți-l pentru a afla cum puteți începe cu testarea A/B pentru rețelele sociale, diferitele teste A/B pentru rețelele sociale pe care le puteți rula și cele mai bune practici de testare A/B pentru rețelele sociale de care trebuie să aveți în vedere.

Testare A/B cu anunțuri plătite (PPC)

La fel ca canalele de marketing prin e-mail și social media, canalul de marketing PPC vă permite, de asemenea, să experimentați cu copiile dvs. de anunțuri și cu toate celelalte elemente ale campaniilor dvs. publicitare.

Fie că este vorba de reclame Google Adwords sau Facebook, majoritatea rețelelor plătite acceptă experimente, astfel încât să puteți obține cea mai mare rentabilitate a investiției.

Dar pentru a obține rezultate semnificative din punct de vedere statistic din experimentele dvs. PPC, aveți nevoie de câteva mii de afișări pentru fiecare copie publicitară. Google recomandă testarea grupurilor de anunțuri care înregistrează cel puțin 5000 de afișări/săptămână.

Deci, cât costă câteva mii de afișări de anunțuri?

Depinde foarte mult de platformă și de industrie (printre alți factori), dar există date care vă ajută să faceți bugetul.

De exemplu, AdStage a analizat peste 110 milioane de afișări de anunțuri (pe Google Adwords) în T1 2018 și a constatat că, în medie, aveți nevoie de 116,91 USD pentru a obține o mie de afișări (CPM) pe Google Ads. Anul trecut, a fost cu aproximativ 13% mai ieftin .

Rețelele de socializare precum Facebook oferă și opțiuni CPM accesibile.

Datele din cercetarea Statista afirmă că CPM-ul mediu (cost-pe-mile sau cost pe 1.000 de afișări) pentru Facebook este de 1,26 USD. Alte estimări ale costurilor medii CPM Facebook de la AdExpresso și WordStream se încadrează în intervalul 7-10 USD.

Chestia este că puteți începe să testați copii de anunțuri chiar și cu un buget limitat.

Un mod (aproape) „rezistent la trafic” de a experimenta: personalizarea

Personalizarea sau personalizarea experienței unui vizitator pe site-ul web pe baza a ceea ce știți despre el este o altă formă comună de experimentare.

Cea mai bună parte a personalizării este că chiar și site-urile web cu trafic redus pot funcționa cu ele, deoarece constrângerile de trafic care se aplică testelor CRO nu se aplică personalizării.

Motivul din spatele acestui lucru este că, prin personalizare, obiectivul final nu este optimizarea ratelor de conversie. În schimb, scopul său este de a oferi o experiență de utilizator mai relevantă, care să conducă la mai multe conversii sau la o mai mare satisfacție și reținere a clienților.

De exemplu, puteți crea diferite versiuni ale paginii de produs pentru a le afișa clienților și non-clienților (sau clienților potențiali).

Pe pagina de produs pentru clienții dvs., puteți afișa conținut precum ghiduri de produse și videoclipuri, link-uri rapide pentru a accesa asistență și multe altele, astfel încât aceștia să aibă o experiență de produs mai plină de satisfacții. În timp ce versiunea pe care o afișați clienții potențiali – de exemplu, cei care s-au înscris pentru o încercare – s-ar putea concentra pe caracteristicile produsului sau studiile de caz pentru a-i ajuta să convertească.

Aproximativ 93% dintre companii văd conversii mai bune cu personalizarea.

Și puteți începe imediat cu personalizarea.

În plus, cu un instrument precum Convert Experiences, puteți configura experiențe personalizate de site-uri web în câteva minute. Doar setați regulile de direcționare și veți putea afișa mesaje personalizate diferitelor dvs. segmente de public, determinând fiecare segment să treacă la următoarea etapă a călătoriei sale de cumpărare.

Încheind-o…

Deși traficul scăzut de pe site vă poate împiedica să efectuați experimente CRO substanțiale, acesta nu vă poate împiedica să „învățați”.

Și asta este important - pentru că odată ce vă mutați atenția către învățare încercând mai degrabă decât acceptând norma, veți începe să dezvoltați cultura experimentării, o condiție prealabilă pentru CRO eficientă.

Nu contează în ce stadiu de creștere vă aflați, puteți investi în dezvoltarea unei culturi a testării. Vă va fi util atunci când aveți de fapt suficient trafic către site-ul dvs. pentru a merge la experimente CRO definitive.