Gdzie powinieneś zainwestować większość swojego budżetu testowego?

Opublikowany: 2021-07-01
Gdzie powinieneś zainwestować większość swojego budżetu testowego?

Właśnie dostałeś budżet na program testów A/B i nie wiesz, w co najpierw zainwestować.

Czy to narzędzie? Agencja? A może cały zespół testowy?

Zalecamy, aby najpierw zainwestować w swój zespół, aby uzyskać długoterminowe korzyści. Ponieważ bez utalentowanych kierowców za kółkami żadne narzędzie nie przyniesie zyskownych wyników. A agencje będą po prostu więcej kosztować.

Jeśli jednak chcesz poznać pełen zakres swoich opcji, musisz zważyć swoją strategię i cele i zobaczyć, która z nich najlepiej pasuje do nich.

Odkryjmy…

ukryć
  • Czy powinieneś zatrudnić agencję, czy prowadzić CRO we własnym zakresie?
    • Ile zainwestować w zespół testujący A/B?
  • A co, gdybyś chciał prowadzić własne CRO? Gdzie powinieneś zainwestować swój budżet na testy A/B?
    • 1. Najpierw zdobądź swoje narzędzia do testowania A/B
    • 2. Zatrudnij i zainwestuj w dedykowanego testera
    • 3. A potem ich trenuj!
    • 4. Stwórz depozyt nauki i kulturę testowania
    • 5. Usprawnij swoje procesy
      • Faza 1: Zbierz wstępne spostrzeżenia (aby odkryć problemy lub możliwości)
      • Faza 2: Przygotuj plan testów i udowodnij wykonalność
      • Faza 3: Przygotuj bardziej szczegółowy plan projektu
      • Faza 4: Uruchom i uruchom test
      • Faza 5: Przygotuj raport z testu
    • 6. Popraw jakość swoich danych
    • 7. Dodaj dodatkowe wsparcie do zespołu testującego
    • 8. Zacznij budować testy w innych zespołach
    • 9. Dodaj narzędzia do pomiaru doświadczenia klienta
    • 10. Unikaj pułapki łączenia eksperymentów z przychodami
  • Wniosek

Czy powinieneś zatrudnić agencję, czy prowadzić CRO we własnym zakresie?

Szczerze mówiąc, to zależy.

Agencje są świetne, ponieważ mają doświadczenie i możesz im przekazać prawie cały proces testowania.

Jeśli masz około 10 000 odwiedzających miesięcznie i po prostu chcesz jak najszybciej zacząć odnotowywać wzrost w bieżących kampaniach, najlepszym wyborem jest współpraca z agencjami, jeśli dysponujesz odpowiednim budżetem.

Ile zainwestować w zespół testujący A/B?

Prawdopodobnie mógłbyś znaleźć na Fiverrze ludzi, którzy twierdzą, że mają wiedzę na temat CRO, ale trzymałbym się z daleka.

Średnie koszty wahają się od 2 tysięcy dolarów miesięcznie dla freelancera do 8 tysięcy miesięcznie dla małej agencji lub nawet 25 tysięcy miesięcznie dla agencji najwyższej klasy z dedykowanym zespołem.

Właściwie mamy tutaj całą listę polecanych agencji.

Konwertuj certyfikowanych partnerów
Mamy 38 certyfikowanych partnerów agencyjnych, których zalecamy, aby pomóc Ci rozwinąć Twój biznes dzięki testom.

Jasne, agencje nie są tanie, ale pamiętaj: CRO to bardzo wymagająca, wysoko wykwalifikowana rola z prawie gwarantowanym zwrotem z inwestycji w czasie.

W rzeczywistości nasze dane pokazują, że agencje mają tendencję do uzyskiwania średnio większej liczby zwycięskich testów podczas prowadzenia takiej samej liczby kampanii w porównaniu z zespołami wewnętrznymi. Dzieje się tak, ponieważ postępują zgodnie z procesem „najpierw największe wygrane” i mają większe doświadczenie w tym, gdzie mogą wywrzeć na ciebie największy wpływ.

Konwertuj agencje testujące A/B a wewnętrzny ekspert
W badaniu obejmującym 28 000 użytkowników Convert agencje odnotowały o 21% więcej zwycięstw niż zespoły wewnętrzne.

To doświadczenie sumuje się i pomaga szybko uzyskać wyniki.

Porównaj to z początkującymi testerami, którzy mogą mieć problemy, ponieważ koncentrują się na małych działaniach i ulepszeniach.

Powiązane: 43 niezbędne narzędzia CRO na rok 2021 (sprawdzone dla agencji CRO)

Nie oznacza to jednak, że agencje są zawsze najlepszym wyborem. Wyniki wewnętrzne mogą naprawdę przyspieszyć, gdy zespół „dojrzeje”. Wtedy jest bardziej prawdopodobne, że zauważysz wyższy zwrot z inwestycji z wewnętrznych testów, po prostu dlatego, że działasz na większej ilości danych i stajesz się firmą opartą na danych, która zna swoich odbiorców i produkt.

Wystarczy spojrzeć na firmy takie jak Booking.com, które skupiają się na CRO w całej firmie, aby zobaczyć, jak bardzo może to wpłynąć na Twój rozwój.

Harvard Business Review napisał studium przypadku na temat tego, jak Booking.com stał się największą na świecie platformą noclegową dla podróżnych, wszystko z testów.

Co zrobić, jeśli nie masz 2k-25k na wynajęcie agencji? Co zrobić, jeśli nie chcesz tylko podnieść się dzisiaj, ale także stać się „opartym na danych”, firmą, która podejmuje wszystkie swoje działania w oparciu o informacje od swoich odbiorców?

Wtedy będziesz chciał zacząć prowadzić CRO we własnym zakresie.

Testy wewnętrzne to świetne miejsce na rozpoczęcie, jeśli:

  • Potrzebujesz większego wzrostu w bieżących testach przy niższych kosztach niż agencja.
  • Są małym i średnim przedsiębiorstwem, które może nie być w punkcie, który kwalifikuje się do kryteriów agencji. (Ruch/budżet itp.)
  • Jeśli chcesz mieć możliwość skalowania i rozwoju w czasie oraz budowania kultury testowania w całej firmie.

Może to być trochę mylące, jeśli dopiero zaczynasz, więc w tym przewodniku pokażę Ci, gdzie powinieneś wydać budżet na testy A/B.

A co, gdybyś chciał prowadzić własne CRO? Gdzie powinieneś zainwestować swój budżet na testy A/B?

Pamiętaj, że to wszystko jest subiektywne, ale dokładnie tak postępowałbym, gdybym miał budżet na testy A/B i chciał rozpocząć CRO dla firmy, a następnie wykorzystać ROI i uzyskane z niego spostrzeżenia do dalszych inwestycji.

Listę tę oparłem na kilku kryteriach:

  • Jaka jest główna potrzeba lub priorytet wykonywania testów?
  • Czego potrzebujesz, zanim będziesz mógł zrobić następny krok?
  • W jakie nawyki, narzędzia i programy powinieneś zainwestować, aby rozwinąć swój zespół testowy, w oparciu o najbardziej „dojrzałe” firmy? (Ci, którzy prowadzą grę i zarabiają 500 milionów dolarów rocznie, głównie dzięki wykorzystaniu danych).

Jeśli nie wiesz, co oznacza dojrzałość w kontekście CRO, mówimy o tym, jak skomplikowana lub zainwestowana w CRO jest Twoja firma. Od kogoś, kto zaczyna i przeprowadza podstawowe testy, po firmę, która dokonuje każdego wyboru na podstawie swoich wyników.

Przeprowadzę Cię przez każdą część, dlaczego jest to ważne i kiedy w nią zainwestować.

Więc podzielmy to wszystko…

1. Najpierw zdobądź swoje narzędzia do testowania A/B

Najważniejszą rzeczą, w którą możesz zainwestować, są Twoi ludzie. Nie da się jednak przeprowadzić testu bez narzędzi, prawda?

Idealnie, patrzysz na 3 rodzaje narzędzi:

  • Analytics w Twojej witrynie, aby śledzić bieżące dane. Może to być Google Analytics lub dowolny inny. (Uwaga: należy również śledzić bieżące współczynniki konwersji i być w stanie zobaczyć, skąd pochodzi sprzedaż przed rozpoczęciem testów).
  • Narzędzie do testowania ilościowego, które może dokładnie mierzyć działania podejmowane przez ludzi, takie jak nasza aplikacja Convert. Poda ci liczby, kto podjął jakie działania i jak poprawił się lub zmniejszył, lub po prostu nie wprowadził żadnych zmian. Bez tego nie możesz niczego przetestować. Dzięki niemu możesz zacząć dokonywać mądrych wyborów.
  • Narzędzie jakościowe, dzięki któremu możesz następnie spróbować zrozumieć te dane, takie jak Hotjar lub inne. Pozwoli ci to na ankietę wśród odbiorców, zobaczenie, gdzie poruszają myszą, zobaczenie, czy mają problemy z klikaniem, itp. Najlepszym scenariuszem jest uzyskanie narzędzia QA, które integruje informacje bezpośrednio z narzędziem ilościowym.

CRO polega na mierzeniu wyników, rozwiązywaniu problemów, a następnie próbach ich naprawiania i ulepszania. Nie możesz tego zrobić, jeśli nie możesz śledzić i mierzyć danych.

Teraz nadal trzeba płacić za narzędzia, które mają różne koszty i zakres dodatkowych funkcji. Rozkładamy tutaj, jak kupić narzędzie do testowania A/B, oraz koszt narzędzi do testowania A/B tutaj.

(Pokazujemy nawet, jak analizować, czy płacisz za dużo za swoje obecne narzędzie i jak przejść na nowego dostawcę w trakcie trwania umowy).

Tak więc najpierw narzędzia, ale pamiętaj, że każde narzędzie jest tak dobre, jak osoba, która go używa…

2. Zatrudnij i zainwestuj w dedykowanego testera

Większość testów, które przeprowadzisz, zakończy się niepowodzeniem.

To nie jest zła rzecz, ponieważ udowadniasz, co działa, a co nie, i zdobywasz kolejne wygrane, unikając strat.

Posiadanie dedykowanego pracownika, który prowadzi Twoje testy , daje Ci możliwość biegania więcej, uczenia się więcej i szybszego rozwoju. Heck, możesz nawet wykorzystać tę wiedzę, aby ulepszyć produkty i doświadczenia.

Rzecz w tym, że wiele firm, które dopiero zaczynają testować, próbuje dodać to do roli obecnego pracownika. Nie zdejmuj swojego marketera z projektów i zamień go w 1% testera.

Dlatego większość ludzi uważa, że ​​CRO nie działa dla nich. Przeprowadzili kilka testów i skupili się na niewłaściwych rzeczach, a nawet źle odczytali dane.

Nie oszczędzaj tutaj. Jeśli uda Ci się zdobyć testera we własnym zakresie, będzie to jedna z najlepszych długoterminowych inwestycji, jakie możesz zrobić i bez niego nie możesz zajść dużo dalej.

3. A potem ich trenuj!

#narzędzia zespołu

W ostatecznym rozrachunku narzędzie do testowania A/B jest tak dobre, jak ludzie z niego korzystający. Zawsze będzie przypisywać użytkowników losowo zgodnie z ustawionymi parametrami. I chociaż to oznacza zwycięzców dla Ciebie, najlepiej jest dobrze znać podstawy statystyki, aby przeprowadzić pomyślne testy A/B.

Trina Moitra, Convert.com

Gdy już zdobędziesz testera, poświęć czas na jego przeszkolenie! Testy, które możesz przeprowadzić, i wgląd, jaki możesz uzyskać, zależą od doświadczenia testera.

Bez tego mogą:

  • Skonfiguruj rzeczy nieprawidłowo,
  • Zmagaj się ze znalezieniem pomysłów na testy,
  • Wymyśl niesprawdzoną hipotezę,
  • Nie przeprowadzaj testu wystarczająco długo,
  • Źle przeczytaj dane i przegap wygraną,
  • Przeczytaj to źle i wdrażaj przegranych,
  • Przetestuj niewłaściwą rzecz lub gorzej,
  • Nie testować czegoś, co powinno być…

…i więcej. Przygotowaliśmy listę najczęstszych błędów w testach A/B, które możesz popełnić, oraz sposobów ich naprawienia.

Nie wszystko działa tak, jak myślimy, że powinno. Najlepsze praktyki dotyczące projektowania stron internetowych mogą działać, ale nie zawsze…

Początkujący tester mógł tego nie przetestować lub nawet nie pomyśleć, że to przetestował. Mogą po prostu prowadzić kampanie na określonych stronach i nie sprawdzać tych danych. Dlatego tak ważne jest, aby wyszkolić je, aby nauczyły się WSZYSTKICH tajników testowania.

Więc gdzie możesz ich trenować?

Istnieje fantastyczny program CXL Institute, skupiony wyłącznie na testach CRO i A/B.

Uwaga dodatkowa: gdy zostaniesz klientem Convert, zapewnimy Ci dostęp do szkolenia CXL.

Jest niesamowicie dogłębny i stworzony przez jednych z najmądrzejszych testerów. Gorąco polecam.

Nie tylko da twojemu testerowi zrozumienie wszystkich elementów testowania, ale pomoże mu w ustaleniu priorytetów tych dużych obszarów wpływu, nad którymi należy najpierw pracować, oraz typów testów, które będą miały znaczenie.

Gdy Twój tester to wszystko zrozumie, pomoże mu to w ustaleniu solidnej strategii testów A/B.

TL; DR

Poświęć czas i zainwestuj w szkolenia, aby podnosić umiejętności członków swojego zespołu. Im więcej się uczą, tym lepiej dostają i tym lepszy zwrot dla Ciebie.

Pamiętaj: dane są bez znaczenia, jeśli nikt nie wie, co to znaczy, prawda?

4. Stwórz depozyt nauki i kulturę testowania

Jest to ważne, jeśli chcesz skalować, organizować się, zdobywać poparcie menedżerów, szybko rozwiązywać błędy i budować kulturę testowania w swojej firmie.

Mówiliśmy o tym w innym poście, ale pozwólcie, że tutaj szybko przypomnę. Repozytorium edukacyjne to baza danych wszystkich Twoich wcześniejszych testów.

To pokazuje:

  • Każdy test, który kiedykolwiek przeprowadziłeś,
  • Strona, którą testowałeś,
  • Jaka była twoja hipoteza,
  • Test i to, co zmieniłeś (w tym kontrola i odmiana)
  • Wynikająca zmiana w podnoszeniu, spadku lub jeśli pozostaje taka sama,
  • Zmiana średniej wartości zamówienia. (Albo dodatnie zyskały, a jeśli ujemne, pokazujące pieniądze zaoszczędzone dzięki niewprowadzaniu ich na żywo.)
  • Twoje przemyślenia na temat tych wyników. (Czy doprowadziło to do nowych spostrzeżeń itp.)

Coś się zepsuło w Twojej witrynie?

Posiadanie repozytorium zawierającego wcześniejsze problemy pomoże Twojemu zespołowi znacznie szybciej znajdować i naprawiać problemy.

Chcesz szkolić nowych ludzi?

Posiadanie wszystkich informacji w jednym miejscu pozwala Twojemu testerowi uczyć się na podstawie wcześniejszych testów.

Uzyskaj lepsze wpisowe!

Przedstawianie takich informacji ułatwia wykonanie testów swojemu szefowi i udowodnienie wartości CRO.

Zbuduj kulturę testowania

Mówiąc o wpisowym, możesz nawet wykorzystać te testy do zbudowania kultury testowania w firmie. Podziel się zdjęciami obok siebie i hipotezą ze swoim zespołem i zobacz, czy mogą odgadnąć, który z nich wypadł najlepiej. Udostępnij wyniki później.

To sprawia, że ​​ludzie są podekscytowani CRO. Zwłaszcza jeśli większość ludzi uważała, że ​​test się nie powiódł, tylko po to, by zobaczyć, że wygrał. To pomaga im dostrzec, że nie wszystko dotyczy opinii.

Możesz także pomóc im ulepszyć się w obszarach, o których nigdy nie pomyśleli! (Wyobraź sobie, że dowiedziałeś się, że pewne słowa i kąty lepiej łączą się z odbiorcami, a wtedy zespół obsługi klienta, copywriting i reklama dowiedział się o tym i o wpływie, jaki może to mieć.)

Jednak ekscytacja nie wystarczy, aby całkowicie usunąć uprzedzenia i stworzyć w Twojej firmie trwałą kulturę testowania.

Nie jest to tak skuteczne, jak zaangażowanie kierownictwa wyższego szczebla — ostatecznych decydentów — w rozwijanie kultury eksperymentowania.

Widzisz, testowanie od silosowania nie działa tak dobrze, ponieważ wymaga znacznie innego zestawu umiejętności. Ale jeśli ściśle współpracujesz z kierownictwem, aby przedstawić solidne powody do testowania, stopniowo przyjmą one trwałe testy i praktyki podejmowania decyzji oparte na danych.

Jak możesz zaprezentować te testy i przekonać kierownictwo?

Istnieje fantastyczna strona, którą możesz modelować o nazwie GuessTheTest.

Został zaprojektowany, aby pomóc testerom w zdobyciu pomysłów, a także pomóc im poprawić ich umiejętności w zakresie hipotez. Witryna działa, pokazując wiele testów A/B, a czytelnik może odgadnąć, który wariant wygrywa.

Konwertuj kompilację kultury testów A/B we własnym zakresie
Źródło

Regularnie zawierają różne testy A/B, które można kliknąć, a następnie zobaczyć wyniki, ile osób odgadło to dobrze lub źle, ale także dane za testem, co zostało przeprowadzone i jak został przekonwertowany ze zwycięzcą.

Jest to bardzo pomocne dla testerów, ponieważ pomaga nam również kwestionować własne opinie.

To samo możesz zrobić, aby zbudować kulturę testowania we własnej firmie i nic Cię to nie kosztuje. Nie musisz budować strony internetowej takiej jak GuessTheTest. Zamiast tego możesz po prostu podzielić się tym, co już robisz, z obrazami i informacjami, które umieszczasz w swoim repozytorium.

Wyślij firmowy e-mail z kontrolką i wariantem i poproś ludzi o głosowanie na to, co ich zdaniem wygrało. Następnie wyślij e-mail uzupełniający z wynikami testu, hipotezą i wszelkimi spostrzeżeniami.

Upewnij się, że zaangażowałeś w to ćwiczenie swój zespół zarządzający. Albo przynajmniej opowiedz im historię od początku do końca. Niech zobaczą, jak błędne mogą być opinie. Będziesz zachwycony tym, jak zaczyna pomagać budować kulturę testowania i jak bardzo pomaga zespołom w zupełnie innych obszarach.

Jak więc zbudować repozytorium?

Może to być tak proste, jak folder na komputerze lub możesz spojrzeć na platformy, takie jak „Eksperymenty” firmy GrowthHackers. To repozytorium nauki i narzędzie do zarządzania projektami w jednym.

5. Usprawnij swoje procesy

Jedna z najcenniejszych rzeczy, które możesz zrobić, aby:

  • Popraw swoje testy,
  • Zwiększ ich częstotliwość i ilość,
  • Usuń błędy,
  • I obniż koszt testu…

… jest konfigurowanie systemów i procesów w celu usprawnienia całego systemu testowego.

Od hipotezy i organizacji tego, co chcesz przetestować, po konfigurację przed testem, jak wprowadzić to na żywo, co robić podczas testowania i co robić po.

Jeśli zbudujesz systemy i SOP (standardowe procedury operacyjne) dla każdego powtarzanego elementu, cały Twój program testowy nie tylko się poprawi, ale zwiększy Twoje szanse na sukces.

Czemu?

Każdy test będzie przebiegał płynniej, z mniejszą szansą na błąd ludzki, a jednocześnie będzie szybciej wdrażany. To sytuacja korzystna dla obu stron.

Problem polega oczywiście na tym, że prawie żadna firma tego nie robi. W rzeczywistości pojawia się raz po raz w raporcie branżowym CXL.

Prawie 25% testerów wie, że musi usprawnić swoje procesy.
Prawie 25% testerów wie, że musi usprawnić swoje procesy.

Ale agencje, które prowadzą je przez cały dzień?

Lub wewnętrzne zespoły, które skalują swoją kulturę testowania?

To ci, którzy ZAWSZE koncentrują się na budowaniu systemów tak szybko, jak to tylko możliwe…

Takie też łatwo jest zrobić.

Zaplanuj, co robisz dla każdego testu, a następnie utwórz dokumenty do śledzenia dla każdego nowego testu. Możesz po prostu zaznaczyć pola, aby upewnić się, że wszystko zostało zrobione.

Na przykład, oto prosty proces testowania eksperymentalnego (oparty na frameworku testowania Phase-Gate Bena Labaya), od którego możesz zacząć…

Faza 1: Zbierz wstępne spostrzeżenia (aby odkryć problemy lub możliwości)

Zacznij od zrozumienia swoich klientów i swojej pozycji na rynku. Aby zebrać te informacje, zbadaj swoich klientów i rynek, przeprowadzając ankiety i ankiety, wywiady z interesariuszami, testy użytkowników itp.

Główne pytania, na które chcesz uzyskać odpowiedzi, to:

  • Czy spełniamy potrzeby naszych klientów/użytkowników?
  • Jak postrzega nas nasza grupa docelowa?
  • Jaka jest pozycja naszej marki na rynku?
  • Jakie dane zebraliśmy już na temat tych problemów/możliwości?
  • Co musielibyśmy zmienić w naszym produkcie, marketingu lub usłudze?

Doprowadzi to do wymyślenia zwięzłego opisu problemu. Dowiesz się, jakie dane należy mierzyć i jak je osiągnąć. Ponadto będziesz w stanie ocenić, czy dany problem lub okazja jest warta realizacji, czy też można ją odłożyć na później.

Spostrzeżenia, które wyciągniesz z tej wstępnej oceny, pomogą ci przygotować podsumowanie badań z proponowaną hipotezą.

Użyj tego, aby uzyskać akceptację od udziałowców kierowniczych, ponieważ będą musieli być na pokładzie, aby dostosować test do celów biznesowych.

To prowadzi nas do następnej fazy…

Faza 2: Przygotuj plan testów i udowodnij wykonalność

W tej fazie uzasadniasz wykonalność testu, aby uzyskać wsparcie od kierownictwa.

Będą chcieli zobaczyć, jak wartość potencjalnego wyniku uzasadnia zasoby wymagane do jego realizacji.

Oto pytania, na które chcesz odpowiedzieć na tym etapie:

  • Jakie zasoby są wymagane do przeprowadzenia testu?
  • Jakie kluczowe zmiany będą musiały zostać wprowadzone?
  • Czy ma to wpływ na inne projekty/testy?
  • Czym są KPI i jak wskazują na sukces?
  • Jakie są możliwe wyniki?

Podsumuj odpowiedzi na te pytania w dokumencie opisującym podstawowy zakres testów. Upewnij się, że jest łatwy do zrozumienia, na przykład w arkuszu kalkulacyjnym, aby można było go użyć do uzyskania zgody kierownictwa.

Po uzyskaniu zgody możesz przejść do planowania…

Faza 3: Przygotuj bardziej szczegółowy plan projektu

Tutaj możesz zaangażować wszystkich w projekt. Wykonawcy powinni zgodzić się na równowagę między skutkami kosztów a oczekiwanymi wynikami. Interesariusze interdyscyplinarni powinni być gotowi do udziału.

Aby to osiągnąć, przygotuj bardziej szczegółowy plan projektu, który odpowiada na te pytania:

  • Jakie dane/informacje są nam potrzebne do wykonania testu?
  • Gdzie i jak przeprowadzamy test?
  • Jakie wskaźniki wskazują na sukces i jak je mierzymy?
  • Czy przygotowaliśmy drzewo decyzyjne przedstawiające możliwe wyniki?

Połącz je wszystkie w planie, aby uzyskać pełne wyrównanie od wszystkich zaangażowanych w projekt. Będzie to również cenny dodatek do twojego depozytariusza nauki.

Możesz rozpocząć test, gdy wszyscy interesariusze są na pokładzie z całym planem.

Faza 4: Uruchom i uruchom test

W tej fazie uruchomisz test, przeprowadzając testy, aby upewnić się, że wszystko przebiega zgodnie z planem. Wykonuj pojedyncze lub wielokrotne kontrole QA i QC oraz cotygodniowe kontrole wydajności.

Jasność, której chcesz w tej fazie, powinna odpowiadać:

  • Czy test został zbudowany i działa zgodnie z planem w poprzednich fazach?
  • Czy zbieramy dane i raportujemy tak, jak zamierzaliśmy?
  • Czy postępujemy zgodnie z harmonogramem projektu testowego?
  • Czy rozwiązaliśmy wpływ, jaki ten test może mieć na inne projekty/testy?
  • Czy wszyscy zaangażowani nadal są zaangażowani w postęp?

Jeśli coś rzuca się w oczy jako problem lub są konieczne zmiany, które należy wprowadzić, należy je udokumentować w dzienniku incydentów.

Zgłoś się do interesariuszy wykonawczych i poinformuj ich, jak przebiega test. Czy wszystko idzie zgodnie z planem? A czy dokładnie zbierasz dane i przygotowujesz raporty?

To zapoczątkuje kolejną fazę…

Faza 5: Przygotuj raport z testu

W tej końcowej fazie będziesz chciał przygotować pełną dokumentację testu, szczegółowo opisującą analizę, wyniki, spostrzeżenia i decyzje podjęte w wyniku testu. Będzie to część archiwum testów i depozytariusza nauki.

To, co chcesz uwzględnić w tym raporcie z testu, to:

  • Czy test spełnił cele?
  • Jakie natychmiastowe poprawki zostały wprowadzone dzięki uzyskanym spostrzeżeniom?
  • Jeśli dowiedziałeś się czegoś nowego poza zakresem testu oraz
  • Kluczowe decyzje, które zostały zainspirowane wynikami testów

Oprócz szczegółowej dokumentacji testu, korzystne będzie utworzenie karty wyników testu, która na pierwszy rzut oka dostarczy ważnych informacji.

Teraz wszystko, co musisz zrobić, to powtórzyć 5 faz do następnego testu.

6. Popraw jakość swoich danych

Gdy zaczniesz uzyskiwać znacznie większy ruch i wyniki, dobrym pomysłem może być zmiana platformy analitycznej na bardziej szczegółowe raporty.

Możesz przejść na Google Analytics 360, gdy będziesz mieć 10 milionów odwiedzających miesięcznie (wiem, prawda?… wow)

Możesz też zacząć przyglądać się działającym w czasie rzeczywistym, wielokanałowym narzędziom, takim jak Adobe Analytics i Heap. (Oba integrują się bezpośrednio z aplikacją Convert.)

Narzędzia te mogą dostarczyć dokładniejszych danych, pomóc zrozumieć zachowanie użytkowników, a także przetestować i śledzić rzeczy, których standardowe GA po prostu nie potrafią.

Nie tylko to, ale także podłączają się do Twojego CRM i innych narzędzi.

7. Dodaj dodatkowe wsparcie do zespołu testującego

Do tej pory prawdopodobnie używałeś edytora WYSIWYG, który jest częścią twojego narzędzia testowego.

Jeśli jednak chcesz zacząć przeprowadzać bardziej skomplikowane testy, z szybszym i czystszym kodem, warto zatrudnić programistę JavaScript.

W ten sposób programista może wykonać test przy użyciu własnych preferowanych narzędzi i przepływów pracy, a następnie przesłać kod bezpośrednio do narzędzia testowego bez dodatkowego rozrostu kodu.

A bonus?

Ponieważ test jest nadal wdrażany za pośrednictwem narzędzia, pozwoli to na korzystanie ze wszystkich funkcji segmentacji i pomiaru, a nawet może zostać automatycznie wyłączony po znalezieniu zwycięzcy.

Konwertuj Doświadczenia przestań tracić na różnorodności

(Jedynym spornym punktem, który widzimy u osób korzystających z programistów, jest to, że omijają narzędzia lub budują własną platformę testową. To może działać, ale jeśli potrzebujesz programisty, aby zaprojektował test, wyłącz go po zakończeniu i zaimplementuj zwycięzcę, może to stać się problem.)

Dowiedz się, czego możesz się nauczyć z testów A/B.
Wypróbuj Convert Experiences. ROZPOCZNIJ 15-DNIOWY BEZPŁATNY PRÓBNY
Dowiedz się, czego możesz się nauczyć z testów A/B.

8. Zacznij budować testy w innych zespołach

Teraz, gdy przeprowadzasz więcej testów, śledzisz dane i masz doświadczenie, to świetny moment, aby rozpocząć wdrażanie testów w różnych zespołach.

Już nie tylko sprzedaż, ale produkt lub ruch itp. Każdy zespół, w którym można wprowadzić ulepszenia.

Pamiętaj: nie zawsze chodzi o ogromne wygrane, ale o agregację małych. Wzrost o 1% w setkach obszarów może doprowadzić do ogromnej różnicy w sposobie działania Twojej firmy.

Możesz zacząć szkolić kogoś w każdym zespole lub sprowadzić ludzi i przeszkolić się w zarządzaniu testowaniem w tych obszarach. Zwykle najlepiej jest zacząć powoli i wykorzystać podstawowy zespół testowy jako wzór do naśladowania, aby pomóc zainspirować i zapewnić wsparcie nowemu zespołowi.

Tylko nie próbuj budować wszystkich zespołów jednocześnie:

Kluczem jest pomoc w stworzeniu jeszcze jednego zespołu i sprawienie, aby odniósł sukces, a następnie przejść do następnego. Chcesz, aby każdy zespół był w stanie samodzielnie działać i być wydajny, jeśli chcesz zbudować kulturę testowania!

9. Dodaj narzędzia do pomiaru doświadczenia klienta

Speero (agencja CXL) napisała niedawno raport na temat dojrzałości CRO, oparty na informacjach zwrotnych od 210 różnych firm, z których wszystkie prowadziły CRO w latach 2020-2021.

Ich celem było uzyskanie bardziej szczegółowego obrazu różnych programów eksperymentalnych oraz tego, jak dojrzałość programu wpływa na wyniki.

Kilka rzeczy naprawdę mnie wyróżniało:

  • Firmy odnoszące największe sukcesy są oparte na danych. Dokonują wszystkich wyborów na podstawie danych z testów, a nie opinii.
  • Dzielą się swoimi wynikami w całej firmie , aby pomóc w budowaniu kultury testowania.
  • A to tylko kilka z firm, które wdrażają Pomiary Customer Experience.

Jest powód, dla którego nie każdy mierzy doświadczenie klienta. To nie jest to, o czym myślisz, gdy mówisz o CRO, ponieważ nie poprawiamy współczynnika konwersji. Śledzimy jednak, mierzymy i ulepszamy wszystkie powiązane aspekty, które przyczyniają się do wyższej sprzedaży, powtarzalnej sprzedaży i utrzymania, używając tej samej metodologii, której moglibyśmy użyć do testowania typu QA i ilościowego, tylko bardziej szczegółowo. (Wszystkie rzeczy, które mogą mieć bezpośredni wpływ na współczynnik konwersji).

Pomiar doświadczenia klienta często wymaga bardziej szczegółowego śledzenia, ale gdy to zrobisz, możesz zacząć porównywać wartość pieniężną z poprawą doświadczenia klienta.

Nie tylko to, ale możesz także śledzić retencję w czasie. (Dużo bardziej opłacalne jest zwiększenie sprzedaży obecnemu klientowi niż pozyskanie nowego).

wpływ finansowy na doświadczenie klienta
Źródło

Więc czego możesz do tego użyć?

Proces jest w rzeczywistości dość duży, co jest kolejnym powodem, dla którego nie zawsze jest stosowany.

Idealnie byłoby, gdy tworzysz systemy interakcji i informacji zwrotnych podczas całej podróży klienta, nawet po opuszczeniu witryny i otrzymaniu produktu. Wymaga to elementu ludzkiego i kilku dodatkowych narzędzi do ankiet itp.

Niektóre agencje specjalizują się w CX, więc możesz zacząć z nich korzystać (lub trzymać się ich).

Możesz też zacząć przyglądać się takim narzędziom jak Qualtrics i inne, a następnie zbudować swój program wewnętrznie.

CX to nowy temat z krzywą uczenia się, ale korzyści mogą być znaczne, zwłaszcza gdy wprowadzisz je z powrotem do testów CRO.

10. Unikaj pułapki łączenia eksperymentów z przychodami

Kuszące jest powiedzenie: „Ponieważ przeprowadziliśmy ten test i wykorzystaliśmy spostrzeżenia do podjęcia tej decyzji, zarobimy X pieniędzy”. Wniosek ten lekceważy rzeczywistość.

Świat nie jest tak prosty, jak byśmy chcieli. Tak wiele czynników wpływa na wynik rzeczy, że nie jest realistyczne myślenie, że pewien wynik, gdy zostanie wprowadzony, będzie się powtarzał konsekwentnie.

Dlaczego więc niektóre narzędzia do testowania A/B, agencje i praktycy CRO nadal wiążą testy A/B z prognozami przychodów?

Odpowiedź jest prosta: jest ekscytująca i często przyciąga uwagę.

Ale jest to łatwy sposób na to, by narazić ludzi na rozczarowanie i sprawić, by stracili wiarę w testy A/B. I właśnie dlatego ludzie są błędnie przyciągani do pompowania pieniędzy w narzędzia, które zgłaszają przychody.

Oto dlaczego wydawanie 100 000 USD rocznie na takie narzędzia jest ogromnym błędem:

W prawdziwym świecie panuje duża doza niepewności.

Jest wiele powodów, dla których wynik testu nie powtórzy się dokładnie i nie powinieneś ich ignorować. Rynki się zmieniają, zmiany zachowań klientów, zmiany konkurencji, wahania budżetów i cen. Przyszłość niekoniecznie będzie taka sama, jak czas, w którym przeprowadziłeś test.

Ekstrapolując swój wynik, aby przewidzieć wzrost przychodów na następny rok, zbytnio uprościsz obliczenia zwrotu z inwestycji i zrobisz błędne prognozy z większym prawdopodobieństwem.

Prawdziwym celem testowania powinno być podejmowanie decyzji dotyczących postępu.

Testowanie ma więcej wspólnego z celami i spostrzeżeniami niż z przychodami. Informowanie o lepszych decyzjach powinno być głównym przedmiotem testów A/B. To ustawia decydentów na pewniejszej ścieżce do wzrostu i zysku niż posiadanie atrakcyjnych liczb przychodów, na które można spojrzeć i ryzykując, że się zawiedzią.

Często jednak trudno jest zainteresować ludzi, jeśli na końcu eksperymentu nie znajduje się konkretny cel dotyczący przychodów.

Co zrobić zamiast tego?

Przeciągnij dyskusję wokół eksperymentowania z przewidywanych przychodów na koszt nieeksperymentowania. Jaka byłaby strata, gdyby nie zostały podjęte żadne działania?

Pomyśl także o sukcesie projektów testowych jako o poziomie zaufania, jaki uzyskasz przy podejmowaniu pewnych decyzji dotyczących określonego celu. Nie tylko odwróci to uwagę od oczekiwanych zysków, ale także pomoże w dostosowaniu interesariuszy do właściwego ukierunkowania programu optymalizacyjnego.

Jeśli nadal naciskasz na liczby, podaj zakres. Ponieważ eksperymenty pokazują tylko procentową pewność uzyskania wyniku, jest to sprytny sposób na uspokojenie tych, którzy proszą o liczbę. Na przykład, jeśli wyniki wykazały wzrost o 4,55%, powiedz interesariuszom, aby spodziewali się wzrostu między 3,2 a 5,9%.

Wniosek

Więc masz to. Dokładny sposób, w jaki podszedłbym do wydawania i inwestowania mojego budżetu na testy A/B, gdy dopiero zaczynałem, oraz w jaki sposób skalowałbym go i dalej inwestował w miarę upływu czasu.

Możesz użyć tego przewodnika, aby dowiedzieć się, na jakim etapie jesteś na swojej drodze do dojrzałości testowej i wdrożyć wszelkie brakujące kroki, które pomogą Ci się dalej rozwijać, lub po prostu użyć go jako wskazówki, aby zacząć już dziś.

Jak zwiększyć zwrot z inwestycji dzięki testom A/B?

Zarezerwuj demo z Konwertuj, aby dowiedzieć się.

Poproś o demo