Najpopularniejsze narzędzia do testowania wielu odmian w 2022 r.

Prowadzisz więc obecnie testy A/B i chcesz skalować swój program testowy.

Masz dobry ruch, widzisz świetne wyniki, a teraz chcesz przeprowadzić znacznie więcej testów i jak najszybciej uzyskać te dane.

Ale jak możesz szybciej rozpocząć testowanie? Albo jeszcze lepiej, jak przeprowadzić więcej testów i uzyskać więcej informacji w tym samym okresie?

W tym momencie wkraczają testy wielowymiarowe. Pozwalają przetestować wiele odmian jednocześnie, aby zobaczyć, który z nich działa najlepiej.

W tym przewodniku opiszemy, czym jest MVT, jak działa, czego potrzebujesz, aby z niego korzystać, a także przedstawimy wybrane najlepsze dostępne narzędzia do testowania wielowymiarowego.

Wszystko, od ich ceny i funkcji, po sposób, w jaki prowadzą działalność, dzięki czemu możesz dokonać właściwego wyboru przy podejmowaniu decyzji, które narzędzie do testowania wielu odmian wybrać.

Zanurzmy się więc w to…

Co to jest testowanie wielowymiarowe?

Najlepszym sposobem na zrozumienie testowania wielowymiarowego jest porównanie go z innymi metodami testowania i sprawdzenie, czym się ono różni.

Przyjrzyjmy się więc testowi A/B i testowi wielowymiarowemu oraz ich porównanie.

Za pomocą testu A/B testujemy pojedynczą odmianę w porównaniu z oryginalną wersją kontrolną. Może mamy pomysł, jak ulepszyć nagłówek, więc tworzymy tę odmianę, a następnie sprawdzamy, która działa najlepiej.

Twój test A/B będzie wyglądał tak:

Nagłówek 1 (kontrola) a nagłówek 2 (propozycja odmiany)

Innym testem, który moglibyśmy przeprowadzić, jest test A/B/n.

W tym miejscu możemy przetestować wiele odmian z kontrolą, aby znaleźć zwycięzcę. Testy A/B/n są jednozmienne.

Na przykład możemy mieć mnóstwo pomysłów na nagłówki i nie jesteśmy pewni, które zadziałają. Ponieważ jednak mamy ruch, który pozwala na uruchomienie kilku odmian testowych i uzyskanie dokładnych wyników, postanawiamy przetestować wiele propozycji nagłówków, aby sprawdzić, które z nich są najskuteczniejsze.

Nagłówek 1 (kontrola) a nagłówek 2 a nagłówek 3

Gdy znajdziemy zwycięską odmianę nagłówka, możemy przetestować kilka zdjęć bohaterów, a następnie może kilka kątów CTA.

Jak łatwo się domyślić, to wszystko wymaga czasu, prawda?

Inną opcją jest uruchomienie testu, w którym zmieniamy kilka rzeczy za jednym razem i sprawdzamy, czy to poprawia metryki.

Zwykle nie robimy tego w przypadku większości testów A/B, chyba że chcemy dokonać radykalnej zmiany, np. rzucić zdrową maryję, aby spróbować znaleźć nowego zwycięzcę, ponieważ wszystkie inne pomysły testowe są w stagnacji lub nie mają żadnego wpływu.

Dlaczego więc nie zalecamy wprowadzania radykalnych zmian takich jak ta w normalnych kampaniach i co to ma wspólnego z testowaniem na wielu odmianach?

Testujemy jeden element na raz, ponieważ jeśli dokonamy dużych zmian i nowa strona wygra lub nie, nie jesteśmy pewni, która z tych zmian spowodowała ten wzrost.

Testowanie wielowymiarowe lub MVT pozwala nam przetestować wiele wariantów, jednocześnie śledząc każdą z tych zmian i ich wpływ na wynik.

Możemy nie tylko testować wiele wariantów elementów, ale nawet uruchamiać różne ich kombinacje, aż znajdziemy ostatecznego zwycięzcę.

Powiedzmy, że chcieliśmy ulepszyć naszą stronę główną i mamy kilka pomysłów na to, co przetestować, aby zobaczyć największy wzrost:

• Nagłówek
• Obraz strzału bohatera
• CTA.

W teście wielowymiarowym mogliśmy nie tylko przetestować każdy pomysł nagłówka, opcję zdjęcia bohatera i kąt CTA, ale także przetestować każdą kombinację tych odmian, aby znaleźć zwycięską kombinację:

Nagłówek 1 + obraz bohatera 1 + wezwanie do działania 1 kontra

Nagłówek 1 + obraz bohatera 2 + wezwanie do działania 1 kontra

Nagłówek 1 + obraz bohatera 1 + wezwanie do działania 2 kontra

Nagłówek 2 + obraz bohatera 1 + wezwanie do działania 1 kontra

Nagłówek 2 + obraz bohatera 2 + wezwanie do działania 1 kontra

Nagłówek 2 + obraz bohatera 2 + wezwanie do działania 2

Testy wielowymiarowe mogą pomóc w znalezieniu najlepszej kombinacji elementów i zrozumieniu, co spowodowało te zmiany.

Mimo to wykonanie prawidłowego testowania na wielu odmianach wymaga poświęcenia dużej ilości czasu i zasobów. Czy chcesz zainwestować tyle zasobów, nie tylko w testowanie, ale także w kontrolę jakości i analizę? Jednak w niektórych scenariuszach może to być lepsza opcja. Zobaczmy, jakie to są.

Kiedy stosować testy wielowymiarowe?

Do czego służy testowanie wielowymiarowe? Oto kilka przypadków, w których test MVT może być bardziej przydatny niż test A/B.

1. Kiedy masz duży ruch i chcesz przyspieszyć swój program testowy

Ruch jest głównym sednem testowania wielowymiarowego. Potrzebujesz dużego ruchu, aby móc testować każdą zmianę i ufać wynikom testu.

Ale jeśli masz ruch i chcesz skalować swoje testy, aby uzyskać więcej danych i podejmować więcej decyzji, MVT pozwoli Ci uruchomić wiele pomysłów jednocześnie.

2. Gdy chcesz zwiększyć siłę nośną i masz kilka pomysłów, ale nie chcesz czekać, aby je przetestować jeden po drugim

Niektórzy uważają, że ze względu na nakład czasu, należy używać MVT tylko do udoskonalania bieżących stron internetowych z drobnymi zmianami, ale to nieprawda. Jasne, można go do tego wykorzystać, ale można go również wykorzystać do szerszych testów „co by było, gdyby” większych elementów.

(Może nie jesteś pewien, który element zapewni najlepszy efekt, więc chcesz spróbować rzucić kilka sprytnie hipotetycznych pomysłów na ścianę, aby zobaczyć, który działa).

Jeśli masz duży ruch, aby uruchomić MVT, nie musisz się zastanawiać, czy nie próbować szybciej znajdować szerokich kombinacji stron. Tylko pamiętaj, aby zmierzyć efekty tego ruchu również PO teście dla każdej odmiany, ponieważ zapewni to dokładniejszy wgląd w odbiorców i dlaczego to zadziałało.

Na przykład na Facebooku możesz skonfigurować podstawowe reklamy testowe na wielu odmianach, dodając różne odmiany obrazu miniatury, nagłówka i treści itp.

Uruchomi się test i pokaże, która odmiana tej reklamy ma najwyższy CTR.

Jeśli Twoim celem były tylko kliknięcia, ta reklama wygrałaby, prawda?

Ale jeśli cały ten ruch odbija się od strony, na którą je wysyłasz , to jedyne, co znajdziesz, to odmiana, która powoduje, że odbiorcy klikają, a nie taka, która sprawia, że ​​zostają i konwertują.

Tak samo jest z testem MVT na stronie, zwłaszcza jeśli używasz go jako szerszej metody zbierania pomysłów. Sprawdź, co dzieje się na stronie, ale także po kliknięciu.

3. Podczas udoskonalania poprzedniego testu, aby uzyskać przyrostowy wzrost

Możesz także użyć MVT do mierzenia i ulepszania małych udoskonaleń. W rzeczywistości wiele agencji lubi z nich korzystać, aby uzyskać jeszcze większy wzrost w bieżących zwycięskich kampaniach i testować małe zmiany.

Załóżmy, że już wielokrotnie testowałeś stronę A/B, aby znaleźć zwycięski wariant, ale chcesz uzyskać jak największy wzrost, nawet jeśli jest to tylko 0,5%. Możesz uruchomić testy MVT na tej stronie, aby przetestować dalej (ponieważ przy 100 000 odwiedzających miesięcznie, każde 0,5% pomaga jest zauważalne!)

4. Podczas poszukiwania maksymalnego możliwego wzrostu z kombinacji pomysłów (efekty interakcji)

Czasami kolejny test A/B może dać nam zwycięzców na papierze, ale gdy je połączymy, nie zawsze są to najskuteczniejsze opcje dla naszej strony.

Oto przykład:

• Przeprowadzasz test nagłówków, wybierasz zwycięzcę i wdrażasz.
• Następnie przeprowadzasz test obrazu bohatera na tej samej stronie ze zwycięską odmianą nagłówka i implementacją.
• Następnie uruchamiasz test CTA na tej samej stronie z poprzednimi zwycięskimi elementami i implementujesz.

Teoretycznie powinna to być najskuteczniejsza wersja Twojej strony, ale dziwne rzeczy mogą się zdarzyć z powodu interakcji lub jej braku. Mówiąc najprościej, możliwe jest, że element przegrywający w jednym teście może czasami przewyższyć wynik kolejnego zwycięzcy testu A/B w połączeniu z inną odmianą elementu.

Jak?

Cóż, może przegrany nagłówek z pierwszego testu zapewnia wyższy współczynnik konwersji zaplecza w połączeniu ze zwycięzcami z testu obrazu i CTA.

To może się zdarzyć, ale nigdy byś się o tym nie dowiedział, gdybyś po prostu przeprowadził testy A/B. Zamiast tego usunąłbyś go z opcji, zanim kiedykolwiek przetestowałeś inne elementy. Właśnie dlatego testowanie wielowymiarowe jest tak potężne. Pozwala znaleźć najwyższą ogólną wydajność strony, nawet jeśli oznacza to, że pobiera mniej skuteczny element z jednej części testu.

Co więcej, może nawet powiedzieć, który element pomógł najbardziej…

5. Podczas wyszukiwania najważniejszego elementu na stronie dla odbiorców, przyszłych testów i stron

MVT nie tylko pokaże zwycięską kombinację Twoich różnych odmian i elementów, ale także pokaże Ci element, który zapewnia największy wzrost.

Może Twój bohater ujęcie zyskuje na sile, ale widzisz też, że ze wszystkich elementów na stronie z odmianami to właśnie on ma największy wpływ na wynik końcowy?

To da ci pewien wgląd w to, gdzie najpierw przetestować, aby uzyskać jeszcze dalsze ulepszenia, dzięki czemu możesz najpierw skupić się na ulepszeniach strzałów bohatera itp.

6. Stosując uczenie maszynowe w procesie testowania

Ze względu na charakter MVT wymagającego i śledzącego duże ilości danych i interakcji, może być faktycznie używany jako doskonałe źródło zasilania programów testujących uczenie maszynowe.

ML wymaga dużych ilości danych, aby działały najlepiej, ale gdy je uzyska, może zacząć dostrzegać wzorce oraz przewidywać wyniki i zachowania przy mniejszym ruchu w czasie. W rzeczywistości witryny takie jak Amazon robią dokładnie to…

Przykłady testów wielowymiarowych

Przykład testowania wielowymiarowego nr 1

Amazon wykorzystał MVT i uczenie maszynowe, aby dostosować układ swoich stron docelowych, co zaowocowało 21% wzrostem wskaźnika zakupów w zaledwie 7 dni!

Przykład testowania wielowymiarowego nr 2

Booking.com wykorzystuje testy na wielu odmianach, aby przetestować nowe unikalne funkcje dla określonych odbiorców, a następnie mierzyć ich skuteczność przed wprowadzeniem ich w całej witrynie.

Przykład testowania wielowymiarowego nr 3

Microsoft odnotował 40% wzrost współczynnika konwersji dla swojej witryny dla małych i średnich firm, po przeprowadzeniu testu MVT na wielu elementach strony (8×4!)

Przykład testowania wielowymiarowego nr 4

Jednak nie tylko molochy mogą używać MVT. HawkHost odnotował 204% wzrost sprzedaży, gdy przeprowadzili test MVT na swojej stronie głównej (testując nagłówek, podtytuł i ujęcie bohatera).

Plusy i minusy testowania na wielu odmianach

Skoro testowanie wielowymiarowe jest tak potężne, dlaczego wszyscy go nie używamy?

Widzisz, piękno testu A/B polega na tym, że możesz szybko przetestować jeden pomysł przy stosunkowo niewielkiej liczbie odbiorców. Oznacza to, że większość firm może przeprowadzić test, nawet jeśli mają dość mały ruch, a następnie zobaczyć wynik w ciągu 14-30 dni.

Ale w przypadku testu na wielu odmianach potrzebujesz znacznie większej liczby odbiorców, ponieważ testujesz wiele rzeczy naraz. (Zwłaszcza jeśli wykonujesz testy wielostronicowe lub testujesz wiele kombinacji odmian).

Załóżmy, że chcieliśmy przetestować nagłówek na naszej stronie głównej:

• Kontrola nagłówków
• Odmiana nagłówka

Testujemy tylko pojedynczą odmianę, więc są to łącznie 2 opcje.

Teraz jako prosty przykład załóżmy, że chcemy uzyskać 1000 odwiedzających każdą wersję strony (wariant i kontrolkę), aby mieć pewność, że wyniki testu są godne zaufania.

(Wymagany ruch może się różnić w zależności od strony i jej współczynnika konwersji, ale uprośćmy tutaj, aby uzyskać pomysł).

Oznacza to, że potrzebowalibyśmy 2000 odwiedzających, aby przeprowadzić test i zaufać wynikom, z 1000 odwiedzających na każdą stronę.

A co gdybyśmy chcieli przetestować:

• 3 nagłówki
• 3 obrazy bohaterów i
• 3 CTA?

To nie jest łącznie 9 wariantów, ale w rzeczywistości 27 kombinacji 9 wariantów (3x3x3).

Oznacza to, że gdybyśmy chcieli 1000 odwiedzających na odmianę, to nasze zapotrzebowanie na ruch wynosiłoby 27 000 odwiedzających, aby przeprowadzić test i zaufać wynikom (na podstawie naszego uproszczenia, że ​​wystarczy 1000 odwiedzających na stronę).

W rzeczywistości, aby uzyskać dokładne dane, prawdopodobnie potrzebujesz około 10 000 użytkowników na odmianę, ponieważ sam ruch nie wystarczy, musisz również zobaczyć konwersje.

To dlatego wiele firm nie przeprowadza testów MVT, po prostu dlatego, że nie mają wystarczającego ruchu, aby je skutecznie przeprowadzać. W rzeczywistości większość agencji zaleca posiadanie około 100 000 odwiedzających miesięcznie przed rozpoczęciem prowadzenia kampanii MVT, chyba że strona ma już bardzo wysoki współczynnik konwersji. I nawet wtedy nadal zalecają uruchamianie maksymalnie 6 odmian, aby móc je uruchomić szybciej.

Ale jeśli masz taki ruch?

No cóż, MVT może pozwolić na wykonanie ekwiwalentu znacznie większej liczby testów w niemal dokładnie tym samym czasie…

Co jeśli weźmiemy ten przykład z góry i pozwolimy, aby każdy test był uruchamiany przez pełny 30-dniowy cykl sprzedaży, aby uzyskać dokładne okno pomiarowe?

Zakładając, że mamy ruch, moglibyśmy uruchomić 27 kombinacji testowych jednocześnie na tej jednej stronie w ciągu około 30-60 dni jako pojedynczy test na wielu odmianach. Nieźle, jeśli porównasz to z przeprowadzeniem 27 kolejnych testów A/B na tej stronie w ciągu 27 miesięcy!

(Ponownie upraszczam i zakładam, że w każdym teście biegniesz przez pełny cykl sprzedaży.)

Ale jak widać, testowanie wielowymiarowe pozwala uzyskać wgląd i pomysły, szybciej je wdrożyć i skrócić czas pracy w przypadku kolejnych przegranych testów.

Całkiem nieźle, prawda!?

Oczywiście istnieją inne wady testowania MVT, inne niż wymagania dotyczące ruchu.

Ze względu na dużą liczbę odmian i kombinacji, które można uruchomić, znacznie wydłuża to czas kontroli jakości przed i po teście.

Musisz upewnić się, że każda odmiana działa, a także ma sens. (Nie pokazuje nagłówka i obrazu, które nie pasują do siebie itp.), co znacznie wydłuża czas konfiguracji i zwiększa koszty.

Pamiętaj też, aby sprawdzić efekty.

Tylko dlatego, że widzisz wzrost konwersji na tej konkretnej stronie, śledź go, aby osiągnąć swoje ostateczne cele. Ostatnie, czego potrzebujesz, to więcej kliknięć, ale słaba wrażenia użytkownika lub wysoki współczynnik odrzuceń (lub więcej kliknięć, ale brak sprzedaży).

Zalety testów wielowymiarowych

• Zakładając, że masz ruch, testowanie na wielu odmianach pozwala szybko przetestować wiele odmian.
• MVT może pomóc w skalowaniu programu testowego, aby znaleźć więcej danych na temat tego, co działa, a co nie.
• Może pomóc Ci szybciej znaleźć wygrywające kombinacje niż kolejne testy A/B.
• Może pomóc Ci znaleźć zwycięskie kombinacje, które mogłeś przegapić podczas wykonywania kolejnych testów. (Wyobraź sobie, że jeden nagłówek miałby drugie wyniki i wycinasz go, ale w połączeniu z trzecią odmianą obrazu, w jakiś sposób podwoił to wzrost? W kolejnym teście byś to przeoczył. Test na wielu odmianach wymaga większego stopnia efektów interakcji).
• Niektóre programy do testów A/B pozwolą Ci zobaczyć, który konkretny element pomógł zapewnić największy wzrost (co pozwala lepiej zrozumieć odbiorców).
• Może być również używany do wyszukiwania niewielkich wzrostów na stronach o wysokiej wydajności. (Wyobraź sobie, że masz już stronę o wysokiej wydajności i strzelasz nowymi pomysłami, aby zobaczyć drobne wzrosty, takie jak zmiany kolorów).

Wady testów wielowymiarowych

• Potrzebujesz dużego ruchu do działania, zwłaszcza jeśli chcesz uzyskać informacje statystyczne, aby móc ufać swoim wynikom i nie widzieć wyników fałszywie dodatnich lub ujemnych (błędy typu 1 i typu 2), a także moc statystyk do pomiaru mniejszego wzrostu procentowego.
• Im więcej testujesz odmian i kombinacji, tym szybciej wymagania dotyczące ruchu rosną, więc miej to na uwadze. Zastanów się nad usunięciem dodatkowych elementów, jeśli nie zapewniają dużego wzrostu. (tj. przetestuj nagłówek, zanim zaczniesz martwić się testowaniem kolorów stopki itp. Zawsze możesz przetestować je później, jeśli naprawdę chcesz.)
• Nie tylko ruch ma wpływ na wielkość próbki. Współczynnik konwersji bieżącej strony i zmiennych wpływa na wielkość próbki wymaganej do osiągnięcia istotności statystycznej. Lepsze konwersje mogą zmniejszyć wymagany ruch, niższe konwersje zwiększają to wymaganie.
• Margines błędu podczas testowania większej liczby zmiennych zwiększa również ilość ruchu wymaganego, aby można było zaufać wynikom.
• Musisz przeprowadzić intensywne testy kontroli jakości, aby upewnić się, że wszystkie działają z wyprzedzeniem.
• Musisz również przeprowadzić kontrolę jakości, aby upewnić się, że odmiany mają sens razem i nie mają przeciwstawnych lub sprzecznych kombinacji. (CTA, które nie pasują do ofert, nagłówki dotyczące wakacji na plaży, reklamujące wyjazd na narty, a nawet sprzeczne lub mieszające kolory czcionki i tła).
• Jeśli nie masz dużego źródła ruchu, nadal możesz przeprowadzić test MVT, może to potrwać DUŻO dłużej, zanim trafisz na statsig i możesz zakończyć test. (Czasami kilka miesięcy lub dłużej). W rzeczywistości czasami szybsze i bardziej wydajne może być uruchamianie kolejnych testów A/B.
• Możesz stracić trochę informacji o odbiorcach, po prostu testując wiele rzeczy naraz. (Testowanie pojedynczego elementu lub kąta może czasami pomóc lepiej zrozumieć odbiorców).

Statystyki testowania wielowymiarowego: matematyka stojąca za MVT

Więc zajmijmy się trochę frajerem…

Jeśli chodzi o testowanie wielowymiarowe, stosujemy inną metodę analizy statystycznej niż standardowe testy A/B lub testy dzielone.

Nie chcę zbytnio zagłębiać się w matematykę, ale oto uproszczenie:

• W przypadku testów A/B używamy testu t (lub testu z), aby zmierzyć różnicę między 2 lub większą liczbą zestawów wyników.
• W przypadku testowania wielowymiarowego do znalezienia wyników testu wykorzystywana jest inna metoda, zwana ANOVA lub „Analiza wariancji”. Nie musisz znać wszystkich szczegółów, ale oto najważniejsza rzecz. Główna różnica polega na tym, że ANOVA mierzy również związek i wpływ między zmiennymi. Jest to jedna z głównych mocnych stron MVT , ponieważ pozwala nam zobaczyć, jak kombinacje elementów wpływają na siebie nawzajem.

W zależności od używanego narzędzia, podczas prowadzenia kampanii MVT mogą być oferowane 3 rodzaje wielowymiarowych metod testowania. Każdy z nich wpływa na matematykę, jak będzie działał twój test.

Nazywamy je:

• Pełna silnia,
• Silnia ułamkowa i
• Taguczi.

Więc co one oznaczają?

Pełna silnia

Prawie każde narzędzie MVT będzie oferować pełne testy czynnikowe jako podstawę swojego głównego modelu testowego i jest to prawie to, czego chcesz używać przez cały czas.

Ta metoda odnosi się do „pełnego” rozkładu ruchu w Twoim teście.

Mówiąc najprościej, jest to miejsce, w którym testujesz każdą kombinację naraz, dzieląc ruch do testu równo między poszczególne warianty.

Za pomocą testu A/B dzielisz ruch 50:50. Ale w przypadku MVT, jeśli masz 10 wariantów, oznaczałoby to, że tylko 10% ruchu trafia do każdego wariantu.

Ze względu na liczbę wariantów i ruch wymagany do osiągnięcia istotności statystycznej dla każdej odmiany, pełna silnia wymaga bardzo dużego źródła ruchu, ale jest to najdokładniejsza metoda.

Jednak niektóre platformy testowe A/B oferują również coś, co nazywa się testowaniem „Fraction Factorial” jako alternatywę.

Silnia ułamkowa

Ta metoda próbuje ominąć niektóre z większych wymagań dotyczących ruchu , testując tylko mniejszą próbkę odmian, a następnie oszacowując końcowe współczynniki konwersji na podstawie bieżących wyników testu .

Jego celem nie jest dokładność przewidywania wiarygodnych wyników przy skalowaniu w normalny sposób, tj. jeśli skalujemy to do X odbiorców, będzie działać tak samo.

Zamiast tego został zaprojektowany, aby pomóc Ci zobaczyć, gdzie zaczyna się wczesna trakcja, abyś mógł uzyskać wgląd przed głębszym testem lub inną metodą.

Załóżmy, że masz 10 odmian, które chcesz przetestować.

Silnia ułamkowa faktycznie przetestuje 5 z nich, a następnie spróbuje wywnioskować współczynnik konwersji dla pozostałych 5 testów, na podstawie dotychczasowych wyników.

Jak można się domyślić, nie jest to tak dokładne i może prowadzić do błędów i fałszywych alarmów, a w rzeczywistości jest źródłem argumentów wśród optymalizatorów i marketerów. (Prawie wszyscy zalecają pełną silnię jako główną metodę testowania.)

Taguchi

Wreszcie masz metodę Taguchi testowania wielowymiarowego. Pierwotnie zaprojektowany jako metoda pomiaru kontroli jakości w stosunku do założeń dopuszczalnych strat w R+D dla wytwarzania produktu.

Większość narzędzi tego nie oferuje ze względu na złożoność w użyciu.

Kiedy zatrzymać test wielowymiarowy?

Są 3 główne rzeczy, które musimy wziąć pod uwagę podczas uruchamiania jakiegokolwiek testu, zanim powinniśmy go zatrzymać:

• Aby test trwał wystarczająco długo, aby zebrać wystarczająco dużą próbkę dla każdego wariantu, a test zebrał wystarczającą liczbę konwersji, aby był istotny.
• Aby test mógł uruchomić 1 lub nawet 2 pełne cykle sprzedaży (w celu zrównoważenia ruchu i okresów zakupów w ciągu 30-60 dni).
• I na koniec, aby wyniki były istotne statystycznie, tj. jeśli weźmiemy ten test na wolność i zwiększymy go, możemy być w 95% pewni, że nadal będzie działał w ten sam sposób.

Zalecamy, aby nie przerywać żadnego testu przed tym punktem. W przeciwnym razie dane będą niewystarczające do pracy. Możemy jednak zatrzymać, a następnie ponownie rozpocząć test, jeśli wystąpią problemy z wydajnością, takie jak niedziałające formularze płatności jednego wariantu itp., Ale najlepiej staramy się nawet nie podglądać, gdy jest uruchomiony.

(Niektóre agencje zalecają wczesne zatrzymanie, jeśli istnieje wyraźny zwycięzca, lub nawet zatrzymanie określonych odmian, jeśli ich współczynnik konwersji spadnie poniżej 10%, a następnie umożliwienie kontynuowania testu przy jednoczesnym filtrowaniu większego ruchu do osób o lepszych wynikach. Oczywiście może to mieć wpływ na wyniki testu są bardzo dobre.)

Jak skonfigurować i przeprowadzić test na wielu odmianach?

Proces tworzenia testu wielowymiarowego jest bardzo podobny do testu A/B.

Krok 1: Zdecyduj o swoim ostatecznym celu

Najpierw musisz sformułować hipotezę dla swojej strony, jej celu, aktualnych wyników i tego, jak Twoim zdaniem można ją ulepszyć.

Możesz skorzystać z naszego generatora hipotez, który pomoże Ci wyjaśnić, co chcesz osiągnąć i ustalić konkretne cele.

Krok #2: Dowiedz się, co przetestować

Następnie zdecyduj, które elementy chcesz przetestować i jakie odmiany, Twoim zdaniem, mogą poprawić Twoje obecne wyniki.

Możesz na przykład pomyśleć, że testowanie „podstawowych elementów” w części strony widocznej na ekranie zwiększy konwersje, więc chcesz przetestować nagłówek, ujęcie bohatera i tekst przycisku wezwania do działania.

Krok #3: Oblicz ramy czasowe testowania

Przed uruchomieniem testu lub utworzeniem jakichkolwiek zasobów zalecamy wykonanie obliczenia wielkości próbki przed testem, aby można było oszacować ramy czasowe i wymagania dotyczące ruchu dla tego testu. Pomoże Ci to uzyskać wgląd w to, ile odmian można wykonalnie uruchomić przy powtarzającym się ruchu i nadal uzyskiwać szybkie wyniki. (Lub nawet daj znać, jeśli musisz przetestować mniej opcji).

W powyższym przykładzie masz 3 elementy: nagłówek, strzał bohatera i tekst przycisku CTA.

Jeśli chcesz przetestować pojedynczą odmianę dla każdego, będzie to 2x2x2=8 kombinacji. Wiedząc o tym, możesz zacząć obliczać, jakiego ruchu potrzebujesz.

Wprowadź do kalkulatora aktualny tygodniowy ruch na stronie i współczynnik konwersji (wraz z ustawieniami mocy i pewności).

Następnie ustaw liczbę stron, które chcesz przetestować. (8 w tym przykładzie)

Dzięki temu otrzymasz ramy czasowe, przez które musisz biec, aby móc wykryć minimalny wzrost.

Krok 4: Zbuduj test

Następnie przejdź do swojego narzędzia i skonfiguruj różne wersje i kombinacje do testu na wielu odmianach.

Zacznij od wybrania opcji testu na wielu odmianach.

Nadaj mu nazwę, a następnie dodaj adres URL strony, którą chcesz przetestować (aby narzędzie mogło ją pobrać do edycji WYSIWYG).

W tym przykładzie będziemy pracować nad poprawą współczynnika konwersji naszej strony głównej.

Po załadowaniu strony w narzędziu musisz skonfigurować elementy testowe.

Tutaj w Convert używamy 2 konwersji nazw dla części do edycji w testach wielowymiarowych:

• Sekcja, która odnosi się do elementu na stronie, który chcesz przetestować, takiego jak nagłówek lub wezwanie do działania, oraz
• Wariacja, która jest twoją edycją tego konkretnego elementu.

Zalecam wybranie jednej sekcji naraz do edycji i dodanie każdej odmiany.

Nadaj sekcji nazwę, np. „Nagłówek”, a następnie edytuj i dodaj odmiany dla tej sekcji. (Pamiętaj, aby zapisać każdą odmianę podczas pracy nad nią).

Następnie przejdź do następnej „sekcji” lub elementu, który chcesz przetestować. W tym przykładzie byłoby to ustawienie kolejnego ujęcia bohatera w tle, a następnie ustawienie wariantu tekstu przycisku CTA.

Krok 5: Upewnij się, że wszystko działa

Po skonfigurowaniu każdej odmiany przeprowadź test QA dla każdego nowego leczenia, aby upewnić się, że wszystkie działają i że każdy element rozsądnie do siebie pasuje. (Brak konkurencyjnych wezwania do działania lub niedopasowanych informacji/obrazów lub podwojenie koloru czcionki i przycisków).

Kliknij „zapisz i kontynuuj”, a załaduje się nowa strona. Następnie przejdź dalej i kliknij kartę „Raporty”.

Stąd zobaczysz odmiany stron i informacje na ich temat. Kliknij „ikonę oka” obok każdej strony, aby zobaczyć jej podgląd i przetestować działanie linków.

Tutaj możesz uruchomić test kontroli jakości i użyć tego samego adresu URL do testów mobilnych.

Krok #6: Prześlij to na żywo

Dopóki wszystkie odmiany działają, możesz teraz rozpocząć test i pozwolić mu działać, dopóki nie uzyskasz wystarczającej ilości danych.

(Zwróć uwagę, że istnieje możliwość wysłania testu na żywo bezpośrednio ze strony raportu, na której otwarto testy kontroli jakości).

Najlepsze narzędzia do testowania wielowymiarowego, które dojrzą Twój program optymalizacji

Teraz, gdy już wiesz, jak działa testowanie na wielu odmianach, podzielmy dostępne na rynku platformy optymalizacji witryn, które oferują testowanie na wielu odmianach. Omówimy ich funkcje wraz z cenami, jeśli oferują bezpłatne wersje próbne i kilka innych szczegółów.

Jedna szybka rzecz, zanim to zrobimy.

Pamiętaj, że narzędzie, którego używasz, jest TYLKO tak dobre, jak osoba, która je konfiguruje . Jeśli przepływy pieniężne są napięte, zainwestuj w kogoś, kto najpierw pomoże wewnętrznie (lub skontaktuj się z agencją zewnętrzną) i na razie użyj tańszego narzędzia.

Bardzo dobrze jest mieć niesamowite narzędzie do testowania MVT, ale nie ma sensu, jeśli dana osoba nie może go poprawnie skonfigurować, wystarczająco szybko lub zrozumieć danych!

#narzędzia zespołu

1. Konwertuj doświadczenia

Ocena G2 : 4.7/5.0 (46 recenzji)

Ceny: zaczynają się już od 699 USD miesięcznie, a następnie 199 USD na każde 100 000 odwiedzających.

Czy oferują bezpłatny plan lub okres próbny? Tak, 14-dniowy bezpłatny okres próbny bez karty kredytowej.

Koszt na 100 000 odwiedzających: 199 USD.

Plusy

• Pełna zgodność z prywatnością: żadne dane osobowe nie są nigdy przechowywane
• Dokładne raportowanie dzięki wykorzystaniu własnych plików cookie
• Szybko i bez migotania
• Uruchom nieograniczoną liczbę testów
• Układanie warunków z ponad 40 filtrami do kierowania na szczegółowe segmenty odbiorców
• Elastyczne wstawianie kodu JavaScript na poziomie projektu, eksperymentu i odmiany
• Wyzwalanie celu niestandardowego warunku JS
• Integruje się z ponad 100 narzędziami innych firm (np. Shopify, WordPress, Mixpanel, Hotjar)
• Czterokrotnie szybsza obsługa klienta przez telefon, e-mail i czat.

Cons

• Podstawowa segmentacja postów na planie Kickstart

Funkcje testowania wielowymiarowego : Pełna silnia. Oferujemy również bezpośrednie wsparcie i doradztwo podczas przeprowadzania tych testów

Po stronie klienta, po stronie serwera czy po obu stronach? Convert działa jako edytor WYSIWYG po stronie klienta, ale można go również skonfigurować po stronie serwera i uruchomić niestandardowy JS.

Czy służą przedsiębiorstwu? TAk. Jesteśmy narzędziem wybieranym przez takie firmy jak Sony, Jabra, Unicef ​​i inne.

Czy oferują obsługę klienta? Tak, od samego początku okresu próbnego. Jakiego typu? Czat na żywo, blog i baza wiedzy, a jeszcze więcej.

Czy zależy im na prywatności ? Jesteśmy w pełni zgodni z RODO. Przestaliśmy nawet używać narzędzi do naszej pracy wewnętrznej od innych firm, które nie spełniają RODO, tyle to dla nas znaczy.

Czy zależy im na świecie? TAk. To jest w naszym DNA. Sadzimy drzewa, prowadzimy programy społecznościowe, wspieramy różnorodność od pierwszego wniosku, przekazujemy darowizny na cele charytatywne i wiele więcej. Do licha, mamy 15-krotnie ujemną zawartość węgla.

Recenzja TrustRadius:

2. AB Smaczne

Ocena G2: 4.5/5.0 (76 recenzji)

Ceny: zaczynają się od 1900 USD/mies. dla 400 000 comiesięcznych testowanych użytkowników w ramach planu Essentials. Plan wzrostu kosztuje 3800 USD miesięcznie, podczas gdy plan Elite zaczyna się od 5700 USD miesięcznie.

Czy oferują bezpłatny plan lub okres próbny? Nie. Możesz poprosić o rozmowę demonstracyjną, aby zobaczyć nowe funkcje.

Koszt na 100 000 odwiedzających: około 475 USD.

Plusy:

• AI i ML wbudowane w optymalizację
• Przeprowadzaj nieograniczone eksperymenty
• Przejrzysty i łatwy w obsłudze interfejs użytkownika
• Łatwa konfiguracja i podgląd testów
• Dynamiczne widżety
• Wiele integracji
• Obszerne raporty analityczne
• Dostępna szeroka gama opcji targetowania wraz z personalizacją
• Niezawodna obsługa klienta
• Ceny są w średnim zakresie

Cons:

• Brak automatyzacji marketingu, która zapewniałaby wgląd w wyniki odbiorców (szczególnie w przypadku aktywnego eksperymentu) i czasami wymaga obsługi klienta.
• Kalkulator istotności statystycznej jest nieco podstawowy w swoim UX
• Integracja z Google Analytics jest złożona, wymaga kodowania
• Brak bezpłatnego okresu próbnego

Funkcje testowania wielowymiarowego: Pełna czynnikowa

Po stronie klienta, po stronie serwera czy po obu stronach? Obie

Frekwentysta czy bayesowski? Bayesowski.

Czy obsługuje Full Stack? TAk.

Gotowe na kluczowe wskaźniki internetowe? TAk. To narzędzie ładuje się szybko.

Ma ML lub AI? TAk.

Czy służą przedsiębiorstwu? TAk. Są narzędziem wybieranym przez takie firmy jak Disney, L'Oreal, Kalviyo i inne.

Czy oferują obsługę klienta? TAk. Mają bazę wiedzy i czat na żywo.

Czy zależy im na prywatności? TAk. Adresy IP użytkowników są wykorzystywane do tworzenia kodu identyfikacyjnego, a następnie natychmiast usuwane przed przejściem do narzędzia. Kody identyfikacyjne są anonimizowane, a następnie usuwane po 13 miesiącach.

Czy zależy im na świecie? Przekazują darowizny bezpośrednio na organizacje pozarządowe, współpracują z grupami akcji społecznej, zajmują się recyklingiem i sponsorują ule.

Recenzja TrustRadius :

Jak to narzędzie do testowania wielu odmian wygląda w działaniu:

3. Optymalizuj i Optymalizuj Google 360

Ocena G2: 4.3/5.0 (27 recenzji)

Ceny : istnieją 2 wersje tego narzędzia. Optymalizacja jest bezpłatna, ale w przypadku zaawansowanych funkcji musisz wybrać Optymalizację Google 360.

Cena Optymalizacji 360 jest niestandardowa (chociaż podobno wynosi około 150 000 USD rocznie). Aby uzyskać miesięczną cenę, musisz wypełnić formularz, aby skontaktować się z ich zespołem sprzedaży.

Czy oferują darmowy plan? TAk.

Koszt na 100 000 odwiedzających: nie dotyczy

Plusy:

• Przyjazny dla użytkownika — wymagana niewielka wiedza techniczna
• Świetne dla początkujących testerów A/B
• Szybka integracja z Google Analytics
• Ma bardzo szczegółową segmentację odbiorców dzięki ogromnym zasobom danych Google

Cons:

• Ograniczone do 5 testów na raz na bezpłatnym poziomie
• Brak funkcji edytora „przeciągnij i upuść”
• Nie można bezpośrednio przesłać zdjęć
• Nie można testować aplikacji, tylko przeglądarki
• Nie nadaje się do skomplikowanych testów
• UI/UX i raporty nie są tak atrakcyjne wizualnie jak większość innych narzędzi na rynku
• Czasami zdarza się migotanie.

Funkcje testowania wielowymiarowego: Najwyraźniej Optymalizacja wykorzystuje podejście hybrydowe, które nie jest ani w pełni czynnikowe, ani ułamkowe. Według ich bazy wsparcia

„Nasze modele pozwalają nam stosować podejście hybrydowe, więc nie musisz iść na ten kompromis. Obsługujemy wszystkie kombinacje testu, dzięki czemu możesz poznać interakcje i najlepsze kombinacje. Ale modelujemy również fakt, że niektóre warianty pojawiają się w różnych kombinacjach — dzięki czemu możemy dowiedzieć się o wariantach w ramach czynnika, a nie tylko o kombinacjach”.

Po stronie klienta, po stronie serwera czy po obu stronach? Obie.

Frekwentysta czy bayesowski? Google Optimize wykorzystuje metody bayesowskie zamiast metod częstych, znanych również jako testowanie istotności hipotezy zerowej (NHST).

Czy obsługuje Full Stack? TAk.

Gotowe na kluczowe wskaźniki internetowe? TAk. To narzędzie ładuje się szybko, chociaż może migotać, co może powodować problemy z CLS.

Ma ML lub AI? Nie.

Czy służą przedsiębiorstwu? Tak, ale tylko przez Optymalizację 360.

Czy oferują obsługę klienta? Mają centrum zasobów z poradami, samouczkami wideo, społecznością pomocy i nie tylko.

Czy zależy im na prywatności? Przestrzegają obowiązujących przepisów o ochronie danych w krajach, w których używane są ich produkty.

Współpracują również ze stronami trzecimi i organami ochrony danych, aby zapewnić bezpieczeństwo danych użytkowników.

Czy zależy im na świecie? Google jest neutralny pod względem emisji dwutlenku węgla od 2007 r. i planuje być wolny od emisji do 2030 r. Poza tym jest znany z licznych gestów filantropijnych z zaangażowaniem w wysokości 1 miliarda dolarów.

Recenzja TrustRadius :

Jak wygląda to narzędzie do testowania MVT w akcji:

4. Cel Adobe

Ocena G2: 4.0/5.0 (29 recenzji)

Cennik : Dostępne tylko po wypełnieniu 11-częściowego formularza, e-mailu i rozmowie telefonicznej. Stawka początkowa wynosi 10 000 USD miesięcznie.

Czy oferują bezpłatny plan lub okres próbny? Nie.

Koszt na 100 000 odwiedzających: nie dotyczy

Plusy

• Interfejs jest łatwy w użyciu
• Zapewnia dokładne raporty danych w czasie rzeczywistym
• Dobrze integruje się z Adobe Analytics i jest zaprojektowany jako oferta dodatkowa
• Narzędzia do personalizacji stron internetowych zarówno dla początkujących, jak i ekspertów
• Przeprowadzi Cię przez proces konfiguracji i testowania
• Posiada zaawansowaną sztuczną inteligencję do ciągłego testowania i ulepszania kampanii i personalizacji

Cons

• Optymalizacja na dużą skalę może być powolna
• Aby działać najlepiej, wymaga bardzo dużego ruchu
• Edytor formularzy wymaga nauki
• Wysoka cena
• Brak opcji próbnej
• Działa najlepiej, gdy już korzystasz z Adobe Analytics
• Po połączeniu z innymi płatnymi narzędziami Adobe Marketing Cloud można uzyskać świetne informacje

Funkcje testowania wielowymiarowego: Pełna silnia i Taguchi (jako metoda silni częściowej).

Po stronie klienta, po stronie serwera czy po obu stronach? Obie.

Czy służą przedsiębiorstwu? TAk. Niemal wyłącznie ze względu na koszty.

Czy oferują obsługę klienta? Tak, w formie bazy wiedzy i programów szkoleniowych wideo.

Czy zależy im na prywatności? Tak, ale jak na ironię wymagają podania adresu e-mail i numeru telefonu, aby dowiedzieć się więcej na ten temat. Wykonują jednak dużo pracy w danych 1st party w celu nieinwazyjnego śledzenia.

Czy zależy im na świecie? Bardzo tak. Opowiadają się za różnorodnością, pracują nad budynkami w 100% opartymi na energii odnawialnej, obniżają emisje, prowadzą programy działań społecznościowych i wiele więcej.

Recenzja TrustRadius :

Jak to narzędzie do testowania wielu odmian wygląda w działaniu:

5. Kameleon

Ocena G2: 4.7/5.0 (24 recenzje)

Ceny : Dostosowane do Twoich wymagań. Swoją unikalną cenę otrzymasz kontaktując się z zespołem sprzedaży.

Czy oferują darmowy plan? TAk.

Koszt na 100 000 odwiedzających: nie dotyczy

Plusy

• Łatwe w konfiguracji śledzenie kliknięć
• Płynna integracja z wieloma innymi narzędziami
• Posiada łatwy w użyciu edytor WYSIWYG dla nie-programistów
• Zaawansowana technologia zapobiegająca migotaniu
• Kompetentny i pomocny zespół wsparcia
• Dokładne i szczegółowe planowanie i wykonanie testów

Cons

• Edytor WYSIWYG ładuje się powoli
• Panel raportowania przydałby się nieco więcej personalizacji
• Potrzebujesz umiejętności na poziomie programisty, aby wdrożyć niektóre złożone scenariusze
• Nie można zarchiwizować testów
• Stare przeglądarki, takie jak IE7, są wyłączone z testów

Funkcje testowania wielowymiarowego: Pełna czynnikowa i ułamkowa czynnikowa (poprzez alokacje w konfiguracji testu).

Po stronie klienta, po stronie serwera czy po obu stronach? Obie. Możesz dokonywać edycji w edytorze WYSIWYG, a także używać wbudowanego edytora kodu Kameleoon do edycji CSS i JS.

Czy służą przedsiębiorstwu? TAk. Lexus, Unity, Providence, Toyota i Rakuten używają Kameleoon.

Czy oferują obsługę klienta? TAk. Możesz nawet otrzymać dedykowanego opiekuna klienta, który pomoże Ci w skomplikowanych projektach.

Czy zależy im na prywatności? Są zgodne z HIPAA, RODO i CCPA. Mają również elastyczną funkcję zarządzania zgodami, aby dostosować politykę prywatności dla każdego testu A/B.

Czy zależy im na świecie? Nie mogłem znaleźć dowodów na jakąkolwiek organizację charytatywną, którą sponsorują, ani na cele środowiskowe, które wspierają. Chociaż warto wiedzieć, że mają dwa żywe kameleony w swoich biurach w Niemczech i Francji.

Recenzja TrustRadius :

Jak wygląda to narzędzie do testowania MVT w akcji:

6. Optymalizuj

Ocena G2: 4.3/5.0 (109 recenzji)

Ceny : korzystają z niestandardowego modelu cenowego. Ale Splitbase przewiduje, że kosztują co najmniej 36 000 USD rocznie.

Czy oferują darmowy plan? Nie. Zatrzymali darmowy plan w 2018 roku.

Koszt na 100 000 odwiedzających : nie dotyczy

Plusy:

• Przeprowadzaj nieograniczone eksperymenty
• Przejrzysty i łatwy w obsłudze interfejs użytkownika
• Funkcja widżetu jest fajna w użyciu
• Dostępna szeroka gama zaawansowanych opcji kierowania
• Niezawodna obsługa klienta

Cons:

• Nie daje automatycznych statystyk dotyczących wyników odbiorców (szczególnie w przypadku aktywnego eksperymentu)
• Integracja z Google Analytics jest złożona, wymaga kodowania
• Fragment kodu Optimizely zwykle wydłuża czas ładowania strony

Funkcje testowania wielowymiarowego: pełna silnia, częściowa i taguchi.

Po stronie klienta, po stronie serwera czy po obu stronach? Obie. Optimizely oferuje eksperymenty po stronie klienta za pomocą fragmentu kodu JavaScript i eksperymenty po stronie serwera za pomocą deweloperskich pakietów SDK.

Frekwentysta czy bayesowski? Silnik statystyk Optimizely wykorzystuje eksperymenty sekwencyjne, a nie eksperymenty o stałym horyzoncie, które można zobaczyć na innych platformach.

Czy obsługuje Full Stack? TAk.

Gotowe na kluczowe wskaźniki internetowe? Tak, to narzędzie szybko się ładuje.

Ma ML lub AI? TAk.

Czy służą przedsiębiorstwu? Ze względu na ceny jest głównie przeznaczony na poziom przedsiębiorstwa. Korzystają z niego takie marki jak Microsoft, IBM, HP, eBay, Yamaha, Pizza Hut i Atlassian.

Czy oferują obsługę klienta? TAk. Mają bank zasobów, które pomogą użytkownikom odblokować i numery telefonów, aby zadzwonić po pomoc 24/7.

Czy zależy im na prywatności? Biorą pod uwagę stare i nowe przepisy dotyczące prywatności i integrują je ze swoimi produktami, dzięki czemu Ty, użytkownik, nie musisz się martwić o zgodność.

Czy zależy im na świecie? Większość nowo zatrudnionych osób jest wysyłanych na wolontariat w społeczności drugiego dnia.

Recenzja TrustRadius :

Jak to narzędzie do testowania wielu odmian wygląda w działaniu:

7. SiteSpect

Ocena G2: 4.4/5.0 (50 recenzji)

Ceny : Musisz skontaktować się z SiteSpect, aby uzyskać cenę dostosowaną do Twoich potrzeb.

Czy oferują darmowy plan? Tak, oferują bezpłatny okres próbny.

Koszt na 100 000 odwiedzających: nie dotyczy

Plusy:

• Obsługuje wszystkie języki znaczników (HTML, WML, XML i JSON), arkusze stylów i języki skryptowe
• Brak tagu javascript oznacza brak odświeżania treści lub migotania
• Wystarczająco wszechstronny, aby przetestować prawie każdy scenariusz
• Testy nieinwazyjne
• Integruje się z narzędziami analitycznymi
• Nie ma potrzeby modyfikowania wersji produkcyjnej kodu

Cons:

• Wiedza techniczna wymagana do wdrożenia testów
• Dodaje dodatkowy skok, który może nieco spowolnić działanie Twojej witryny
• Interfejs raportowania mógłby być lepszy

Funkcje testowania wielowymiarowego: Pełna silnia i ułamkowa silnia (narzędzie zaleca przejście na ułamkowe, jeśli testujesz więcej niż 128 kombinacji).

Po stronie klienta, po stronie serwera czy po obu stronach? Obie.

Frekwentysta czy bayesowski? SiteSpect wykorzystuje dwustronny test t przy porównywaniu Odmian z kontrolami w celu określenia punktu, w którym przedziały ufności nie nakładają się, a tym samym wskazują na istotność. SiteSpect oblicza również wskaźnik Z i używa go w raportach.

Czy obsługuje Full Stack? TAk.

Gotowe na kluczowe wskaźniki internetowe? TAk. To narzędzie jest niesamowicie szybkie.

Ma ML lub AI? TAk.

Czy służą przedsiębiorstwu? TAk. Staples, PetSmart, AmericanGirl i Urban Outfitters używają SiteSpect.

Czy oferują obsługę klienta? Obsługa klienta jest dostępna za pośrednictwem telefonu i poczty e-mail w wersjach bezpłatnych i płatnych. W ich bazie wiedzy dostępne są również wcześniej nagrane webinaria.

Czy zależy im na prywatności? Robią. Posiadają certyfikat PCI DSS 3.2; Zgodność z RODO, CCPA i Privacy Shield oraz zgodność z HIPAA.

Czy zależy im na świecie? SiteSpect jest znany ze sponsorowania niektórych projektów charytatywnych od 2014 roku.

Recenzja TrustRadius :

Jak to narzędzie do testowania wielu odmian wygląda w działaniu:

8. Testowanie VWO

Ocena G2: 4.2/5.0 (239 Recenzje)

Ceny : zaczynają się od 99 USD/mies. Wszystko więcej wymaga dostosowania cen do Twoich potrzeb. I będziesz musiał skontaktować się z zespołem sprzedaży VWO.

Czy oferują darmowy plan? Tak, możesz zacząć od 30-dniowego bezpłatnego okresu próbnego.

Koszt na 100 000 odwiedzających: ~500 USD

Plusy:

• Elastyczne opcje dostosowywania umożliwiające dostosowanie testu do wielu scenariuszy
• Łatwe planowanie i wykonywanie testów przy niewielkiej wiedzy na temat kodowania
• Dedykowany zespół wsparcia, który poprowadzi Cię przez wszelkie wyzwania
• Posiada możliwość śledzenia celów długoterminowych
• Możliwość grupowania testów razem
• Przydatne nagrania do obserwacji użytkowników i rozwiązywania problemów

Cons:

• Jest krzywa uczenia się, aby zrozumieć pełną funkcjonalność VWO
• Plany cenowe często się zmieniają
• Testują tylko stronę klienta

Funkcje testowania na wielu odmianach: Pełna czynnik (choć można ustawić procenty ruchu na odmianę strony).

Po stronie klienta, po stronie serwera czy po obu stronach? Tylko po stronie klienta.

Czy służą przedsiębiorstwu? TAk. Do ich klientów korporacyjnych należą Ubisoft, AMD, Penn Foster, Optimeria i IMB Bank.

Czy oferują obsługę klienta? Tak, możesz do nich zadzwonić, gdy potrzebujesz pomocy. Lub sprawdź ich stronę zasobów.

Czy zależy im na prywatności? TAk. Przestrzegają głównych przepisów i regulacji dotyczących prywatności, ale przechowują niektóre dane odwiedzających na swoich serwerach.

Czy zależy im na świecie? Niedawno prezes Wingify (marki stojącej za VWO) Paras Chopra, napisał na Twitterze swoje poparcie dla kilku inicjatyw pomocy na rzecz COVID, w tym utworzenia 10-łóżkowego ośrodka opieki nad COVID w Delhi.

Recenzja TrustRadius :

Jak wygląda to narzędzie do testowania MVT w akcji:

9: Optymalizacja trendów internetowych

Ocena G2: 4,9/5,0 (107 recenzji)

Ceny : zaczynają się od 212 USD miesięcznie, ale mogą być niższe lub wyższe w zależności od potrzeb. Mają bardzo elastyczną strukturę cen, ale musisz porozmawiać z zespołami sprzedaży, aby potwierdzić swoją cenę.

Czy oferują darmowy plan? Tak, za mniej niż 1500 sesji miesięcznie.

Koszt na 100 000 odwiedzających: nie dotyczy

Plusy:

• Przyjazny dla użytkownika, odpowiedni dla nietechnicznych użytkowników z edytorem WYSIWYG
• Obsługuje współpracę zespołową
• Daje spostrzeżenia oparte na danych
• Zespół wsparcia wykazuje szczere zainteresowanie Twoim sukcesem
• Płynna integracja z Twoją witryną i istniejącymi narzędziami
• Przejrzyste i proste raporty

Cons:

• Interfejs użytkownika może być trudny w użyciu dla nowych użytkowników
• Przygotowanie nawet prostych testów wymaga czasu
• Koszt pełnej usługi jest wysoki

Funkcje testowania wielowymiarowego: pełna silnia i ułamkowa silnia.

Po stronie klienta, po stronie serwera czy po obu stronach? Obie. Posiadają edytor wizualny bez proxy do renderowania po stronie klienta i możliwości testowania po stronie serwera.

Czy służą przedsiębiorstwu? Microsoft, London North Eastern Railway, Marks and Spencer i Virgin Wines używają Optimize.

Czy oferują obsługę klienta? TAk. Otrzymasz dostęp do wsparcia technicznego, szkoleń oraz własnego dedykowanego konsultanta ds. optymalizacji konwersji.

Czy zależy im na prywatności? Są w pełni zgodne z RODO.

Czy zależy im na świecie? W kwietniu 2021 r. Webtrends Optimize rzuciło wyzwanie 100 pompkom dziennie w wydarzeniu GoFundMe, aby zebrać fundusze na Cancer Research UK. I zrobili coś podobnego w 2020 roku o nazwie Xmas Charity Donations. Więc ich to obchodzi.

Recenzja promienia zaufania :

Chociaż istnieją recenzje tego narzędzia na Trust Radius, ostatnia była w grudniu 2019 r., a wcześniej w 2018 r. Ponieważ narzędzie może się zmienić, podobnie jak usługa, ściągnąłem ich najnowszą recenzję z G2.

Jak to narzędzie do testowania wielu odmian wygląda w działaniu:

Wniosek

Więc masz to.

Nasza lista najlepszych narzędzi do testowania A/B oferujących testowanie na wielu odmianach w 2021 r. Pokazujemy również, jakiej metody używają do testowania, ich funkcji, cen i recenzji.

Teraz możesz porównać najlepsze narzędzia wielowymiarowe pod kątem tych różnych parametrów i wybrać takie, które najlepiej sprawdzi się w Twoich testach.