Upewnij się, że Twoje testy A/B są niezawodne dzięki zapewnieniu jakości: Kompletny przewodnik po kontroli jakości Twoich testów A/B

Testy A/B, które nie działają poprawnie, nie są konwertowane.

Test A/B może skrócić czas, pieniądze i zasoby dla optymalizatorów. I oczywiście nikt nie chce, aby ich ciężka praca poszła na marne. Dlatego musisz przeprowadzić kontrolę jakości (QA) na stronach internetowych, stronach docelowych, personalizacjach, testach A/B, kampaniach e-mailowych itd., aby upewnić się, że wszystko działa tak, jak powinno .

A najlepszym sposobem na stworzenie prostych, łatwych w użyciu, intuicyjnych, bezbłędnych i wydajnych testów A/B jest zastosowanie odpowiedniego procesu kontroli jakości . W ten sposób odwiedzający otrzymują wartościowy, niezawodny i wysoce interaktywny produkt końcowy.

Kontrola jakości jest kluczem do zapobiegania katastrofom. Jego zdolność do wykrywania defektów i luk w zabezpieczeniach, zanim staną się krytyczne, pomaga optymalizatorom uniknąć wysokich kosztów w miarę postępu testowania.

Chociaż powszechnie wiadomo, że zapewnienie jakości jest ważne, wielu optymalizatorów tak naprawdę nie poświęca czasu na odpowiednią kontrolę jakości swoich testów. W rezultacie testy te często kończą się niepowodzeniem. Gdyby tak było, byłoby mniej stron internetowych, które „nie działały”.

Co to jest zapewnienie jakości?

Najpierw usuńmy kilka szybkich definicji.

Czym jest jakość?

Jakość przekłada się na „nadaje się do użytku lub celu”. W kontekście testów A/B funkcjonalności, designu, niezawodności, trwałości i ceny, chodzi o spełnienie potrzeb i oczekiwań klientów .

Co to jest gwarancja?

Pewność to po prostu pozytywna deklaracja dotycząca testu A/B, która wzbudza zaufanie. To pewność, że test A/B będzie działał poprawnie i zgodnie z oczekiwaniami lub wymaganiami.

Zapewnienie jakości w testach A/B

Mówiąc najprościej, zapewnienie jakości to technika pozwalająca ustalić jakość testu A/B . Łączy optymalizatorów i programistów, aby zapewnić, że wszystko wygląda i działa prawidłowo na wszystkich odpowiednich urządzeniach i przeglądarkach.

Innymi słowy, witryna (lub strona docelowa, odmiana, kampania e-mailowa itd.) musi być wysokiej jakości, aby uniknąć narażania odwiedzających na tarcia i inne problemy.

Testowanie użytkownika:

• Bada, w jaki sposób prawdziwi ludzie korzystają ze strony internetowej i czym różni się ona od zamierzeń twórców
• Wykrywaj potencjalne nieporozumienia odwiedzających i punkty tarcia w rzeczywistym środowisku użytkowania.

Zapewnienie jakości:

• Wykrywa błędy i zepsute elementy na stronie
• Poprawia wydajność witryny

Są więc różne, a kontrola jakości jest znacznie szerszym terminem.

Dlaczego kontrola jakości jest ważna w testach A/B?

Jasne, kilka błędów tu i tam jest irytujących .

Ale czy w ostatecznym rozrachunku wpływają na wynik finansowy? Czy kontrola jakości jest warta zainwestowania większej ilości środków? Jaka to różnica, jeśli rzeczy nie są idealne?

Chociaż pokonaliśmy znaczne przeszkody w zapewnianiu jakości, wiele organizacji nadal go nie docenia.

Dowiedzmy się, jakie są największe zagrożenia wpływające na QA i dlaczego odgrywa tak dużą rolę w testach A/B.

Optymalizatory i programiści są zbyt blisko testów A/B

Optymalizatory i programiści zwykle współpracują ze sobą, aby skonfigurować testy A/B. Są tak blisko siebie, że łatwo przeoczyć drobne, ale kluczowe aspekty, gdy zajmują się zapewnianiem jakości.

Jednak testerzy QA dbają o jakość. Wykonują nieoczywiste funkcje, które napędzają aplikację w „nieoczekiwany sposób”, często nigdy nie zamierzony. Testerzy QA odmawiają zaakceptowania, że ​​„błędy zostały naprawione”, chyba że mają dowód. Nie boją się próbować nowych rzeczy i ponosić porażki. Jeśli nie znajdą błędu za pierwszym razem, stają się bardziej kreatywni podczas testowania i dostosowują go do oczekiwanych standardów.

Druga para oczu na testach A/B i jego konstrukcji może ujawnić nieoczekiwane wady.

Emulatory nie są prawdziwą okazją

Użytkownicy końcowi nie używają emulatora; zamiast tego rzeczywiste urządzenie z przeglądarką. Całkowicie możliwe jest pominięcie problemów związanych z przeglądarką, jeśli nie zbadasz ich na prawdziwych urządzeniach lub przeglądarkach.

Widzieliśmy wiele przypadków pomocy technicznej, w których użytkownicy są całkiem pewni, że ich eksperyment A/B działa poprawnie na BrowserStack (symulując wygląd testu A/B w różnych przeglądarkach). Ale uruchamiając test dla prawdziwych odwiedzających, kontaktują się z naszymi agentami wsparcia, aby zgłosić awarię testu A/B.

Prawdziwy przypadek pomocy technicznej:

Mam problem z konwersją w moim projekcie.

Click_Cart_Checkout_1 nie uruchamia się na iPhonie XR/Safari. Sprawdziłem konsolę narzędzi deweloperskich na obu (chrome://inspect i łączenie iPhone'a z macbookiem) i widzę kod wykonywany dla tej konwersji, ale nie jest on śledzony w raportowaniu.

Konwersja jest śledzona podczas używania XR do emulacji iPhone'a w devtools, ale nie w testach w świecie rzeczywistym.

Testowaliśmy na dwóch oddzielnych iPhone'ach. Nasz tester QA i mój.

Możesz nie być w stanie sprawdzić, czy konfiguracja metryk jest prawidłowa, chyba że przeprowadzisz ręczną kontrolę jakości w różnych przeglądarkach. Po kilku tygodniach możesz nawet sprawdzić swoje wyniki i odkryć, że w niektórych przeglądarkach podstawowe działanie nie jest uruchamiane prawidłowo lub wcale!

Dlatego upewnij się, że przeprowadzasz kontrolę jakości swoich testów w różnych środowiskach, nie tylko w emulatorach.

Interakcje

Możesz również przeoczyć błędy związane z interakcjami ze stroną lub odmianami, jeśli nie zbadasz odmian ręcznie . Może to prowadzić do prostych problemów, takich jak trudności z otwarciem akordeonu, naciśnięciem przycisku lub czymś znaczącym, co wpływa na cały lejek.

Prawdziwy przypadek pomocy technicznej:

Na stronie z odmianami mamy problemy z przyciskiem Do kasy i czasami napotykamy problemy z przyciskiem PayPal, chociaż na oryginalnej stronie wszystko działa dobrze.

Kiedy klikam przycisk kasy, przekierowuje mnie tutaj: cart.php/checkout.php ale powinno być /checkout.php

Mamy też problemy z Logo; czasami to pokazuje, czasami nie.

Testy A/B to nie tylko dodawanie nowych elementów do odmian strony oraz to, jak te elementy wzajemnie ze sobą współdziałają i jak poprawiają ogólną funkcjonalność witryny.

Punkty przerwania i zmiana trybu wyświetlania urządzenia

Jeśli używasz emulatorów, możesz przeoczyć problemy ze zmianą trybu urządzenia z pionowego na poziomy lub odwrotnie. Możesz szybko sprawdzić, czy odmiana jest wyświetlana poprawnie w obu trybach i czy użytkownik przełącza się między nimi, zapewniając jakość na rzeczywistych urządzeniach mobilnych lub tabletach.

Prawdziwy przypadek pomocy technicznej:

Przeprowadziliśmy test na wielu odmianach w naszym projekcie, a klient zauważył, że obrazy wyświetlały się nieprawidłowo w mobilnym trybie poziomym. Czy mogę uzyskać twoją pomoc w ustaleniu dlaczego?

Testy z ludzkiej perspektywy

Tylko ręczna kontrola jakości wykonywana przez człowieka może stwierdzić, kiedy coś wydaje się „dziwne”. Zautomatyzowane metody testowe nie wychwytują tych wad wizualnych. Inżynier ds. kontroli jakości może znaleźć problemy z użytecznością i usterki interfejsu użytkownika (UI) poprzez interakcję ze stroną internetową tak, jakby był użytkownikiem. Zautomatyzowane skrypty testowe nie mogą ich przetestować.

Co się stanie, jeśli nie sprawdzisz testów A/B?

Teraz, gdy jasne jest, że kontrola jakości może oznaczać różnicę między sukcesem a porażką w biznesie, zobaczmy, co się stanie, jeśli ją zignorujesz (wskazówka: to nie jest ładne) .

Opóźnienia w uruchomieniu testów A/B

Aby zapewnić powodzenie testu A/B, ważne jest wcześniejsze zarezerwowanie wystarczającej ilości czasu na zapewnienie jakości. Obejmuje to upewnienie się, że wszystkie elementy sieci lub aplikacji działają poprawnie i spełniają potrzeby biznesowe i klientów. Kontrola jakości pomaga zidentyfikować i naprawić problemy przed rozpoczęciem testów, aby uniknąć opóźnień w uruchomieniu.

Błędy w wynikach raportu

Bez kontroli jakości pojawiają się błędy zmienności i mogą powodować błędy statystyczne w wynikach raportu.

Wynik fałszywie dodatni (znany również jako błąd typu I ) występuje, gdy wyniki testu wykazują istotną różnicę między oryginałem a zmiennością, gdy jej nie ma. Innym błędem jest fałszywie negatywny (inaczej błąd typu II ), gdy wyniki nie wykazują znaczącej różnicy między zmiennością a oryginałem, ale jest jedna.

Słaba kompatybilność

Twoi goście uzyskują dostęp do Twoich usług z różnych lokalizacji i przeglądarek.

Kompatybilność z urządzeniami i językami, o których powinieneś pomyśleć i przetestować, jeśli to możliwe. Twoim obowiązkiem jest upewnienie się, że Twoja aplikacja działa w różnych przeglądarkach, zwłaszcza we wszystkich wersjach.

Frustracja klientów i utrata reputacji

Czy wiesz, że niezadowoleni konsumenci częściej zostawiają opinię publiczną niż zadowoleni klienci?

Reklamacje online i offline, a także porzucenie produktu to zła wiadomość dla Twojej firmy. Z powodu negatywnych informacji inni potencjalni nabywcy niechętnie kupują produkt. Kilku niezadowolonych (i szczerych) klientów może oznaczać mniejsze zaufanie do Twojej marki. Jeśli konsumenci opublikują negatywną recenzję online, ich niezadowolenie może wpłynąć na przyszłe zakupy.

Brak zaufania do narzędzia do testowania A/B

Jedynym powodem, dla którego marki inwestują w rozwiązanie do testów A/B, jest przede wszystkim podejmowanie świadomych decyzji i zapewnianie swoim odwiedzającym możliwie najlepszych doświadczeń online. Nie możesz liczyć na to, że Twoje wysiłki optymalizacyjne przełożą się na znaczące korzyści, jeśli nie możesz zaufać swojemu rozwiązaniu do testowania A/B.

Upewniając się, że wszystkie testy A/B są gwarantowane pod względem jakości, będziesz wiedzieć, że dane są gromadzone w odpowiedni sposób, a Twoje działania optymalizacyjne przynoszą użytkownikom realne korzyści .

Kwestie techniczne w testach A/B mają kluczowe znaczenie, ponieważ stanowią poważne ryzyko dla marek, w tym utratę danych, zniekształcone raportowanie i stronnicze podejmowanie decyzji. Mają też poważne konsekwencje finansowe. Marki muszą w pełni zaufać swojemu rozwiązaniu, ponieważ jest to narzędzie decyzyjne, które bezpośrednio wpływa na wzrost współczynników konwersji oraz sprzedaży i przychodów.

Biznes cierpi z powodu utraty sprzedaży

Masz tylko jedną szansę, aby zrobić pierwsze wrażenie. To prawda na wiele sposobów, a jeśli nie poświęcisz czasu na kontrolę jakości, możesz zostawić pieniądze na stole.

Pozornie małe rzeczy, takie jak zapobieganie postępom w realizacji transakcji lub niepokazywanie CTA, mogą spowodować, że Twoi klienci opuszczą Twój sklep. Musisz to wszystko przetestować, aby wzbogacić doświadczenie klienta .

Kluczem do sukcesu i zadowolenia klienta jest dostarczenie produktu wysokiej jakości. Zadowoleni klienci wracają i mogą nawet polecać innych.

4 najlepsze praktyki w testach QA A/B

Jeśli doczytałeś do tego momentu, oznacza to, że rozumiesz wartość zapewniania jakości i chcesz dowiedzieć się o nim więcej. Ale jakie części testu A/B możesz sprawdzić? A jakie są najlepsze praktyki do naśladowania?

Oto kilka sposobów na rozpoczęcie pracy.

1. Opracuj strategię zapewniania jakości

Zanim przeprowadzisz kontrolę jakości testów A/B, stwórz strategię lub ustal ustrukturyzowany proces. Powinna mieć jasny cel i określone standardy jakości, w odniesieniu do których można mierzyć QA.

Porozmawiaj także o problemach z zespołami programistycznymi i optymalizacyjnymi. Sprowadź wszystkich zaangażowanych na tę samą stronę, biorąc pod uwagę różne perspektywy i ustalając wspólne cele i standardy.

Twoja strategia kontroli jakości powinna być również zgodna z celami konwersji . Jeśli czas i zasoby, które poświęcasz na zapewnienie jakości, ostatecznie nie przyczyniają się do konwersji, być może będziesz musiał przemyśleć cały proces.

Czego zazwyczaj potrzebujesz, aby zbudować przydatną strategię?

• Przygotowanie podstaw i przypisanie ról
• Wiedząc dokładnie, co do kontroli jakości
• Prognozowanie problemów, które mogą się pojawić i sposoby ich rozwiązywania
• Warianty aukcji
• Identyfikacja, dla kogo przeznaczona jest kontrola jakości (docelowa grupa użytkowników)
• Wyznaczanie standardów zapewniania jakości

2. Określ, co należy poddać kontroli jakości w teście A/B

Zapewnienie jakości testu A/B może być dość żmudne i skomplikowane, jeśli nie wiesz, co i jak przygotować się do kontroli jakości. Oto niektóre z najważniejszych aspektów do rozważenia.

Elementy na stronie

Elementy na stronie są podstawą testu A/B. Ponieważ są skierowane do klientów i bezpośrednio wpływają na szybkość strony i wrażenia użytkownika, musisz stale testować je pod kątem jakości. Zanim zaczniesz, przygotuj listę wszystkich elementów do kontroli jakości. Powinno to stanowić większą część strategii zapewniania jakości polegającej na przeprowadzaniu udanych audytów, skróceniu czasu realizacji oraz identyfikowaniu i naprawianiu rażących słabości i problemów witryny.

Niektóre krytyczne obszary, na których powinieneś się skoncentrować:

• Szybkość i responsywność strony: są to najistotniejsze i pomijane w kontroli jakości. Wiele dynamicznych czynników witryny wpływa na wydajność i responsywność strony. I chociaż możesz ocenić te czynniki pod kątem poszczególnych funkcji, przyglądając się, czy spowalniają one Twoją witrynę i jak mogą mieć znaczenie. Musisz stworzyć większy obraz i zbadać wszystkie możliwości responsywnego projektu, mając na uwadze zarówno wydajność witryny, jak i wrażenia klientów.
• Typ urządzenia: rozdzielczości ekranu różnią się w zależności od urządzenia, z którego uzyskuje się dostęp do strony. Jest to niezwykle ważne podczas testowania dla odbiorców mobilnych, w których rozdzielczości mają duży wpływ na zachowanie użytkowników. Aby zapewnić wysoką jakość usług, musisz określić, z jakiego urządzenia korzystają Twoi konsumenci. Śledź wzorce i odpowiednio kontroluj swoje elementy testowe (dla tych urządzeń).
• Grafika i elementy wizualne: Wszystkie elementy graficzne i wizualne strony powinny zostać poddane kontroli jakości, co ma wpływ na wydajność strony i czas ładowania. W idealnym przypadku musisz zrozumieć, jak używać obrazów w testach A/B. Każdy obraz, którego używasz, powinien być synchronizowany ze strukturą i projektem witryny oraz prawidłowo ładowany na różnych urządzeniach.
• W zasadzie wszystko: czy formularze na stronie działają poprawnie? Czy jakiekolwiek zmiany w nich wpłynęły na jakość witryny? Jak wygląda stary kontra nowy? Możemy omówić setki elementów do kontroli jakości na stronie, ale nadal nie trafiamy w sedno. Dlatego powinieneś znać każdy najmniejszy szczegół, który wymaga walidacji i testowania. A jak to robisz? Poprzez ciągłe sprawdzanie i zapewnianie rezultatów, jakie przyniosą Twoje zmiany.

Integracje z narzędziami innych firm

Jeśli masz skonfigurowaną integrację Google Analytics (lub dowolnego innego interfejsu innej firmy, takiego jak Google Analytics, Mixpanel lub Kissmetrics), aby przesyłać dane dotyczące odmian między platformami, upewnij się, że dane przepływają płynnie i dokładnie.

Miganie lub migotanie

Usuń wszelkie migotanie przed uruchomieniem testu.

Korzystając z asynchronicznego fragmentu kodu w swojej witrynie, możesz zobaczyć oryginał przed załadowaniem odmiany. Aby zapewnić odwiedzającym płynną obsługę witryny, przełącz się na „stronę synchroniczną”. Przez krótki czas ładowania oryginał jest ukryty, a odwiedzający widzi tylko odmianę

Wiele przeglądarek i wiele urządzeń

Jednym z najczęstszych problemów z testowaniem A/B jest „zgodność przeglądarki i urządzenia”. Sprawdź, jak odmiana pojawia się w najpopularniejszych przeglądarkach, w tym Chrome, Safari, Firefox, Edge i typach urządzeń, komputerach stacjonarnych, tabletach i telefonach komórkowych.

To, że Twoja witryna jest responsywna, nie oznacza, że ​​będzie się wyświetlać i działać poprawnie na wszystkich urządzeniach. Nadal musisz przeprowadzić kontrolę jakości, pamiętając o problemach związanych z urządzeniami mobilnymi . Pamiętaj, że dobre „doświadczenie na komputerze” to nie to samo, co dobre „doświadczenie mobilne”.

Nadal musisz przeprowadzić kontrolę jakości. Należy również wziąć pod uwagę problemy związane z urządzeniami mobilnymi. Pamiętaj, że dobre wrażenia na komputerach to nie to samo, co dobre wrażenia na urządzeniach mobilnych.

Talia Wolf, konsultantka ds. optymalizacji konwersji w GetUplift, dość dobrze podsumowuje problemy występujące na różnych urządzeniach i proponuje kilka możliwych rozwiązań:

Podejście Talii do użyteczności urządzeń rzuca światło na więcej niż tylko zwykłe aspekty korzystania z urządzenia, zasadniczo skupiając się na obszarach, które umożliwiają łatwą nawigację i prostą obsługę. Aby zapewnić odpowiednią jakość, musisz wyjść poza granice i rozważyć istniejące i przyszłe możliwości urządzenia.

3. Skoncentruj się na doświadczeniu strony

Po co podejmujesz wszystkie wysiłki, jeśli ostatecznie nie poprawią one jakości strony? Funkcjonalność strony znacząco wpływa na jakość strony i powinna być niezwłocznie poddana kontroli jakości.

• Interakcja użytkownika: Zacznij od przeanalizowania interakcji użytkownika ze stroną. Wymień różne punkty styku interakcji i skategoryzuj je na podstawie ich technicznych aspektów. Upewnij się, że sprawdziłeś najdrobniejszy szczegół. Czy wszystko jest klikalne i odpowiednio przekierowywane? Jak wygląda zawis w nawigacji? Czy są jakieś usterki na stronie lub wyzwalacze odrzuceń?
• Czas wczytywania strony: przed uruchomieniem testu A/B i zaraz po jego uruchomieniu sprawdź czas wczytywania strony. Wszelkie różnice w czasie wczytywania strony są zwykle nieistotne, ale ponownie sprawdź zmiany odmian, jeśli zauważysz znaczny wzrost. Może to być spowodowane długimi ładowaniem zmian wprowadzonych w odmianie lub szybkością fragmentu kodu śledzenia.

Warto zauważyć, że czas wczytywania jest dłuższy niż zwykle podczas przeprowadzania kontroli jakości za pomocą narzędzia testowego – niedokładne przedstawienie rzeczywistego czasu ładowania strony.

Dodatkowo podgląd testu w różnych wariantach gwarantuje jego prawidłowe ładowanie i uzyskanie oczekiwanych wyników.

4. Dostosuj kontrolę jakości do celów konwersji

Testy A/B są prekursorem konwersji. Jeśli Twoje testy ostatecznie nie są zgodne z celami konwersji i testów A/B, jesteś na dłuższą metę i ryzykujesz wyczerpanie istniejących zasobów.

Jeśli słowa Briana są przydatne, wszystkie omówione wcześniej elementy powinny nie tylko przenosić użytkowników w dół ścieżki konwersji, ale także prowadzić do konwersji . Możesz testować i próbować ponownie testować tylko tak długo, jak masz czas, ludzi i budżet. Wymaga to zoptymalizowania wszystkich tych obszarów w sposób, który wpłynie na wyniki finansowe i zapewni ciągłość działania firmy.

Oto przypadek użycia:

Jeśli uruchomisz selektory CSS w swojej konsoli, możesz sprawdzić, czy wyprodukowane elementy są tym, czego szukasz. Jeśli coś się odbiega, sprawdź, czy wyrażenia regularne nie były wystarczająco wąskie. Aby mieć pewność, weź kilka adresów URL witryn i uruchom je za pomocą narzędzia takiego jak RegEx Pal. Dotyczy to zarówno przeprowadzania testów, jak i śledzenia konwersji. Możesz dodatkowo sprawdzić, czy przeprowadzasz test na stronach, które nie są do tego przeznaczone?

To wszystko może wydawać się dużo, ale proces powinien być podobny do szeroko zakrojonych testów, które przeprowadzasz przy wydawaniu nowej witryny/aplikacji, co może zająć wiele dni i dużo wysiłku.

Dlaczego kontrola jakości nie jest wykonywana prawidłowo

Następujące czynniki przyczyniają się do tego, że Twoje testy A/B nie są odpowiednio sprawdzane.

Ograniczenia czasowe

Zespoły programistyczne są pod ciągłą presją, aby utrzymać wysokie tempo testów podzielonych, aby osiągnąć szybszy wzrost. Jednak testy A/B są bardziej podatne na nieprawidłowe wdrożenie pod takim obciążeniem.

Źle zaimplementowane kody śledzenia

To prosty błąd, który może mieć ogromne konsekwencje. Gdy niewłaściwie zaimplementujesz kody śledzące lub zupełnie o nich zapomnisz – dane z testu A/B stają się bezużyteczne, ponieważ nie będzie możliwości sprawdzenia, który wariant lepiej przekształcił odwiedzających w leady i klientów.

Brak jasnych hipotez

Nowe hipotezy są testowane na Twojej oryginalnej stronie w testach A/B – nic więcej, nic mniej . I muszą być odpowiednio nakreślone i zdefiniowane.

Na przykład możesz chcieć sprawdzić, czy dodanie cytatu z dyrektora generalnego zwiększa lub zmniejsza współczynnik konwersji strony docelowej. Hipoteza zerowa mówi, że kwotowanie zintegrowane nie ma znaczącego wpływu na współczynnik konwersji. Możesz sformułować ukierunkowaną hipotezę: uwzględnienie oferty daje znacznie wyższy współczynnik konwersji .

Nieodpowiednia wielkość próbki

Może tak być w przypadku małych sklepów internetowych i stron internetowych, w których testy nie są przydatne lub nieodpowiednie. Ze względu na małą wielkość próbki wyniki są podatne na dużą zmienność i zniekształcenia.

Im „mniejsza” próba, tym „większe” prawdopodobieństwo niedokładności estymacji.

Problemem mogą być również zbyt duże próbki. Nawet niewielkie różnice średnich stają się znaczące w dużych próbach, gdy używa się danych w skali interwałowej, takich jak pomiar długości pobytu. Obliczenie wielkości efektu i idealnej wielkości próbki może pomóc w rozwiązaniu tego wyzwania.

Jak konwersja pokonuje typowe wyzwania związane z kontrolą jakości

Każda firma wprowadzająca eksperymenty do swojej strategii marketingu cyfrowego powinna włączyć środki kontroli jakości do swoich operacyjnych przepływów pracy , takie jak certyfikacja integracji i podgląd doświadczeń przed uruchomieniem.

W Convert łączymy wiele elementów układanki, aby w możliwie najprostszy sposób stworzyć spersonalizowaną strategię . Pomogliśmy setkom firm poprawić ich zdolność do tworzenia, testowania, sprawdzania i uruchamiania doświadczeń dzięki naszym różnorodnym narzędziom i zasobom.

Pozwól nam pokazać, czym one są i jak mogą stanowić kompleksowe rozwiązanie wszystkich Twoich problemów z kontrolą jakości.

Debuger konwersji Google Chrome

Nasze rozszerzenie Google Chrome wyświetla „dzienniki konwersji skryptów” do konsoli Narzędzi dla programistów Chrome. Obejmuje eksperymenty i pewne wyzwalane odmiany. To narzędzie umożliwia określenie sekwencji zdarzeń testowania i dostarcza cennych informacji podczas debugowania testu.

Pamiętaj: używaj tego debugera podczas całego procesu kontroli jakości, aby zdecydować, czy bierzesz udział w eksperymencie i obserwujesz odmiany.

Często spotykamy się z oryginalną odmianą i błędnie zakładamy, że eksperyment nie działa. Aby rozwiązać ten problem, zalecamy włączenie rozszerzenia i przeprowadzenie kontroli jakości w sesjach incognito. Wszystkie odwołania do odmian i eksperymentów w danych wyjściowych debugera mają odpowiednie identyfikatory.

Podgląd adresów URL odmian

Te adresy URL obsługują opracowywanie lub szkicowanie środowiska za pomocą Edytora wizualnego . Podczas działania eksperymentalny tester kontroli jakości powinien przechodzić między tymi adresami URL a widokiem Edytora wizualnego. Widok może nie być do końca dokładny, ponieważ okno edycyjne ma tylko jedną ramkę. Ponadto kod, który wprowadza zmiany w edytorze, jest uruchamiany wielokrotnie, co zapewnia lepsze wrażenia użytkownika .

Podczas wyświetlania podglądu odmian adresów URL pamiętaj o kilku rzeczach:

• Warunki dotyczące obszaru witryny i odbiorców nie są brane pod uwagę podczas podglądu za pomocą „adresu URL podglądu na żywo”.
• Zmiany są wprowadzane w adresie URL strony, do której dołączane są parametry. Służy to do łatwego testowania różnych widoków.

Wymuś adresy URL odmian

Adresy URL Force Variation oferują jednoznaczną perspektywę testowania. Dzięki nim możesz przetestować swój eksperyment w środowisku podobnym do środowiska odwiedzającego.

Pamiętaj: tych adresów URL należy używać do końcowego testowania eksperymentu.

Odmiany obsługiwane za pomocą tego adresu URL są dostarczane z serwera CDN używanego do obsługi eksperymentów.

Podczas korzystania z adresu URL Force Variation warunki testu są oceniane, więc upewnij się, że są zgodne. Pamiętaj też, że konfiguracje celów często zawierają warunki adresu URL. To może być powód, dla którego Twoje cele nie są uruchamiane z adresem URL Force Variation.

Korzystanie z parametrów zapytania w odbiorcach kontroli jakości

Możesz ograniczyć użytkowników, którzy widzą Twój eksperyment, dodając do niego odbiorców kontroli jakości.

Aby utworzyć „Nowych odbiorców”, możesz użyć warunku takiego jak:

Średni: pasuje dokładnie qa

Odbiorcy kontroli jakości umożliwiają „aktywację” i weryfikację testu bez dołączania do niego odwiedzających.

• Najpierw przypisz grupę docelową do eksperymentu.
• Otwórz nowe okno incognito w przeglądarce, aby przetestować.
• Nie otwieraj drugiej karty i upewnij się, że żadne inne okna incognito nie są otwarte.
• Po zakończeniu bieżącego testu zamknij okno i otwórz nowe okno dla każdego nowego testu.

Najczęściej odwiedzasz adres URL zgodny z warunkami „Obszar witryny”. W zależności od struktury eksperymentu w niektórych przypadkach można najpierw odwiedzić inną stronę, a następnie przejść do obszaru witryny, który uruchamia eksperyment. W obu przypadkach pamiętaj o dodaniu parametru zapytania do pierwszego odwiedzanego adresu URL . Ten parametr jest zapisywany nawet po przejściu do innych stron.

Jeśli zastosujesz się do powyższych instrukcji, zobaczysz każdą odmianę eksperymentu wybraną losowo. Ponadto, jeśli nie rozpocząłeś jeszcze adresu URL zgodnego z warunkami obszaru witryny, możesz odwiedzić ten, który to robi. Powinieneś wtedy zobaczyć „Oryginał” lub jedną z odmian, w zależności od tego, co losowo wybierze eksperyment.

Pamiętaj: dodanie odbiorców kontroli jakości może wpłynąć na możliwość dopasowania warunków dotyczących obszaru witryny i docelowego adresu URL.

Dzienniki na żywo

Dzienniki na żywo w środowiskach konwersji śledzą interakcje użytkowników końcowych ze stronami internetowymi i eksperymentami na poziomie projektu i eksperymentu w czasie rzeczywistym. Przechwytują informacje, takie jak sygnatura czasowa uruchomienia celu, rodzaj uruchamianego zdarzenia, odmiana prezentowana użytkownikowi końcowemu i inne.

Tutaj możesz kliknąć w dowolnym miejscu w wierszu, aby wyświetlić więcej szczegółów aktywności, takich jak nazwa eksperymentu, typ przeglądarki, urządzenie używane do uzyskania dostępu do eksperymentu, kraj użytkownika, cele zrealizowane podczas wizyty itd.

Dzięki dziennikom na żywo możesz śledzić i monitorować przebieg konwersji. Ułatwiają również weryfikację konfiguracji i debugowanie wszelkich problemów wykrytych podczas konfiguracji testowej lub konwersji. Dzienniki na żywo działają również jako źródło ułatwiające śledzenie przychodów i weryfikowanie eksperymentu oraz ustalonych celów.

Patrz w przyszłość, zawsze!

Testy A/B QA są niezbędne, aby Twoja witryna była w pełni funkcjonalna i wolna od błędów. Kontrola jakości nie tylko pomaga rozwiązywać bieżące problemy, ale także kładzie podwaliny pod zapobieganie przyszłym problemom.

Jednak przygotowanie procesu kontroli jakości może być trudne. Przy tak dużej liczbie potencjalnych użytkowników na wielu urządzeniach o różnych celach i ambicjach trudno jest wiedzieć, od czego zacząć i jakie pytania zadać.

Zapytaliśmy społeczność zajmującą się optymalizacją współczynnika konwersji o znaczenie kontroli jakości.

Odpowiedź była jednoznaczna.

Według 100% respondentów procedura QA jest ważna dla powodzenia eksperymentu.

Połączyliśmy najlepsze praktyki kontroli jakości z całej branży ze spostrzeżeniami certyfikowanych partnerów firmy Convert, aby stworzyć obszerną listę kontrolną, której będziesz używać wielokrotnie.

Powyższa lista kontrolna nie jest kompletną listą wszystkiego, co powinieneś sprawdzić, ale raczej punktem wyjścia do myślenia o tym, co należy zrobić przed uruchomieniem testów A/B. Należy pamiętać, że kontrola jakości jest podróżą, a nie celem i powinna być wykonywana regularnie i podczas dużych zmian.