Testowanie serii map myśli: jak myśleć jak CRO Pro (część 8)

Wywiad z Deborah O'Malley z GuessTheTest

Dane to nowa waluta biznesu. Jeśli nie wykorzystujesz aktywnie danych do kwestionowania założeń i sprawdzasz, czy twoje hipotezy są aktualne, działasz w niekorzystnej sytuacji.

Jednym ze sposobów na to jest testowanie. Ale nie zawsze łatwo jest wiedzieć, które testy należy przeprowadzić i co oznaczają wyniki. A nawet jeśli dobrze rozumiesz CRO, zawsze istnieje szansa, że ​​w twoich testach mogą wystąpić błędy, które mogą unieważnić wyniki.

Na szczęście nie jesteś w tym osamotniony.

Seria Testing Mind Map pomoże Ci w prawidłowym nastawieniu i nauczy Cię, jak pewnie wykonywać testy.

W tym wywiadzie rozmawiamy z Deborah O'Malley z GuessTheTest, która w wieku ośmiu lat przeprowadziła swój pierwszy eksperyment optymalizacyjny. Dzieli się najlepszymi zasobami do przeprowadzania eksperymentów i przedstawia sprawdzone strategie, które pomogą w następnych testach.

Deborah, opowiedz nam o sobie. Co zainspirowało Cię do rozpoczęcia testów i optymalizacji?

Kiedy miałem zaledwie osiem lat, nieświadomie przeprowadziłem swój pierwszy eksperyment optymalizacyjny!

Na potrzeby mojego szkolnego eksperymentu naukowego wycinałem różne kształty i kolory z papieru budowlanego, umieszczałem je na tablicy i pytałem ludzi, którą wersję widzieli jako pierwszą.

Niewiele wiedziałem, że będzie to mój pierwszy eksperyment z okulografią…

Szybko do przodu, wiele lat później, skończyłem jako magister ze specjalizacją w technologii eye-tracking!

Moja praca badawcza dotyczyła tego, jak najlepiej zaprojektować przyciągające uwagę reklamy. Odkrycia zostały opublikowane w sześciu recenzowanych artykułach w czasopismach naukowych i stanowią źródło inspiracji dla marketerów cyfrowych na całym świecie.

Po ukończeniu studiów magisterskich zacząłem przeprowadzać testy User Experience (UX) z lokalną firmą UX.

W ramach mojego szkolenia firma zaleciła mi sprawdzenie zasobu o nazwie WhichTestWon.

Więc posłusznie zapisałem się i zacząłem brać cotygodniowe testy A/B. Nie wiedziałem, że ten mały akt zmieni bieg mojej kariery…

Wiele lat później WhichTestWon reklamowało otwarcie stanowiska dla starszego twórcy treści.

Miałem szczęście, że dostałem tę pracę!

W ten sposób przeszedłem od śledzenia wzroku i UX do niesamowitego świata testów CRO i A/B.

Tutaj wiedziałem, że w końcu znalazłem swoje miejsce.

Podobało mi się kompleksowe podejście do wykorzystywania danych do podejmowania decyzji opartych na dowodach, przy jednoczesnym stosowaniu kreatywności do projektowania i testowania nowych wariantów.

Chociaż WhichTestWon było wspaniałym doświadczeniem, na drodze było wiele wybojów.

W szczytowym momencie firma została przejęta i przemianowana, a wkrótce potem całkowicie rozwiązana, pozostawiając marketerów w cieniu.

Dla wielu było to druzgocące. Uznałem, że moim obowiązkiem jest wypełnienie luki.

Tak narodził się GuessTheTest.

Jako założyciel GuessTheTest, moim celem jest dostarczanie eksperymentatorom cennych danych z analizy przypadków testowych A/B oraz przydatnych zasobów do informowania, inspirowania i potwierdzania sukcesu testowania.

Po stworzeniu, przeanalizowaniu, uruchomieniu i opublikowaniu tysięcy klienckich studiów przypadków A/B zyskałem bogate i unikalne spojrzenie na to, co działa, a co nie w testach CRO i A/B.

Pragnę pomagać w nauczaniu i dzieleniu się tą wiedzą z innymi optymalizatorami.

Ile lat zajmujesz się optymalizacją? Jakie zasoby polecasz początkującym testerom i optymalizatorom?

Mam nastawienie na optymalizację prawdopodobnie od urodzenia.

Odkąd pamiętam, widziałem wady i wpadałem na kreatywne pomysły, aby uczynić rzeczy lepszymi, wydajniejszymi i skuteczniejszymi.

Ale formalnie moja kariera w optymalizacji rozpoczęła się w 2009 roku, kiedy ukończyłem studia magisterskie i dostałem pierwszą związaną z karierą pracę UX.

Chociaż nie lubię przyznawać się do tego wszystkim młodszym millenialsom, zajmuję się optymalizacją od ponad dekady… i liczę.

Jeśli chodzi o jedyny zasób testowy, który poleciłbym, jest tam wiele świetnych.

Ale gdybym miał wybrać tylko jeden, musiałbym powiedzieć GuessTheTest. Chociaż przyznaję, jestem trochę stronniczy.

Odpowiedz w 5 lub mniej słowach: Czym jest dla Ciebie dyscyplina optymalizacji?

Proces eksperymentowania oparty na danych.

Jakie są 3 najważniejsze rzeczy, które ludzie MUSZĄ zrozumieć, zanim zaczną optymalizować?

1. Testy A/B to złoty standard optymalizacji, ale muszą być wykonane prawidłowo, aby uzyskać prawidłowe, wiarygodne wyniki.

2. Twoja hipoteza jest podstawą solidnego testu A/B. Musisz zacząć od zdefiniowania „inteligentnej hipotezy”, która jasno identyfikuje grupę docelową, problem z konwersją i sugerowane rozwiązanie, określa oczekiwany wynik i oczywiście określa cel konwersji testowej.

3. Istnieje coś takiego jak nieudany test, ale nie ma czegoś takiego jak niepowodzenie testowania — jeśli nauczysz się czegoś z eksperymentu.

Jak traktujesz dane jakościowe i ilościowe, aby mogły opowiedzieć ci bezstronną historię?

Łączenie danych jakościowych i ilościowych jest niezwykle cenną, ale bardzo rzadko wykorzystywaną taktyką w testach CRO i A/B.

W najlepszym przypadku większość eksperymentatorów polega wyłącznie na danych analitycznych lub danych konwersji w podejmowaniu decyzji i nie zwracają uwagi na cokolwiek innego.

Moja skłonność jest trochę inna.

Lubię zaczynać od danych jakościowych, a następnie łączyć je z danymi ilościowymi.

Takie postępowanie wymaga więcej czasu i wysiłku, ale daje pełniejszy, bardziej holistyczny obraz odbiorców, ich potrzeb i tego, czego potrzeba, aby poprawić konwersje.

Być może ten błąd wynika z faktu, że zaczynałem w świecie UX, który jest w zasadzie jakościowy.

Ale niektóre z najlepszych eksperymentów, w jakich kiedykolwiek brałem udział lub widziałem, jak ten, opierają się na wynikach jakościowych, zazwyczaj z badań UX, zagłębiają się w dane analityczne, a następnie weryfikują wyniki za pomocą testów A/B.

Kiedy połączysz zarówno dane jakościowe, jak i ilościowe i osiągniesz podobne wyniki za pomocą obu podejść, wiesz, że jesteś na czymś bardzo solidnym.

Jaki program szkoleniowy skonfigurowałeś dla swojego zespołu ds. optymalizacji? I dlaczego przyjąłeś to konkretne podejście?

Budowanie kultury eksperymentowania i koleżeństwa jest naprawdę ważne.

Przez lata pomogłem zaszczepić wiedzę w wielu organizacjach.

Obecnie dla jednej agencji testującej prowadzę „Testing Roundtable Discussions”, aby pomóc w dzieleniu się zwycięstwami w testach, tworzeniu interaktywnych dyskusji na temat pomysłów na testowanie i rozpowszechnianiu wiedzy o testowaniu.

Stworzyłem również samouczki i filmy szkoleniowe, które obejmują wszystko, od prawidłowego konfigurowania i przeprowadzania testów A/B po analizę danych i wyników.

Uważam, że dzielenie się wiedzą jest kluczem, szczególnie dla nowych pracowników lub osób pełniących role poza testowaniem — takich jak zarządzanie projektami, programowanie lub projektowanie — które mogą nie być tak zorientowane w temacie.

Prawdziwą optymalizację można uzyskać tylko dzięki kompetentnemu, poinformowanemu zespołowi.

Jaki jest najbardziej irytujący mit optymalizacji, który chciałbyś, aby zniknął?

Że nie powinieneś kopiować konkurentów.

Twoi konkurenci mogą być świetnym źródłem inspiracji.

To prawda, że ​​to, co działa dobrze w przypadku jednej witryny i jednej grupy odbiorców, może nie dotyczyć Twojej witryny bezpośrednio z odbiorcami.

Ale nie będziesz wiedział, dopóki nie przetestujesz.

Wykorzystaj dowody studium przypadku konkurencji — ze sprawdzonymi wynikami — aby pomóc ukierunkować swoje wysiłki związane z testowaniem. Następnie zoptymalizuj sukces.

Mamy nadzieję, że nasz wywiad z Deborah pomoże poprowadzić Twoją strategię optymalizacji współczynnika konwersji we właściwym kierunku! Jaka rada najbardziej do ciebie przemówiła?

Bądź na bieżąco z naszym następnym wywiadem z ekspertem CRO, który przeprowadzi nas przez jeszcze bardziej zaawansowane strategie! A jeśli jeszcze tego nie zrobiłeś, sprawdź nasze wywiady z Gursimran Gujral z OptiPhoenix , Haley Carpenter z Speero, Rishi Rawat z Frictionless Commerce , Sina Fak z ConversionAdvocates , Eden Bidani z Green Light Copy , Jakub Linowski z GoodUI i Shiva Manjunath z Speero !