Testen von Mind Map-Serien: Wie man wie ein CRO-Profi denkt (Teil 8)

Interview mit Deborah O'Malley von GuessTheTest

Daten sind die neue Währung des Geschäfts. Wenn Sie Daten nicht aktiv nutzen, um Annahmen in Frage zu stellen und zu sehen, ob Ihre Hypothesen stimmen, sind Sie im Nachteil.

Eine Möglichkeit, dies zu tun, ist das Testen. Aber es ist nicht immer einfach zu wissen, welche Tests durchgeführt werden müssen und was die Ergebnisse bedeuten. Und selbst wenn Sie ein solides Verständnis von CRO haben, besteht immer die Möglichkeit, dass Ihre Tests Verzerrungen aufweisen, die die Ergebnisse ungültig machen könnten.

Zum Glück sind Sie damit nicht allein.

Die Testing Mind Map-Serie hilft Ihnen dabei, die richtige Einstellung zu finden, und zeigt Ihnen, wie Sie Tests selbstbewusst durchführen.

In diesem Interview unterhalten wir uns mit Deborah O'Malley von GuessTheTest, die ihr erstes Optimierungsexperiment im Alter von acht Jahren durchführte. Sie teilt ihre besten Ressourcen für die Durchführung von Experimenten und skizziert bewährte Strategien für Ihre nächsten Tests.

Deborah, erzähl uns von dir. Was hat Sie dazu inspiriert, in Testing & Optimization einzusteigen?

Als ich gerade acht Jahre alt war, führte ich unwissentlich mein erstes Optimierungsexperiment durch!

Für mein wissenschaftliches Experiment in der Grundschule habe ich verschiedene Formen und Farben aus Bastelpapier ausgeschnitten, sie auf eine Tafel geklebt und die Leute gefragt, welche Version sie zuerst gesehen haben.

Ich wusste nicht, dass dies mein erstes Eye-Tracking-Experiment sein würde …

Viele Jahre später habe ich einen Master-Abschluss mit Spezialisierung auf Eye-Tracking-Technologie erworben!

Meine Forschungsarbeit befasste sich damit, wie man am besten aufmerksamkeitsstarke Anzeigen gestaltet. Die Ergebnisse wurden in sechs von Experten begutachteten Zeitschriftenartikeln veröffentlicht und sind eine Inspirationsquelle für digitale Vermarkter weltweit.

Nach Abschluss meines Masters begann ich damit, User Experience (UX)-Tests bei einer lokalen UX-Firma durchzuführen.

Als Teil meiner Schulung empfahl die Firma, dass ich mir eine Ressource mit dem Namen „WhichTestWon“ anschaue.

Also meldete ich mich pflichtbewusst an und begann mit den wöchentlichen A/B-Tests. Ich wusste nicht, dass diese kleine Tat den Lauf meiner Karriere verändern würde…

Jahre später veröffentlichte whichTestWon eine Stellenausschreibung für einen Senior Content Creator.

Ich hatte das Glück, den Job zu bekommen!

Und dabei wechselte ich von Eyetracking und UX in die unglaubliche Welt der CRO- und A/B-Tests.

Hier wusste ich, dass ich endlich meinen Platz gefunden hatte.

Ich liebte den ganzheitlichen Ansatz, Daten zu verwenden, um evidenzbasierte Entscheidungen zu treffen, während ich gleichzeitig Kreativität einsetzte, um neue Varianten zu entwerfen und zu testen.

Obwohl WhichTestWon eine großartige Erfahrung war, gab es viele Unebenheiten auf dem Weg.

Auf seinem Höhepunkt wurde das Unternehmen übernommen und umbenannt und bald darauf vollständig aufgelöst – was die Vermarkter im Stich ließ.

Es war für viele verheerend. Ich sah es als meine Pflicht an, die Lücke zu füllen.

So wurde GuessTheTest geboren.

Als Gründer von GuessTheTest ist es mein Ziel, Experimentatoren wertvolle A/B-Testfallstudiendaten und hilfreiche Ressourcen zur Verfügung zu stellen, um den Testerfolg zu informieren, zu inspirieren und zu validieren.

Nachdem ich Tausende von A/B-Testfallstudien für Kunden erstellt, analysiert, durchgeführt und veröffentlicht habe, habe ich eine umfassende und einzigartige Perspektive darauf gewonnen, was bei CRO- und A/B-Tests funktioniert und was nicht.

Und es treibt mich an, dabei zu helfen, dieses Wissen zu lehren und mit anderen Optimierern zu teilen.

Seit wie vielen Jahren optimieren Sie? Welche Ressource empfehlen Sie angehenden Testern und Optimierern?

Ich habe wahrscheinlich seit meiner Geburt eine Optimierungsdenkweise.

Soweit ich zurückdenken kann, habe ich Fehler gesehen und kreative Ideen entwickelt, um Dinge besser, effizienter und effektiver zu machen.

Aber formal begann meine Optimierungskarriere 2009, als ich meinen Master abschloss und meinen ersten berufsbezogenen UX-Job bekam.

So sehr ich es vor all den jüngeren Millennials da draußen nicht gerne zugeben möchte, ich mache seit über einem Jahrzehnt Optimierungsarbeit … und zähle.

Was die einzige Testressource betrifft, die ich empfehlen würde, gibt es viele großartige da draußen.

Aber wenn ich nur eine auswählen müsste, müsste ich GuessTheTest sagen. Obwohl ich zugeben muss, dass ich etwas voreingenommen bin.

Antworten Sie in maximal 5 Wörtern: Was ist für Sie die Disziplin der Optimierung?

Ein datengesteuerter Experimentierprozess.

Was sind die wichtigsten 3 Dinge, die Menschen verstehen MÜSSEN , bevor sie mit der Optimierung beginnen?

1. A/B-Tests sind der Goldstandard der Optimierung, aber sie müssen richtig durchgeführt werden, um gültige, zuverlässige Ergebnisse zu erhalten.

2. Ihre Hypothese ist das Rückgrat eines soliden A/B-Tests. Sie müssen mit der Definition einer „intelligenten Hypothese“ beginnen, die das Zielpublikum, das Conversion-Problem und die vorgeschlagene Lösung klar identifiziert, das erwartete Ergebnis angibt und natürlich das Test-Conversion-Ziel definiert.

3. Es gibt so etwas wie einen fehlgeschlagenen Test, aber es gibt keinen fehlgeschlagenen Test – wenn Sie etwas aus dem Experiment lernen.

Wie gehen Sie mit qualitativen und quantitativen Daten um, damit sie Ihnen eine unvoreingenommene Geschichte erzählen können?

Das Zusammenführen qualitativer und quantitativer Daten ist eine unglaublich wertvolle, aber viel zu wenig genutzte Taktik bei CRO- und A/B-Tests.

Im besten Fall verlassen sich die meisten Experimentatoren nur auf Analyse- oder Konversionsdaten, um Entscheidungen zu treffen, und schenken anderen Dingen wenig Aufmerksamkeit.

Meine Neigung ist etwas anders.

Ich fange gerne mit qualitativen Daten an und füge sie dann mit quantitativen Daten zusammen.

Dies erfordert mehr Zeit und Mühe, bietet aber einen umfassenderen, ganzheitlicheren Überblick über das Publikum, seine Bedürfnisse und was es braucht, um die Conversions zu verbessern.

Vielleicht kommt diese Voreingenommenheit daher, dass ich in der UX-Welt angefangen habe, die im Großen und Ganzen qualitativ ist.

Aber einige der besten Experimente, an denen ich je teilgenommen habe oder die ich gesehen habe, wie dieses, nehmen qualitative Erkenntnisse, typischerweise aus UX-Studien, vertiefen sich in die Analysedaten und validieren dann die Ergebnisse mit A/B-Tests.

Wenn Sie sowohl qualitative als auch quantitative Daten zusammenführen und mit beiden Ansätzen ähnliche Ergebnisse erzielen, wissen Sie, dass Sie auf etwas sehr Solidem stehen.

Welche Art von Lernprogramm haben Sie für Ihr Optimierungsteam eingerichtet? Und warum haben Sie diesen speziellen Ansatz gewählt?

Der Aufbau einer Kultur des Experimentierens und der Kameradschaft ist wirklich wichtig.

Im Laufe der Jahre habe ich dazu beigetragen, das Lernen in vielen Organisationen zu fördern.

Im Moment führe ich für eine Testagentur „Testing Roundtable Discussions“ durch, um dabei zu helfen, Testsiege zu teilen, interaktive Diskussionen über Testideen zu erstellen und Testwissen zu verbreiten.

Ich habe auch Tutorials und Schulungsvideos erstellt, die alles abdecken, von der korrekten Einrichtung und Durchführung von A/B-Tests bis hin zur Analyse von Daten und Ergebnissen.

Ich sehe den Wissensaustausch als Schlüssel an, insbesondere für neue Mitarbeiter oder Personen in Rollen außerhalb des Testens – wie Projektmanagement, Entwicklung oder Design – die möglicherweise nicht so versiert in der Materie sind.

Eine echte Optimierung kann nur mit einem sachkundigen, informierten Team erreicht werden.

Was ist der nervigste Optimierungsmythos, von dem Sie sich wünschen, dass er verschwindet?

Dass man Konkurrenten nicht kopieren sollte.

Ihre Konkurrenten können eine große Inspirationsquelle sein.

Es stimmt, was für eine Website und eine Zielgruppe gut funktioniert, gilt möglicherweise nicht direkt für Ihre Website mit Ihrer Zielgruppe.

Aber Sie werden es nicht wissen, bis Sie testen.

Verwenden Sie Beweise aus Fallstudien von Mitbewerbern – mit nachgewiesenen Ergebnissen –, um Ihre Testbemühungen zu lenken. Dann optimieren Sie auf den Erfolg.

Hoffentlich hilft unser Interview mit Deborah dabei, Ihre Strategie zur Optimierung der Konversionsrate in die richtige Richtung zu lenken! Welcher Ratschlag hat bei Ihnen am meisten Anklang gefunden?

Seien Sie gespannt auf unser nächstes Interview mit einem CRO-Experten, der uns durch noch fortschrittlichere Strategien führt! Und falls Sie es noch nicht getan haben, sehen Sie sich unsere Interviews mit Gursimran Gujral von OptiPhoenix , Haley Carpenter von Speero, Rishi Rawat von Frictionless Commerce , Sina Fak von ConversionAdvocates , Eden Bidani von Green Light Copy , Jakub Linowski von GoodUI und Shiva Manjunath von an Speer !