Haben Sie Schwierigkeiten, den ROI von A/B-Tests nachzuweisen? Lasst uns helfen

Veröffentlicht: 2020-10-29
Haben Sie Schwierigkeiten, den ROI von A/B-Tests nachzuweisen? Lasst uns helfen

Welchen Wert hat Ihr A/B-Testprogramm? Welche Vorteile bringt es Ihrem Unternehmen?

Sie wissen bereits, dass A/B-Tests dabei helfen, die Konversionsraten zu optimieren und den Umsatz zu steigern. Aber wie genau können Sie beweisen, dass sich A/B-Tests auf Ihr Endergebnis auswirken?

Mit den Worten von Matt Gershoff:

A/B-Tests können Verhaltensänderungen mildern, die zu Schäden oder Verlusten führen

Aber all dies mag die C-Suite in Ihrem Unternehmen nicht beeindrucken, die konkrete Zahlen möchte, die den ROI Ihres A/B-Testprogramms zeigen. Wenn Sie den Nutzen Ihrer A/B-Tests beweisen, können Sie sich in Zeiten des Umbruchs wie jetzt die Unterstützung von Führungskräften verdienen.

So können Sie den Wert Ihres Experimentierprogramms beweisen!

Berechnung des ROI Ihres A/B-Testprogramms

Anhand des Umsatzes können Sie den ROI Ihres A/B-Testprogramms berechnen. Die Leute von Peak Activity haben eine großartige Formel zur Berechnung Ihres ROI. Hier sind ein paar Kennzahlen, die Sie kennen sollten:

Umsatz pro Sitzung (RPS)

Berechnen Sie den RPS sowohl für Ihre Kontrolle als auch für Ihre Variante. Dies ist der Gesamtumsatz geteilt durch die Gesamtzahl der Sitzungen für Ihre Kontrolle und Variante.

RPS = (Gesamtumsatz ÷ Gesamtsitzungen)

Durchschnittliche Verkaufssteigerung

Dies betrifft den RPS sowohl Ihrer Kontrolle als auch Ihrer Variante. Diese Metrik muss statistisch signifikant sein.

Avg Sales Lift = (RPS Ihrer Variante – RPS Ihrer Kontrolle) – 1

Kosten für die Durchführung Ihres tatsächlichen A/B-Tests

Dies ist der Kontrollerlös multipliziert mit der durchschnittlichen Verkaufssteigerung.

A/B-Testkosten = (Kontrollumsatz * durchschnittlicher Verkaufsanstieg)

Multiplikator für Traffic-Split

Berechnen Sie zunächst die Gesamtsitzungen, indem Sie die Gesamtsitzungen für die Kontrolle und die Variante addieren. Verwenden Sie dann diese Zahl, um die Verkehrsverteilung für die Kontrolle und die Variante zu berechnen.

Sitzungen insgesamt = (Kontrollsitzungen + Variantensitzungen)

Verkehrsverteilung für die Kontrolle = (Kontrollverkehr ÷ Gesamtsitzungen) * 100

Verkehrsverteilung für Variante = (Variantenverkehr ÷ Gesamtsitzungen) * 100

Wert der Variantenänderung

Dies wird berechnet, indem die Kosten für die Durchführung von A/B-Tests mit 2 multipliziert werden. Dies liegt daran, dass Standard-A/B-Tests in der Regel zwei Behandlungen haben. Diese Zahl weicht bei multivariaten Tests ab, bei denen Sie mehrere Behandlungen haben.

Wert der Änderung = (Kosten für die Ausführung des Tests * 2)

Wertgewinn durch Testdauer

Dies sind im Grunde die Kosten für die Durchführung des A/B-Tests abzüglich des Werts der Variantenänderung.

Wert des Testzeitraums = (Kosten des laufenden Tests – Wert der Änderung)

Prognostizieren Sie den zusätzlichen Umsatz, wenn die Variante live geht

Um die durchschnittlichen Verkäufe pro Tag zu ermitteln, dividieren Sie den Wert der Änderung in der Variante durch die Anzahl der Tage, an denen die Tests ausgeführt wurden.

Durchschnittlicher Umsatz pro Tag = (Wert der Variantenänderung ÷ Testdauer)

Die Umsatzprognose ist der durchschnittliche Umsatz pro Tag, multipliziert mit der Anzahl der Tage in Ihrem Prognosezeitraum. Denken Sie daran, weit genug zu prognostizieren, dass die Auswirkungen von Saisonalität, Verkaufskampagnen, Kundenverhalten usw. abgeschwächt werden.

Gesamtwert des A/B-Testprogramms

Jetzt können Sie den ROI Ihres A/B-Testprogramms berechnen:

A/B-Testprogramm = (Gewinnertests + Verlierertests + Kosten)

Hinweis: Verlierende Tests benötigen nur die ersten 3 Schritte, während erfolgreiche Tests alle Schritte benötigen.

Wir haben mehrere Unternehmen, die über ein ausgereiftes A/B-Testprogramm verfügen, gebeten, uns mitzuteilen, wie sie den ROI ihrer Tests berechnen.

Hier ist, was sie sagten.

Ian Kelly, VP of Operations bei NuLeaf Naturals, teilte mit:

Der erste Schritt besteht darin, die Gesamtkosten des Experiments herauszufinden. Dies beinhaltet die Kosten für die Tools, die für A/B-Tests verwendet werden, und die Zeit, die für die Durchführung der Tests benötigt wird. Der Zeitwert wird gleichgesetzt, indem die Gesamtzeit, die die Mitarbeiter für das Projekt aufgewendet haben, mit dem Stundenlohn multipliziert wird. Fügen Sie auch die Opportunitätskosten hinzu, falls der Test zu weniger Conversions führt. Opportunitätskosten sind das zusätzliche Geld, das Sie hätten verdienen können, wenn Sie das Experiment nicht durchgeführt hätten.

Der zweite Schritt besteht darin, einen klaren Trichter zu haben, der im Verkauf eines Produkts endet. EveryTrack jeden Schritt des Trichters. Verwenden Sie dazu ein Tool wie Mixpanel. Bei einem A/B-Test gibt es zwei Variationen desselben Trichters. Die Änderungen können zielgruppenorientiert, verwendete Farben oder sogar die verwendete Kopie sein. Beide Varianten sollten separat verfolgt und verglichen werden.

Sobald alle oben genannten Daten verfügbar sind, wird es sehr einfach sein, den ROI Ihres A/B-Testprogramms nachzuweisen. Es ist besser, den ROI am Ende jedes Quartals zu berechnen. Einige Experimente werden scheitern, während andere erfolgreich sein werden. Die Gesamtverbesserung des Umsatzes sollte größer sein als die Kosten Ihres A/B-Testprogramms. Wenn dies nicht der Fall ist, überdenken Sie Ihre bestehenden Teststrategien

George Pitchkhadze, CMO bei Thrive Cuisine, skizziert den Prozess seines Unternehmens im Folgenden:

Berechnen Sie die Kosten Ihres Experiments.

Um den ROI zu berechnen, müssen Sie Ihre Kosten kennen. Dies sollte direkte und indirekte Kosten umfassen, z. B.:

-Die Kosten der verwendeten Software/Dienste.

-Die Kosten der verwendeten Arbeitsstunden.

-Die direkten Kosten (z. B. die Kosten für das Vermieten einer E-Mail-Liste oder PPC-Anzeigen).

Nehmen wir zum Beispiel an, ich mache A/B-Split-Tests für zwei Anzeigenplattformen. Ich sollte mir unsere PPC-Anzeigenkosten ansehen – aber auch, wie viele Stunden es dauert, jede Anzeigengruppe zu schalten, und den Preis der Analysedienste, die wir verwenden, um unsere Anzeigen zu informieren.

Berechnen Sie Ihre Rendite

Dieser Teil ist unkompliziert. Berechnen Sie die direkten Erträge, die sich aus einer Anstrengung ergeben. Was hier zählt, ist die Verwendung moderner Analysetools, um Verkäufe und Einnahmen mit Dingen wie gesendeten E-Mails, Anzeigensets auf FB/Google usw. zu verknüpfen.

Berechnen Sie den ROI

Jetzt, da Sie eine genaue Vorstellung von Erträgen und Investitionen haben, können Sie den ROI ganz einfach berechnen. Denken Sie daran: Berechnen Sie die Kosten des Experiments gründlich und verbinden Sie die Renditen mit bestimmten Kampagnen und bereitgestellten Botschaften

Andere Möglichkeiten, die Wirkung von A/B-Tests zu messen

Es gibt andere Möglichkeiten, den ROI Ihres A/B-Testprogramms zu messen.

Converts Head of Integrations, Data Privacy and Information Security Officer, Dionysia Kontotasiou, teilte 4 weitere Methoden mit, um die Auswirkungen Ihrer A/B-Tests zu messen.

1. Wie viele Experimente sind abgeschlossen?

Wenn ein hoher Prozentsatz der Experimente eines Unternehmens nicht schlüssig ist, kann dies ein Zeichen dafür sein, dass sie Experimente falsch einrichten. Vielleicht schreiben sie zweideutige Hypothesen wie „ Diese Änderung wird die App besser machen “ statt explizite wie „ Diese Änderung wird die monatlichen Anmeldungen um fünf Prozent erhöhen “.

Generieren Ihre Hypothesen nicht schlüssige Ergebnisse? Verwenden Sie den Hypothesengenerator von Convert, um jederzeit zuverlässige Hypothesen zu formulieren.

2. Feedback des Produktteams

Verfügt das Produktteam über mehr Benutzererkenntnisse und -daten als zuvor? Werden ihre Produkteinführungen erfolgreicher? Wenn ja, ist dies ein gutes Zeichen dafür, dass die durchgeführten A/B-Tests erfolgreich sind.

3. Geschwindigkeit testen

Die Testgeschwindigkeit ist das Maß dafür, wie viele Tests Sie über einen bestimmten Zeitraum durchführen. Dies ist ein operativer Benchmark , um zu messen, wie schnell Sie Ihre Tests entwerfen, entwickeln, testen, analysieren und starten können. Während einige größere Tests länger dauern und wichtig sind, um eine größere Wirkung auf die Ergebnisse zu erzielen, sollten kleinere „ schnelle Erfolge“ nicht außer Acht gelassen werden.

4. Voraussichtliche vs. tatsächliche Kosten für die Ausführung des Programms

Verfolgen Sie die Stunden oder das Budget, die für die Ausführung Ihres Programms aufgewendet wurden. Sie können auch Ihr geplantes Budget im Vergleich zu Ihren tatsächlichen Ausgaben für Ihre Testprojekte überwachen, um den Wert Ihres A/B-Testprogramms zu bewerten.

Wenn Sie Convert Experiences für Ihr A/B-Testprogramm verwenden, haben Sie Zugriff auf komplexe Berichte (wie im Screenshot unten), die Ihre Ziele und die Leistung jeder Testvariante enthalten – so können Sie den ROI nicht nur maximieren, sondern auch beweisen!

Convert Experiences A/B-Testprogramm

Fazit

Der Wert von A/B-Tests besteht sowohl darin, Verbesserungen zu finden, die zu einer Umsatzsteigerung führen oder Ihren Kunden ein besseres Erlebnis auf Ihrer Website bieten, als auch Risiken zu mindern, die auftreten können. Anhand von Einnahmen und anderen Kennzahlen können Sie der C-Suite in Ihrem Unternehmen den ROI Ihres A/B-Testprogramms schlüssig belegen.

Wie können Sie Ihren ROI durch A/B-Tests steigern?

Buchen Sie eine Demo mit Convert, um es herauszufinden.

Fordern Sie Ihre Demo an