A/B Testing Pop-ups: So machen Sie Ihre Pop-ups viel effektiver

Popups sind überall .

Einige der größten Marken wie Amazon, Pinterest und Adidas verwenden Pop-ups. Tatsächlich ist es ziemlich schwer, ihnen zu entkommen.

Wir sind bereit zu wetten, dass Sie heute mindestens ein halbes Dutzend gesehen haben. Leider sind Pop-ups nicht das Einzige, was beliebt ist. „Hacks“, um die besten Pop-ups zu erstellen, sind gleichermaßen weit verbreitet.

Hier ist die Sache: Sie können absolut von dem lernen, was für Ihre Konkurrenz funktioniert hat, aber blindes Vertrauen wird Ihre Besucher abweisen und Sie einige ernsthafte Dollars kosten.

Pop-Ups: Ärgernis oder Notwendigkeit?

Wir haben einige heiße Takes von CRO-Experten und Vermarktern:

Oh, sie saugen. Sie sind das absolut Schlimmste – WEIL die Leute denken, „einstellen und vergessen“ sei eine Strategie .

Shiva Manjunath bei Speero

Pop-ups sind im Allgemeinen ein Ärgernis. Ein Vermarkter erstellt sie jedoch so, dass der Benutzer sie eher wertvoll als störend findet .

Arek Nowakowski, Produktdesigner bei Spacelift

Aber die richtige Antwort auf diese Frage ist, dass es darauf ankommt.

Pop-ups können im Vergleich zu anderen Kanälen großartige Ergebnisse erzielen oder ein völlig schlechter Schachzug für Sie sein. Sie werden es nicht sicher wissen, bis Sie Testseiten mit und ohne Popups aufgeteilt haben.

Der wahre Grund, warum Pop-ups einen schlechten Ruf bekommen, ist die schlechte Benutzererfahrung. Folgendes erlebte Amanda Natividad, VP of Marketing bei SparkToro, kürzlich:

Eine schlechte Benutzererfahrung kann zu einem veränderten Benutzerverhalten wie diesem führen:

Und Leute, die Pop-up-Blocker installieren, um zu verhindern, dass sie ihre Erfahrung ruinieren (das ist der Grund, warum diese Werbeblocker bei Google einen so hohen Rang einnehmen, wenn Sie nach Pop-ups suchen).

Wir müssen anerkennen, dass Pop-ups immer noch lästig sein werden. Aber sie müssen nicht jeden stören .

Shiva bei Speero teilt:

Wenn sie richtig gemacht werden, sind sie zielgerichtet und werden DANN wertvoll. Die Bereitstellung für alle kann zu höheren Gesamtbindungsraten und Gesamteinreichungen führen, aber die Qualität wird wahrscheinlich viel geringer sein. Und niemand verfolgt jemals die „schädlichen“ Auswirkungen auf diese Art von Popups .

Sie müssen wissen, wie und ob sich dies ungünstig auf andere Sekundär- und Leitplankenmetriken auswirkt.

Guardrail-Metriken sind kritische Metriken, die Experimentatoren auf eine verletzte Annahme aufmerksam machen sollen. Leitplankenmetriken bieten das, was Spitzer (2007) die „Fähigkeit, informiertes Handeln anzuregen“ nennt. Wenn ein Behandlungseffekt unerwartet eine Leitplankenmetrik verschiebt, möchten Sie möglicherweise das Vertrauen in die Ergebnisse verringern oder ein Experiment in Fällen beenden, in denen Benutzern oder der Organisation Schaden zugefügt werden könnte .

Ronny Kohavi, Berater für A/B-Tests

Die verschiedenen Arten von Pop-ups (mit Pop-up-Konversionsraten)

Die allererste Pop-up-Werbung erschien Ende der 1990er Jahre auf Tripod, und ihr Erfinder Ethan Zuckerman hat sich seitdem für die Belästigung entschuldigt, die er im Internet verursacht hat. Im Laufe seiner turbulenten Geschichte haben Pop-ups Phasen durchlaufen, in denen sie zu Marketing-Parias wurden.

Pop-ups, die ursprünglich als das glänzende Neue angesehen wurden, um von jeder betrügerischen Website missbraucht zu werden, gerieten schneller in Vergessenheit als Fidget-Spinner. Pop-up-Blindheit (oder Banner-Blindheit) bedeutete, dass Benutzer sie nicht als störend empfanden – sie wurden dagegen immun und ignorierten sie umgehend.

Pop-ups haben dank versierter A/B-Testing-Vermarkter, die es geschafft haben, sie von den Toten wiederzubeleben und ihre Aufdringlichkeit für das sprichwörtliche Gute einzusetzen, neues Leben eingehaucht.

Hier sind die verschiedenen Arten von Pop-ups, auf die Sie stoßen werden (mit Beispielen und Benchmarks für Konversionsraten):

Eintrags-Popups

Eintrags-Pop-ups werden den Website-Besuchern fast sofort angezeigt, nachdem sie auf der Seite gelandet sind. Einige blockieren die Ansicht der gesamten Seite (auch bekannt als Begrüßungsmatten-Popups), während andere in der Mitte des Bildschirms erscheinen (Lightbox). Wishpond verwendet beispielsweise diese beiden Typen nacheinander:

Während diese effektiv sein können, um Benutzer dazu zu bringen, sofort Maßnahmen zu ergreifen, kann die Einstellung als erstes Popup auch dazu führen, dass Benutzer sofort abspringen.

Der Trick dabei ist, eine Mikroverpflichtung zu verwenden.

Mikroverpflichtungen können einen großen Einfluss auf Ihre E-Mail-Opt-in-Engagementraten haben. Lassen Sie den Benutzer einfach auf Ja klicken, um einen Rabatt zu erhalten. Nach diesem kleinen Ja glauben sie unbewusst, dass sie interessiert sein müssen und konsequent bleiben wollen, während sie sich weiterhin mit dem Pop-up beschäftigen. Dies schafft weniger Reibung für sie beim Ausfüllen des Formulars, was mehr Zustimmung und Entscheidungsfindung erfordert. Es ist das Prinzip des Engagements und der Beständigkeit .

Anthony Morgan, CEO und Gründer von Enavi

Klick-aktivierte Pop-ups

Diese Popups werden angezeigt, wenn Benutzer auf einen Link klicken. Sie sind weitaus weniger aufdringlich und oft hilfreich.

Nehmen Sie zum Beispiel die Produktseite von Amazon für Alexa. Wenn Sie auf „sehen, was Alexa kann“ klicken, erscheint ein Popup mit weiteren Informationen.

Quelle

Durch Klicks aktivierte Popups sind in E-Commerce-Shops weit verbreitet, da sie es Käufern ermöglichen, nach Belieben zu erkunden und bei Bedarf mehr Informationen anzubieten.

Exit-Intent-Popups

Diese Pop-ups werden ausgelöst, wenn Besucher versuchen, Ihre Website zu verlassen – ein Ave Maria, damit sie konvertieren, bevor sie ihren Warenkorb verlassen.

Auf Mobilgeräten werden diese ausgelöst, wenn jemand schnell nach oben scrollt oder die Zurück-Taste drückt. Elauz bietet Erstkäufern, die versuchen, die Zielseite zu verlassen, einen Rabatt von 15 %.

Zeitgesteuerte Pop-ups

Ein zeitgesteuertes Pop-up wird Besuchern erst nach einem bestimmten Zeitraum angezeigt. Wie schnell danach sollten Sie diese Nachricht anzeigen? Auch das ist etwas, das Sie A/B-testen müssen.

Dieses Pop-up von Sumo ist ein gutes Beispiel. Es erscheint, nachdem Sie ein wenig Zeit damit verbracht haben, den Beitrag zu lesen.

Welche Art von Pop-ups konvertiert besser?

Die neuesten Konvertierungsstudien sind abgeschlossen!

Sumo analysierte 2019 2 Milliarden Pop-up-Beispiele und fand Folgendes heraus:

• Die 10 % der erfolgreichsten Pop-ups erzielten im Durchschnitt eine Conversion-Rate von 9,28 %
• 3 von 100 Marken hatten Pop-ups mit Conversion-Raten von über 11 %
• Die Conversion-Rate für alle Pop-ups lag im Durchschnitt bei 3,09 %

Hinweis: Die Conversion-Raten sinken bei Websites mit hohem Traffic. Während also 3,09 % wie eine kleine Zahl erscheinen mögen, können 100.000 Besucher 3.000 Conversions erzielen (was überhaupt nicht schlecht ist).

Hier ist ein Beispiel aus der Praxis von Dave Evangelisti, Gründer und CEO von TestGuide:

Auf einer Webseite konnten wir unsere „berechnete Konversionsrate“ (ein Ziel, das darauf basierte, Menschen auf eine bestimmte Seite zu leiten) um 1,38 % steigern. Dies mag zwar nicht bedeutend klingen, aber bei Tausenden von Menschen können 1,38 % wirklich die Nadel bewegen .

Sleeknote hat im Jahr 2020 über eine Milliarde Pop-ups untersucht und Folgendes gefunden:

• Pop-ups mit Bildern hatten eine Conversion-Rate von 3,80 %, während Pop-ups ohne Bilder eine Conversion-Rate von 2,07 % verzeichneten.
• Pop-ups, die nach einer Verzögerung von 8 Sekunden erscheinen sollten, hatten eine Conversion-Rate von 3,62 % und konvertierten besser als Pop-ups, die davor oder danach angezeigt wurden
• Pop-ups mit zwei Eingabefeldern verzeichneten eine höhere Conversion-Rate von 3,31 %, was besser war als Pop-ups mit drei Feldern, die eine Conversion-Rate von 1,08 % hatten.

Wie Sleeknote analysierte OptiMonk im Jahr 2021 die Pop-ups seiner Benutzer, um seine Ergebnisse zu veröffentlichen:

• Die durchschnittliche Umwandlungsrate betrug 11,09 %
• Die besten 10 % der Pop-ups hatten eine durchschnittliche Conversion-Rate von 42,35 %
• Die durchschnittliche Conversion-Rate für Desktop betrug 9,69 % und für Mobilgeräte 11,07 %
• Pop-ups zum Verlassen des Einkaufswagens hatten eine Konversionsrate von 17,12 %

Hinweis: Diese Benchmarks stammen aus Originalforschung und der Bildung von Hypothesen, die getestet wurden und nicht für den direkten Vergleich verwendet werden sollten. Aber diese Ergebnisse können Ihnen einen besseren Einblick geben, welche Elemente Sie testen sollten (wir werden weiter unten näher darauf eingehen).

A/B-Test-Popups: Sollten Sie es tun und wie?

Wir bitten Sie, zwei Annahmen über Bord zu werfen:

1. Nur weil Pop-ups für Ihre Branche oder Ihren Konkurrenten funktionieren, bedeutet das nicht automatisch, dass sie auch für Sie funktionieren.
2. Nur weil etwas funktioniert, heißt das nicht, dass es nicht verbessert werden kann.

Um es sicher zu wissen, müssen Sie Pop-ups A/B-testen.

Hier ist ein Beispiel aus Sumo, um zu zeigen, wie viel Unterschied es machen kann.

Sie könnten annehmen, dass Version B besser abgeschnitten hat, weil sie alle „Best Practices“ befolgt, aber tatsächlich hat das erste Pop-up um 30 % übertroffen.

Was sind A/B-Tests und Split-Tests für Pop-ups?

Mit A/B-Tests können Sie Änderungen an einem oder mehreren Elementen testen. Sie können Elemente hinzufügen, entfernen oder ändern und Änderungen nachverfolgen, um zu sehen, wie sie die Conversions steigern.

Beim A/B-Testen von Pop-ups erstellen Sie zwei fast identische Versionen und stellen die Variante (oder den Herausforderer) dem Original (der Kontrolle) gegenüber.

Obwohl die meisten Leute Split-Tests und A/B-Tests verschmelzen, sind dies zwei völlig unterschiedliche Techniken zur Optimierung der Konversionsrate.

In Split-Tests oder Split-URL-Tests teilen Sie den Datenverkehr gleichmäßig auf, um Besucher zu zwei völlig unterschiedlichen Versionen zu leiten, die auf unterschiedlichen URLs gehostet werden. Auf diese Weise können Sie feststellen, welche Version die beste Leistung erbringt.

Wenn Sie verstehen möchten, ob Pop-ups eine gute Idee sind oder nicht, wäre ein Split-Test der beste Weg. Eine Seite mit einem Popup, die mit einer Mischung aus Elementen wie Text und Hinweisen gegen die andere gestapelt ist, um die gleichen Vorteile und den gleichen Wert zu liefern.

Nehmen Sie zum Beispiel Marks & Spencer. Anstatt ein Pop-up zu verwenden, um ihre E-Mail-Liste zu erstellen, haben sie einen Abschnitt am Ende der Seite, in dem Besucher sich anmelden können.

Wenn Sie feststellen, dass Pop-ups Besucher nicht abschrecken, nehmen Sie eine Änderung nach der anderen vor, um die Auswirkungen von A/B-Tests durch eine Reihe von Experimenten zu isolieren, um herauszufinden, was für Ihr Unternehmen funktioniert.

Faizan Fahim, Growth Hacker bei Breeze, empfiehlt, einige häufige Fehler beim A/B-Testen von Pop-ups zu vermeiden:

• Zeigen Sie dasselbe Pop-up nicht zweimal an. Es ist beleidigend für die Benutzer, da sie das Popup einmal ignoriert und geschlossen haben, aber die Website zeigt ihnen immer noch dasselbe Popup.
• Sorgen Sie dafür, dass das Pop-up der Seite zugeordnet werden kann, auf der sich der Besucher befindet.
  
  
  • Wenn sich der Besucher auf der Warenkorbseite befindet, zeigen Sie ihm den Rabatt.
  • Wenn sich der Besucher auf der Vergleichsseite befindet, zeigen Sie ihm das Popup „Testversion starten“.
  • Wenn der Besucher den Artikel lange liest, zeigen Sie ihm das Abonnement-Popup.

Arek Nowakowski, Produktdesigner bei Spacelift, warnt vor einem weiteren häufigen Fehler:

Vermeiden Sie es, die A/B-Tests während Festivals und Veranstaltungen durchzuführen. Das Verhalten der Kunden ändert sich rund um Feste und Feiertage. Führen Sie alle A/B-Popup-Tests aus, wenn das Geschäft normal ist

Pop-up-A/B-Tests: Verschiedene Elemente zum Ändern

Sie können so gut wie jedes Element in Ihrem Pop-up testen, solange Sie die Konversionsforschung verlassen.

Untersuchen Sie das Benutzerverhalten, suchen Sie nach Bewertungen, Support-Tickets, sehen Sie sich Besucher-Wiederholungen an und analysieren Sie aktuelle Metriken, bevor Sie mit der Testplanung beginnen. Dies bildet die Grundlage Ihrer Hypothese, damit Sie nicht willkürlich Änderungen vornehmen, die Ihrem Unternehmen schaden könnten.

Die häufigsten Elemente, die A/B-getestet werden, sind jedoch der Text, der Auslöser, die Platzierung, der CTA-Text und verschiedene Arten von Pop-ups .

Zeitpunkt des Triggers

Die Forschung von Sleeknote zeigt, dass 8 Sekunden der ideale Punkt sind, den Sie anstreben sollten, aber auch hier können Sie es nicht sicher wissen, es sei denn, Sie testen es.

Aber die meisten Experten scheinen sich in einer Sache einig zu sein – es ist keine gute Idee, Ihren Besuchern ein Pop-up zu zeigen, sobald sie auf einer Seite landen.

Zeitbasierte Trigger sind erstklassige Möglichkeiten, um sicherzustellen, dass Sie die richtigen Benutzer ansprechen, ohne den Rest zu verärgern.

Shiva Manjunath, Speero

Einer der Kunden von Wise Pop hat 3 verschiedene Verzögerungen – 10, 20 und 40 Sekunden – mit diesem Pop-up getestet:

Ihre Tests ergaben, dass die beste Zeit, um ihr Angebot anzuzeigen, nach 10 Sekunden ist.

Längere Verzögerungen führten dazu, dass weniger Personen das Pop-up sahen, sodass die Anzahl der gesammelten E-Mails nicht hoch war, die Anzahl der Abonnements jedoch hoch war.

Stellen Sie sicher, dass Sie nicht auf False Positives hereinfallen. Lesen Sie unseren Leitfaden, um A/B-Testergebnisse richtig zu interpretieren und zu verbessern.

Position

Sollten Sie Ihr Pop-up am Anfang Ihrer Seite platzieren, eine Begrüßungsmatte verwenden, um den gesamten Bildschirm oder eine Lightbox abzudecken?

Quelle

Oder noch besser, versuchen Sie es mit einem Pop-up am Rand der Seite oder einem Scroll-in-Pop-up, das weniger aufdringlich ist?

Die Verwendung eines durch Scrollen ausgelösten Popups in einem Blogartikel ist eine gute Möglichkeit, Benutzer davon zu überzeugen, mehr von Ihren Inhalten zu lesen. Dies wird die Leute überzeugen, sich für Ihren Newsletter anzumelden, der hilfreiche Tipps und Links zu neuen Blog-Inhalten enthält.

Josh Pelletier, Chief Marketing Officer (CMO) bei BarBend

Getsitecontrol hat zwei weniger aufdringliche Popups auf ihrer Seite, die die Ansicht der Seite nicht blockieren.

PS Sie sollten auch die mobile vs. Desktop-Erfahrung berücksichtigen, wenn Sie über die Position der Popups nachdenken. Achten Sie besonders auf Mobilgeräte, da Sleeknote herausgefunden hat, dass mobile Popups die Conversions (5,8 %) im Vergleich zu Desktops (3,11 %) steigern.

Popups für Mobiltelefone sollten unter Berücksichtigung der verfügbaren Bildschirmfläche sowie anderer Aspekte der mobilen Benutzererfahrung gestaltet werden.

Veronica Miller, Digital Marketing Manager, VPNoverview

Kopieren

Die richtige Kopie kann Ihre Kunden dazu bringen, Maßnahmen zu ergreifen oder Ihre Versuche vollständig zu ignorieren.

Kopieren ist sehr wichtig und kann die Nadel um ein paar Prozentpunkte bewegen. Wir probieren ständig verschiedene Exemplare aus. Wir haben die Überschriften und den Text unserer Popup-Blocker geändert und eine Verbesserung von 30 % erreicht. Wir sind von einem aggressiveren Stopp-Popup, das Reservierungen negiert, die man möglicherweise anmelden muss, zu einem Popup gegangen, das soziale Beweise und den Wert hervorhebt, den unsere App zur Mitbewohnersuche für Sie bringen kann .

Rany Burstein, CEO und Gründer, Diggz.co

Sie können Mikroexperimente durchführen, indem Sie die Überschrift Ihres Textes ändern, die Länge variieren oder Machtwörter verwenden.

Laura Roder (Gründerin) von Paperbell findet, dass die Überschrift dort liegt, wo der größte Auftrieb liegt.

Sie können Heatmaps und Clickmaps verwenden, um zu erfahren, wie Besucher mit dem Text interagieren und was ihre Aufmerksamkeit erregt.

Ein weiteres Beispiel, das Sie studieren können, ist von Contrast, einer E-Commerce-Marketingagentur:

Wir haben ein landingpagespezifisches E-Mail-Popup für einen Kunden von Contrast rund um die Mikro-Ja-Hypothese ausgeführt.

Die meisten Geschäfte führen ein Pop-up-Fenster wie „Wenn Sie uns Ihre E-Mail-Adresse geben, erhalten Sie x % Rabatt“. Wir wollten eine andere Variante laufen lassen, um diese Idee zu testen. Wir haben den Wortlaut geändert, um die menschliche Psychologie zu erschließen.

Wir haben die folgende Nachricht gesendet: „Möchten Sie heute 20 % auf Ihre Bestellung sparen?“. Denn wer würde dazu nein sagen?

Um dies zu erreichen, haben wir 2 Schaltflächen: Ja / Nein

– Ja, fahren Sie mit dem nächsten Schritt fort, um E-Mail-Informationen einzugeben.

– Nein, schließt das Popup

Durch diesen A/B-Test konnten wir die E-Mail-Optionsrate von 3,3 % Sammlung auf 9,1 % erhöhen. ”

Elliot Davidson, Gründer und Direktor von Contrast

Angebot

Vergleichen Sie verschiedene Rabatte, Bleimagnete und Versandinformationen in Ihrem Angebot.

Wir haben das Angebot eines kostenlosen Versands über ein Popup-Fenster für wiederkehrende Benutzer beim Aufrufen der Website getestet und festgestellt, dass die E-Commerce-Conversion-Rate für diese Zielgruppe um 73 % gestiegen ist. Die Kombination des richtigen Angebots mit der richtigen Zielgruppe ist entscheidend, nicht nur, damit das Pop-up Anklang findet, sondern auch, damit das Pop-up positiv zum Endergebnis beiträgt. Die Angebotsstrategie muss nicht immer preisbasiert sein. Auf unserer FSA/HSA-Seite haben wir eine Anmelderate von 6 %, damit Kunden weitere Informationen zum Kauf unserer Produkte mit ihren FSA- oder HSA-Karten anfordern können.

Jonathan Finegold, CRO bei Medcline.com

SwissWatchExpo, ein OptiMonk-Kunde, erstellte zwei Versionen einer Warenkorbabbruchkopie, um zu sehen, welche Botschaften die gewünschten Ergebnisse bringen würden.

Version A rief FOMO auf, indem sie den Benutzern mitteilte, dass sie den letzten verfügbaren Artikel hatten, und sah eine Steigerung der Konversionsrate um 17 %.

Version B bot einen Rabatt und etwas andere Botschaften, was zu einer Konversionsrate von über 30 % führte.

Aufruf zum Handeln (CTA)

Sie können die Farbe, den Text, die Größe und die Ausrichtung des Call-to-Action-Buttons testen.

Es kann besonders wichtig sein, die Kopie des CTA zu überprüfen. Wenn es eine Diskrepanz zwischen Ihrem Angebot und dem CTA gibt, ist es weniger wahrscheinlich, dass Benutzer konvertieren.

Würden Sie im Pop-up unten klicken, wenn dort „Abonnieren“ statt „Ja, senden Sie mir diese Tipps“ steht?

Wahrscheinlich nicht. Stellen Sie sicher, dass der CTA mit Ihrem Versprechen übereinstimmt. Und Sie können dies als Gelegenheit nutzen, um zu schockieren und zu staunen.

Werfen Sie einen Blick auf das Newsletter-Anmeldeformular von Klientboost:

Anstelle des üblichen „Abonnierens“ ist das „Wir könnten das bereuen“ aufmerksamkeitsstark.

Möglicherweise möchten Sie auch den Text hinzufügen oder testen, den Benutzer zum Schließen eines Popups verwenden.

Das Exit-Intent-Popup von CoSchedule, das Benutzer auffordert, die kostenlose Erweiterung auszuprobieren, kann geschlossen werden, wenn Sie auf „Ich lehne die kostenlose Erweiterung ab“ klicken.

Wir haben auf unseren Produktseiten ein Exit-Intent-Popup getestet, das einen zusätzlichen Rabatt mit einem einzigartigen Gutscheincode anbietet, und eine Anmelderate von 7 % festgestellt. In diesem Fall hatte die Angebotsstrategie einen großen Einfluss, da ein Coupon mit 10 % Rabatt mehr als doppelt so gut abschneidet wie ein Couponangebot für kostenlosen Versand (wir stellten auch eine 18 %ige Steigerung der Öffnungsrate von Angebots-E-Mails fest).

Jonathan Finegold, CRO bei Medcline.com

Gamifizierung

Gamifizierte Pop-ups motivieren Benutzer, gegen eine Belohnung aktiv zu werden.

Die Forschung von Optimonk ergab, dass „Glücksräder“ oder Glücksräder eine Konversionsrate von 13,23 % hatten.

Aber Sie müssen hier nicht aufhören. Sie können auch „Geschenk auswählen“ oder „Rubbel“-Karten-Pop-ups ausprobieren.

Quelle

Quelle

Medcline konnte seine Erfassungsrate um 12 % steigern, indem es Gewinnspiele im Vergleich zu einem traditionellen „Anmeldung für unseren Newsletter“-Angebot durchführte.

Ein weiteres großartiges Beispiel kommt von Ross Kernez, der nach diesen Ergebnissen nur gamifizierte Pop-ups für seinen Kunden verwendet:

Wir haben 2 verschiedene Arten von gamifizierten Pop-ups getestet. Einer war ein Drehen des Rades, um ein Preis-Popup zu gewinnen, und der andere war, ein Kästchen auszuwählen, um zu sehen, ob Sie einen 10-€-Gutschein gewonnen haben.

Unsere bisher beste Conversion-Rate lag bei 8 %. Als wir eines der gamifizierten Pop-ups getestet haben, stieg unsere Konversionsrate auf mindestens 14 % .

Ross Kernez, Chefberater für Online-Strategie – Ross Kernez Consulting

Beste Metriken zum Nachverfolgen beim A/B-Testen von Pop-ups

Sie können den Gewinner oder Verlierer eines Tests nicht für bare Münze nehmen, wenn Sie Ideen A/B testen, da Sie verstehen müssen, wie und warum Sie diese Ergebnisse erzielt haben.

Hier kommen Ihre Metriken ins Spiel.

Eine Metrik ist ein einzelner Datentyp, der Ihnen hilft, die Auswirkungen von A/B-Tests auf Ihre Geschäftsziele zu messen.

Aber wie entscheiden Sie, welche Sie verfolgen möchten?

Es gibt einige, die Sie nachverfolgen müssen , während andere von der Art des Pop-ups abhängen.

Abhängig von der Art des Pop-ups (Gutschein für E-Commerce, E-Book usw.) versuche ich, so weit wie möglich auf vorgelagerte Metriken zuzugreifen. Sie müssen immer die „Trigger“-Rate verfolgen (weil dies Ihr Nenner für die Engagement-Metriken sein wird). Es ist jedoch äußerst wichtig, Dinge wie „Popup geschlossen“ und „Einreichungsraten“ zu verfolgen. Kombinieren Sie dies mit Kreativität und dem Auslösen von Heatmaps/Sitzungsaufzeichnungen, um MEHR Einblicke zu erhalten! Bonuspunkte für Dinge wie die Ausstiegsrate, obwohl sie mit Rauschen schwierig werden (zB die Ausstiegsrate ist möglicherweise nicht gut definiert, es sei denn, Sie schließen diejenigen ein, die das Popup gesehen haben ).

Shiva Manjunath, Speero

Karim Naufal, unser interner Experte für A/B-Tests, stimmt zu, dass allgemeine Metriken immer noch gelten.

Ja, die Konversionsrate muss zum Beispiel für die Popup-Schaltflächen selbst und das schließende X gemessen werden. Aber die Messung der Absprungrate oder Drop-Off-Rate ist gut (erzeugt es Frustration?). Auch das Messen der Zeit bis zum Schließen des Pop-ups ist wahrscheinlich ebenfalls relevant (wie viel Interesse hat es geweckt?).

Andere Klickmetriken wie „In den Einkaufswagen“ bleiben aufschlussreich. Am besten ist es jedoch, die unbestrittene Metrik „Umsatz pro Besucher“ zu verfolgen, die den Umsatz misst, der selbst die Informationen zur Konversionsrate und zum durchschnittlichen Bestellwert enthält.

Eine weitere ziemlich nützliche Metrik, die das Benutzerengagement misst, ist Sitzungen pro Benutzer .

Aber Jonathan Finegold, CRO bei Medcline.com, glaubt nicht, dass Sie Einnahmen verfolgen sollten, und hier ist der Grund:

Für unsere Blogs ist der Umsatz nicht der primäre KPI, die Anmelderate liegt daran, dass unser Ziel darin besteht, die E-Mail-Erfassung durch den organischen Verkehr zu maximieren. Ebenso ist der Umsatz selbst in einer E-Commerce-Umgebung möglicherweise nicht immer die beste Kennzahl, da das Angebot an der Marge möglicherweise unrentabel ist, und daher der richtige KPI, in diesem Fall möglicherweise die Änderungsrate der Margendollar .

Kurz gesagt, dies sind die Metriken, auf die Sie beim A/B-Testen oder Split-Testen von Pop-ups achten sollten:

• Wechselkurs
• Klickrate
• Absprungrate
• Drop-off-Rate
• Sitzung pro Benutzer
• In den Warenkorb legen
• Umsatz pro Besucher
• Popup geschlossen
• Einreichungsrate

Verbinden Sie Ihr Google Analytics und Shopify mit einer A/B-Testplattform wie Convert, um all diese Metriken genau zu messen.

Hier ist ein Beispiel dafür, wie dieser Prozess aussehen könnte:

Wenn wir beispielsweise testen, wie lange es dauert, bis ein Pop-up einen Benutzer anspricht, sehen wir uns Heatmap- und Google Analytics-Daten an, um herauszufinden, wie schnell die Leute das Pop-up schließen.

Wir fanden heraus, dass alles, was 15 Sekunden oder weniger dauerte, zu einer Abschlussrate von etwa 86 % führte und auch zu einer Erhöhung der Absprungrate beitrug. Wenn das Timing des Popups zwischen 15 und 45 Sekunden ab dem Zeitpunkt lag, an dem der Benutzer auf der Website war, sahen wir, dass die Schließungsrate auf 61 % sank, wobei die Absprungrate um 14 % reduziert wurde.

Als wir die Zeit auf 1 Minute einstellten, sahen wir, dass die Abschlussrate um weitere 5 % sank und die Absprungrate um 6 % zurückging. Darüber hinaus stieg die Interaktion mit dem CTA-Button um 40 %, wenn 1 Minute die eingestellte Zeit war. In den anderen beiden Intervallen änderte sich die CTA-Klickrate kaum bis gar nicht.

Wenn wir den Text innerhalb der CTA-Schaltfläche testen, sehen wir uns die CTR% des CTA an. Wenn wir eine direktere und spezifischere Sprache mit einem Zeitmodifikator verwenden (z. B. jetzt, heute), haben wir eine Steigerung der Klickrate um 14 % festgestellt.

Joe Karasin, Leiter Wachstumsmarketing, CircleIt Inc.

Eine weitere Kennzahl, an die Sie vielleicht nicht gedacht haben und die einen erheblichen Einfluss auf Ihr Unternehmen haben kann, ist die Seitengeschwindigkeit.

Die beste Metrik, die beim A/B-Testen von Pop-ups verfolgt werden kann, ist die Seitengeschwindigkeit.

Sie sollten sich nicht wundern, wenn das Popup mit eingebetteten Gifs und Videos die Seite verlangsamt. Das Pop-up wird von derselben HTTP-Anforderung wie die Seite geladen, was sich auf die Seitengeschwindigkeit auswirkt.

Sie können die Auswirkung eines Pop-ups auf der Seite berechnen, indem Sie das Wasserfalldiagramm analysieren. Führen Sie die Variation Ihrer Seite durch den Pingdom-Test und vergleichen Sie die Seitengeschwindigkeit. Wenn es einen signifikanten Unterschied in der Ladegeschwindigkeit gibt, ist Ihr Test bereits fehlgeschlagen. Die Ladegeschwindigkeit der Website kommt vor den Pop-ups, da das Surferlebnis die Conversion-Rate stark beeinflusst .

Arek Nowakowski, Produktdesigner @ Spacelift

Hinweis: Wir haben die Leitplankenmetriken bereits kurz erwähnt, aber es ist wichtig, sie beim Testen von Pop-ups im Hinterkopf zu behalten. Dies sind Kernmetriken, die Sie beim Testen nicht verschlechtern möchten, da ein Leistungseinbruch enorme Auswirkungen auf Ihr Unternehmen haben kann.

Richtlinien, die beim A/B-Testen von Pop-ups zu beachten sind

Wenn Sie bereit sind, Pop-ups für A/B-Tests zu starten, befolgen Sie diese Empfehlungen, um ihre Wirksamkeit zu verbessern:

• Führen Sie Vortestberechnungen durch, um sicherzustellen, dass Sie die richtige Stichprobengröße haben.
  Wenn Sie den Test nicht an einer ausreichend großen Gruppe von Personen durchführen, riskieren Sie einen Fehler, wie z. B. zu glauben, dass ein falsch positives Ergebnis echt ist. Führen Sie Ihre Vorabberechnungen durch, um zu überprüfen, ob Sie die Trittfrequenz haben, um den Zyklus der Anpassungen zu durchlaufen, die Sie im Sinn haben.
  
  Tipp: Verwenden Sie unseren A/B-Testrechner, um Signifikanz-, p-Wert-, Trennschärfe-, Stichprobenumfangs- und MDE-Berechnungen durchzuführen.
• Planen Sie eine Vielzahl winziger Änderungen mit kleinen MDEs für stark frequentierte Websites.
  Wenn Sie viel Verkehr haben, können Sie mit kleinen MDEs (Minimum Detectable Effect) eine vollständige Kadenz winziger Änderungen darstellen. Die meisten Pop-up-Experimente führen nur zu Steigerungen im einstelligen Bereich. Dieser Ansatz kann Ihnen also helfen zu verstehen, wie kleine Änderungen mit entsprechenden Anpassungen der KPIs zusammenhängen können. Je höher Ihr Traffic ist, desto kleiner sind die Aufzüge, die Sie erkennen und sich der Ergebnisse sicher sein können.
  
  Hinweis: MDE ist einfach die minimale Effektgröße, die es uns wert wäre, beobachtet zu werden, unter der sich die Kosten oder der Aufwand für die Implementierung der neuen Variante nicht lohnen würden.
• Kombinieren Sie Änderungen, wenn Ihre Pop-ups nicht gut funktionieren.
  Wenn Ihre Pop-ups nicht überzeugen, kombinieren Sie mehrere Änderungen und führen Sie sie auf einmal mit einem größeren MDE ein. Auch eine gute Idee, wenn Sie nicht genug Verkehr haben, da dies weniger Verkehr benötigt, um Bedeutung zu erreichen. Die Annahme ist, dass jeder Verbesserungsversuch zu spürbaren Verbesserungen führen sollte, möglicherweise im zweistelligen Bereich.
• Hüten Sie sich vor Fehlalarmen, je mehr Sie optimieren.
  Ein falsch positives Ergebnis oder ein Fehler 1. Art zeigt an, dass es einen Unterschied zwischen der Kontrolle und der Variante gibt, obwohl es in Wahrheit keinen gibt. Eine Möglichkeit, die Chancen, diese zu haben, wirklich zu verringern, besteht darin, zunächst einen Stichprobengrößenrechner zu verwenden, wie oben erwähnt.
  
  Tipp: Stellen Sie für unternehmenskritische Experimente das Konfidenzniveau auf 99 % ein, um die Wahrscheinlichkeit eines solchen Fehlers auf 1 % zu reduzieren.
  
  Je optimierter Ihre Pop-ups werden, desto aufmerksamer müssen Sie darauf achten, Fehlalarme zu ignorieren.

A/B-Testen eines Pop-ups in der Convert Experiences-App

Mit Convert können Sie die Pop-ups Ihres Shops A/B-testen und jedes der oben genannten Pop-up-Elemente ändern, um zu sehen, welche die Konversionsrate der Website verbessern.

Der beste Teil? Sie können benutzerdefinierte Pop-ups ohne die Hilfe Ihres UX-Teams hinzufügen!

A/B-Test bestehender Pop-ups mit dem Visual Editor

Ihre Website ist in Betrieb und Besucher Ihres Shopify-Onlineshops landen auf Ihrer Homepage. Also, wohin gehen wir von hier aus?

Schritt 1: Erstellen Sie ein neues Convert-Erlebnis:

Schritt 2: Laden Sie Ihre Shopify-Shop-URL, die das Popup enthält:

Schritt 3: Klicken Sie mit Ihrer Maus auf das Popup und Sie sehen das Menü des visuellen Editors, um Maßnahmen zu ergreifen und sein Format zu ändern:

Wenn Sie mit den Änderungen fertig sind, sehen Sie sich an, wie das neue Pop-up aussieht, indem Sie die Live-Vorschau-Option im Visual Editor verwenden:

Das ist das neue Look and Feel:

Sobald Sie sich mit dem neuen Format wohlfühlen, aktivieren Sie das Erlebnis für Ihre Shopify-Besucher, um zu sehen, welches der beiden besser abschneidet.

Fügen Sie mit den Convert Custom Editors Pop-ups zu Ihren Variationen hinzu

Wenn Sie jetzt ein Popup-Angebot auf Ihrer Homepage einfügen möchten, das nicht Teil Ihrer Shopify-Vorlage ist, keine Sorge!

Sie können Convert Custom CSS + HTML + JS-Editoren verwenden, um es hinzuzufügen und A/B-Tests durchzuführen.

Schritt 1: Erstellen Sie erneut ein neues Konvertierungserlebnis:

Schritt 2: Laden Sie Ihre Shopify-Shop-URL, die Sie in das Pop-up einfügen möchten:

Schritt 3: Verwenden Sie die benutzerdefinierten CSS- und benutzerdefinierten Javascript-Optionen, um den Popup-JavaScript-Code hinzuzufügen (Sie können viele online verfügbare Vorlagen finden oder Ihre eigenen codieren):

Für dieses Beispiel haben wir das hier verfügbare Popup verwendet: https://github.com/beeker1121/exit-intent-popup

Schritt 4: Wenden Sie dann die Änderungen an und speichern Sie sie.

Wenn Sie mit den Änderungen fertig sind, sehen Sie sich an, wie das neue Pop-up aussieht, indem Sie die Live-Vorschau-Option im Visual Editor verwenden:

Sobald Sie sich mit dem neuen Pop-up wohlfühlen, aktivieren Sie das Erlebnis für Ihre Shopify-Besucher, um zu sehen, ob das Angebot einen Unterschied macht.

Pop-ups sind nur dann lästig, aufdringlich und ineffektiv, wenn Sie sie nicht A/B-testen

Die Daten zeigen uns, dass die richtige Verwendung, Platzierung, das Timing und die Kopie ein Popup zu einem effektiven Weg machen können, um sinnvolle Aktionen voranzutreiben. Tatsächlich war ein interessantes Ergebnis, dass wir, wenn wir ein Angebot im Popup verwenden, sehen, dass wir mehr Interaktion erhalten als andere CTAs auf der ansonsten gleichen Website.

Joe Karasin, Leiter Wachstumsmarketing, CircleIt Inc.

Verabschieden Sie sich von der „Set it and forget it“-Strategie und setzen Sie auf A/B-Tests.

Durch Experimentieren können Sie feststellen, wie Benutzer auf Ihre Strategie reagieren, Anpassungen vornehmen und die gewünschten Ergebnisse erzielen.

Solange Sie die Fehler vermeiden, die Menschen beim A/B-Testing machen, und die richtige Testplattform wie Convert auswählen, können Sie eine Win-Win-Situation für Kunden und Ihre Marke schaffen.