Pop-ups de test A/B : comment rendre vos pop-ups beaucoup plus efficaces

Publié: 2022-05-19
Fenêtres contextuelles de test A:B

Les pop-up sont partout .

Certaines des plus grandes marques comme Amazon, Pinterest et Adidas utilisent des pop-ups. En fait, il est assez difficile de leur échapper.

pop ups partout meme
La source

Nous sommes prêts à parier que vous en avez vu au moins une demi-douzaine aujourd'hui. Malheureusement, les pop-ups ne sont pas la seule chose populaire. Les "hacks" pour créer les meilleurs pop-ups sont tout aussi répandus.


Voici le problème : vous pouvez absolument tirer des leçons de ce qui a fonctionné pour vos concurrents, mais une foi aveugle va détourner vos visiteurs et vous coûter très cher.

cacher
  • Pop-ups : gêne ou nécessité ?
  • Les différents types de pop-ups (avec les taux de conversion des pop-ups)
    • Fenêtres contextuelles d'entrée
    • Pop-ups activés par clic
    • Pop-ups d'intention de sortie
    • Pop-up chronométrés
    • Quel type de pop-up convertit mieux ?
  • Pop-ups de test A/B : devez-vous le faire et comment ?
    • Qu'est-ce que l'A/B Testing et le Split Testing pour les pop-ups ?
    • Tests A/B pop-up : différents éléments à modifier
      • Heure de déclenchement
      • Position
      • Copie
      • Offrir
      • Appel à l'action (CTA)
      • Gamification
    • Meilleures métriques à suivre lorsque les tests A/B pop-ups
    • Consignes à garder à l'esprit lorsque les tests A/B s'affichent
  • Test A/B d'une fenêtre contextuelle dans l'application Convert Experiences
    • Test A/B des pop-ups existants avec l'éditeur visuel
    • Ajoutez des pop-ups sur vos variations avec les éditeurs personnalisés de conversion
  • Les pop-ups ne sont ennuyeux, intrusifs et inefficaces que si vous ne les testez pas A/B

Pop-ups : gêne ou nécessité ?

Nous avons quelques points chauds d'experts CRO et de spécialistes du marketing :

Oh, ils sont nuls. Ils sont les pires absolus - PARCE QUE les gens pensent que "réglez-le et oubliez-le" est une stratégie .

Shiva Manjunath à Speero

Les pop-ups sont généralement gênants. Un spécialiste du marketing, cependant, les crée d'une certaine manière, de sorte que l'utilisateur les trouve plus utiles qu'ennuyeux .

Arek Nowakowski, concepteur de produits chez Spacelift

Mais la bonne réponse à cette question est que cela dépend.

Les pop-ups peuvent donner d'excellents résultats par rapport à d'autres chaînes ou être une mauvaise décision pour vous. Vous ne le saurez pas avec certitude tant que vous n'aurez pas divisé les pages de test avec et sans pop-ups.

La vraie raison pour laquelle les pop-ups ont une mauvaise réputation est la mauvaise expérience utilisateur. Voici ce qu'Amanda Natividad, vice-présidente du marketing chez SparkToro, a récemment vécu :

Une mauvaise expérience utilisateur peut entraîner un changement de comportement de l'utilisateur comme celui-ci :

changement de comportement de l'utilisateur

Et les personnes installant des bloqueurs de pop-up pour les empêcher de gâcher leur expérience (c'est la raison pour laquelle lorsque vous recherchez des pop-up, ces bloqueurs de publicités sont si bien classés sur Google.)

Nous devons reconnaître que les pop-ups vont toujours être ennuyeux. Mais ils ne doivent pas être ennuyeux pour tout le monde.

Shiva chez Speero partage :

Lorsque cela est fait correctement, ils sont ciblés, PUIS deviennent précieux. Le servir à tout le monde peut avoir des taux d'engagement globaux et des soumissions globales plus élevés, mais la qualité sera probablement bien moindre. Et personne ne suit jamais non plus les effets "préjudiciables" de ces types de pop-ups .

Vous devez savoir comment et si cela a un impact défavorable sur d'autres métriques secondaires et garde-corps.

Les métriques de garde-corps sont des métriques critiques conçues pour alerter les expérimentateurs d'une hypothèse violée. Les mesures de garde-corps fournissent ce que Spitzer (2007) appelle la « capacité d'inciter à une action éclairée ». Lorsqu'un effet de traitement déplace de manière inattendue une métrique de garde-fou, vous pouvez souhaiter réduire la confiance dans les résultats ou arrêter une expérience dans les cas où un préjudice pourrait être causé aux utilisateurs ou à l'organisation .

Ronny Kohavi, consultant en tests A/B

Les différents types de pop-ups (avec les taux de conversion des pop-ups)

La toute première publicité pop-up est apparue sur Tripod à la fin des années 1990 et leur inventeur, Ethan Zuckerman, s'est depuis excusé pour la nuisance qu'il a déclenchée sur Internet. Tout au long de son histoire mouvementée, les pop-ups ont traversé des phases de paria marketing.

Considérés à l'origine comme la nouvelle chose brillante à être abusée par tous les sites Web frauduleux, les pop-ups ont sombré dans l'obscurité plus rapidement que les fidget spinners. La cécité des pop-up (ou cécité des bannières) signifiait que les utilisateurs ne les considéraient pas comme une gêne - ils en devenaient immunisés et l'ignoraient rapidement.

Les pop-ups ont retrouvé un nouveau souffle grâce à des spécialistes du marketing avisés en matière de tests A / B qui ont réussi à les ressusciter d'entre les morts et à utiliser leur intrusivité pour le bien proverbial.

Voici les différents types de pop-ups que vous rencontrerez (avec exemples et benchmark des taux de conversion) :

Barre latérale : les pop-ups peuvent être largement classés en 3 catégories en fonction du moment où ils apparaissent, de la manière dont ils apparaissent et du type de contenu qu'ils proposent. Pour cette raison, vous verrez que certains articles mentionnent plus de 50 types différents de pop-ups, mais nous nous en tenons aux bases et à ce qui est le plus pertinent pour le commerce électronique.

Fenêtres contextuelles d'entrée

Les fenêtres contextuelles d'entrée sont présentées aux visiteurs du site Web presque immédiatement après leur arrivée sur la page. Certains bloquent l'affichage de la page entière (également appelés pop-ups de tapis de bienvenue) tandis que d'autres apparaissent au milieu de l'écran (lightbox). Par exemple, Wishpond utilise ces deux types l'un après l'autre :

Exemple de pop-up de test A/B Pop-up de tapis Wishpond
Exemple de pop-up de test A/B Wishpond lightbox
La source

Bien que ceux-ci puissent être efficaces pour inciter les utilisateurs à prendre des mesures immédiates, le fait de définir ceci comme le premier pop-up peut également amener les utilisateurs à rebondir instantanément.

L'astuce ici est d'utiliser un micro-engagement.

Les micro-engagements peuvent avoir un impact énorme sur vos taux d'engagement d'opt-in par e-mail. Demandez à l'utilisateur de cliquer simplement sur oui pour recevoir une remise. Après ce petit oui, ils croient inconsciemment qu'ils doivent être intéressés et voudront rester cohérents tout en continuant à s'engager avec le pop-up. Cela crée moins de friction pour eux en remplissant le formulaire, ce qui nécessite plus d'adhésion et de pouvoir décisionnel. C'est le principe de l'engagement et de la cohérence .

Anthony Morgan, PDG et fondateur d'Enavi

Pop-ups activés par clic

Ces pop-ups s'affichent lorsque les utilisateurs cliquent sur un lien. Ils sont beaucoup moins intrusifs et souvent utiles.

Prenez la page produit d'Amazon pour Alexa par exemple. Lorsque vous cliquez sur "voir ce qu'Alexa peut faire", une fenêtre contextuelle contenant plus d'informations s'affiche.

La source

Lire ensuite : 8 astuces sur les pages de produits pour augmenter le trafic et les conversions

Les fenêtres contextuelles activées par clic sont assez courantes dans les magasins de commerce électronique, car elles permettent aux acheteurs d'explorer à volonté et d'offrir plus d'informations lorsqu'ils en ont besoin.

Pop-ups d'intention de sortie

Ces pop-ups se déclenchent lorsque les visiteurs tentent de quitter votre site - un Hail Mary pour les amener à se convertir avant qu'ils n'abandonnent leur panier.

Sur mobile, ceux-ci se déclenchent lorsque quelqu'un revient rapidement en arrière ou appuie sur le bouton de retour. Elauz offre une remise de 15 % aux premiers acheteurs qui tentent de quitter la page de destination.

Exemple de pop-up de test A/B Pop-up d'intention de sortie Elauz
La source

Pop-up chronométrés

Une fenêtre contextuelle chronométrée n'apparaît aux visiteurs qu'après une période spécifiée. Combien de temps après devriez-vous montrer ce message ? Encore une fois, c'est quelque chose que vous devez tester A/B.

Ce pop-up de Sumo en est un bon exemple. Il apparaît après que vous ayez passé un peu de temps à lire le message.

Exemple de pop-up de test A/B pop-up chronométré
La source

Quel type de pop-up convertit mieux ?

Les dernières études de conversion terminées !

Sumo a analysé 2 milliards d'exemples de pop-up en 2019 et voici ce qu'ils ont trouvé :

  • Les 10 % des pop-ups les plus performants ont enregistré un taux de conversion de 9,28 % en moyenne
  • 3 marques sur 100 avaient des pop-ups avec des taux de conversion supérieurs à 11 %
  • Le taux de conversion pour l'ensemble des pop-ups s'élève à 3,09% en moyenne

Remarque : les taux de conversion baissent pour les sites à fort trafic. Ainsi, alors que 3,09 % peut sembler un petit nombre, 100 000 visiteurs peuvent vous rapporter 3 000 conversions (ce qui n'est pas mal du tout).

Voici un exemple concret de Dave Evangelisti, fondateur et PDG de TestGuide :

Sur une page Web, nous avons pu augmenter notre « taux de conversion calculé » (c'était un objectif basé sur l'acheminement des personnes vers une certaine page) de 1,38 %. Bien que cela puisse ne pas sembler significatif, avec des milliers de personnes, 1,38 % peuvent vraiment déplacer l'aiguille .

popups à conversion la plus élevée vs popups à conversion moyenne SumoMe
La source

Sleeknote a examiné plus d'un milliard de pop-ups en 2020 et voici ce qu'ils ont trouvé :

  • Les pop-ups avec images avaient un taux de conversion de 3,80 % tandis que les pop-ups sans images avaient un taux de conversion de 2,07 %.
  • Les pop-ups configurés pour apparaître après un délai de 8 secondes avaient un taux de conversion de 3,62 % et étaient mieux convertis que les pop-ups affichés avant ou après
  • Les pop-ups avec deux champs de saisie ont vu un taux de conversion plus élevé à 3,31 %, ce qui était meilleur que les pop-ups avec trois champs qui avaient un taux de conversion de 1,08 %

Comme Sleeknote, OptiMonk a analysé les pop-ups de ses utilisateurs en 2021 pour publier ses conclusions :

  • Le taux de conversion moyen était de 11,09 %
  • Les 10 % de pop-ups les plus performants avaient un taux de conversion moyen de 42,35 %
  • Le taux de conversion moyen pour les ordinateurs de bureau était de 9,69 % et de 11,07 % pour les mobiles.
  • Les pop-ups d'abandon de panier avaient un taux de conversion de 17,12 %
Statistiques contextuelles de test A/B Optimonk
La source

Remarque : Ces points de repère proviennent de recherches originales et d'hypothèses qui ont été testées et ne doivent pas être utilisés à des fins de comparaison directe. Mais ces résultats peuvent vous donner une meilleure idée des éléments que vous devriez tester (nous approfondirons plus en détail ci-dessous).

Pop-ups de test A/B : devez- vous le faire et comment ?

Nous vous demandons de rejeter deux hypothèses :

  1. Ce n'est pas parce que les pop-ups fonctionnent pour votre industrie ou votre concurrent qu'elles fonctionneront automatiquement pour vous.
  2. Ce n'est pas parce que quelque chose fonctionne qu'il ne peut pas être amélioré.

Pour en être sûr, vous devez tester les pop-ups A/B.

Voici un exemple de Sumo pour montrer à quel point cela peut faire une différence.

Exemple de popup de test A/B Sumo original
Exemple de popup de test A/B Variante Sumo
La source

Vous pouvez supposer que la version B a obtenu de meilleurs résultats car elle suit toutes les « meilleures pratiques », mais en fait, la première fenêtre contextuelle a dépassé de 30 %.

Qu'est-ce que l'A/B Testing et le Split Testing pour les pop-ups ?

Les tests A/B vous permettent de tester les modifications apportées à un ou plusieurs éléments. Vous pouvez ajouter, éliminer ou modifier des éléments et suivre les changements pour voir comment ils stimulent les conversions.

Lorsque les tests A/B s'affichent, vous créez deux versions presque identiques et opposez la variante (ou challenger) à l'original (contrôle).

Bien que la plupart des gens confondent les tests fractionnés et les tests A/B, il s'agit de deux techniques d'optimisation du taux de conversion complètement différentes.

Dans les tests fractionnés ou les tests d'URL fractionnées, vous répartissez le trafic de manière égale pour envoyer les visiteurs vers deux versions entièrement différentes hébergées sur des URL différentes. Cela vous aide à identifier la version la plus performante.

Si vous vouliez comprendre si les pop-ups sont une bonne idée ou non, un test fractionné serait la meilleure solution. Une page avec un pop-up empilé les uns contre les autres avec un mélange d'éléments comme la copie et les repères pour offrir les mêmes avantages et la même valeur.

Prenez Marks & Spencer par exemple. Au lieu d'utiliser une fenêtre contextuelle pour créer leur liste de diffusion, ils ont une section en bas de la page où les visiteurs peuvent s'abonner.

exemple de test A/B contextuel Marks & Spencer
La source

Lire ensuite : 4 choses que nous avons apprises en analysant les statistiques des e-mails contextuels de 50 commerçants en ligne

Si vous découvrez que les pop-ups n'effraient pas les visiteurs, faites un changement à la fois pour isoler les effets des tests A/B à travers une série d'expérimentations pour savoir ce qui fonctionne pour votre entreprise.

Faizan Fahim, Growth Hacker chez Breeze recommande d'éviter certaines erreurs courantes lors des pop-ups de test A/B :

  • N'affichez pas deux fois la même fenêtre contextuelle. C'est insultant pour les utilisateurs car ils ont ignoré et fermé la fenêtre contextuelle une fois, mais le site Web leur montre toujours la même fenêtre contextuelle.
  • Faites en sorte que la fenêtre contextuelle soit liée à la page sur laquelle se trouve le visiteur.

    • Si le visiteur se trouve sur la page du panier, montrez-lui la réduction.
    • Si le visiteur se trouve sur la page de comparaison, montrez-lui la fenêtre contextuelle "Démarrer l'essai".
    • Si le visiteur lit l'article depuis longtemps, montrez-lui la fenêtre contextuelle d'abonnement.

Arek Nowakowski, Product Designer chez Spacelift met en garde contre une autre erreur courante :

Évitez d'exécuter les tests A/B pendant les festivals et les événements. Les comportements des clients changent autour des fêtes et des jours fériés. Exécutez tous les tests contextuels A/B lorsque les affaires sont habituelles

Tests A/B pop-up : différents éléments à modifier

Vous pouvez tester à peu près tous les éléments de votre pop-up tant que vous sortez de la recherche de conversion.

Étudiez le comportement des utilisateurs, analysez les avis, supportez les tickets, regardez les rediffusions des visiteurs et analysez les métriques actuelles avant de commencer la planification des tests. Cela constituera la base de votre hypothèse afin que vous n'apportiez pas arbitrairement des changements qui pourraient nuire à votre entreprise.

Cela dit, les éléments les plus courants qui sont testés A/B sont la copie, le déclencheur, le placement, le texte CTA et différents types de pop-ups .

Heure de déclenchement

Les recherches de Sleeknote indiquent que 8 secondes sont le point idéal que vous devriez viser, mais encore une fois, vous ne pouvez pas le savoir avec certitude à moins de le tester.

quand afficher une popup
La source

Mais la plupart des experts semblent s'accorder sur une chose : ce n'est pas une bonne idée de montrer à vos visiteurs une fenêtre contextuelle dès qu'ils arrivent sur une page.

Les déclencheurs basés sur le temps sont des moyens de niveau A pour vous assurer que vous ciblez les bons utilisateurs sans énerver le reste.

Shiva Manjunath, Speero

L'un des clients de Wise Pop a testé 3 délais différents (10, 20 et 40 secondes) avec cette fenêtre contextuelle :

Délai de pop-up de test A/B Wise Pop
La source

Leurs tests ont révélé que le meilleur moment pour afficher leur offre est après 10 secondes.

Wise pop A/B test popup résultats du test de retard

Des retards plus longs ont fait que moins de personnes ont vu la fenêtre contextuelle, alors que le taux d'abonnement était élevé, le nombre d'e-mails collectés ne l'était pas.

Assurez-vous de ne pas être la proie de faux positifs. Lisez notre guide pour vous aider à interpréter correctement les résultats des tests A/B et à les améliorer.

Position

Devez-vous placer votre pop-up au début de votre page, utiliser un tapis de bienvenue pour couvrir tout l'écran ou une lightbox ?

La source

Ou mieux encore, essayez une fenêtre contextuelle sur le côté de la page ou une fenêtre contextuelle déroulante moins intrusive ?

L'utilisation d'une fenêtre contextuelle déclenchée par défilement sur un article de blog est un bon moyen de persuader les utilisateurs de lire davantage de votre contenu. Cela persuadera les gens de s'inscrire à votre newsletter, qui contiendra des conseils utiles et des liens vers de nouveaux contenus de blog.

Josh Pelletier, directeur marketing (CMO) chez BarBend
Exemples de fenêtres contextuelles Getsitecontrol
La source

Getsitecontrol a deux pop-ups moins intrusifs sur leur page qui ne bloquent pas la vue de la page.

PS Vous voudrez également tenir compte de l'expérience mobile par rapport à l'expérience de bureau lorsque vous pensez à la position des pop-ups. Portez une attention particulière au mobile puisque Sleeknote a constaté que les pop-ups mobiles augmentent les conversions (5,8 %) par rapport aux ordinateurs de bureau (3,11 %).

Les fenêtres contextuelles pour téléphones mobiles doivent être conçues en tenant compte de la zone d'écran disponible ainsi que d'autres aspects de l'expérience de l'utilisateur mobile.

Veronica Miller, responsable du marketing numérique, VPNprésentation

Copie

La bonne copie peut amener vos clients à agir ou à ignorer complètement vos tentatives.

La copie est très importante et peut déplacer l'aiguille de quelques points de pourcentage. Nous essayons constamment différentes copies. Nous avons modifié les titres et le texte de nos bloqueurs de fenêtres contextuelles et atteint une amélioration de 30 %. Nous sommes passés d'une fenêtre contextuelle d'arrêt plus agressive qui annule les réservations que l'on pourrait avoir à s'inscrire, à une fenêtre contextuelle qui met en évidence la preuve sociale et la valeur que notre application de recherche de colocataires peut vous apporter .

Rany Burstein, PDG et fondateur, Diggz.co

Vous pouvez effectuer des micro-expériences en modifiant le titre de votre copie, en variant la longueur ou en utilisant des mots puissants.

Chez Paperbell, Laura Roder (fondatrice) trouve que le titre est l'endroit où se trouve le plus grand ascenseur.

Exemple de titre de test A/B contextuel

Vous pouvez utiliser des heatmaps et des clickmaps pour savoir comment les visiteurs interagissent avec la copie et ce qui attire leur attention.

Exemple de recherche de carte thermique contextuelle
La source

Un autre exemple que vous pouvez étudier est celui de Contrast, une agence de marketing eCommerce :

Nous avons lancé une fenêtre contextuelle d'e-mail spécifique à la page de destination pour un client de Contrast autour de l'hypothèse du micro-oui.

La plupart des magasins proposent une fenêtre contextuelle du type "si vous nous donnez votre e-mail, vous pouvez obtenir x % de réduction". Nous voulions exécuter une variante différente pour tester cette idée. Nous avons changé le libellé pour puiser dans la psychologie humaine.

Nous avons diffusé le message suivant : "Voulez-vous économiser 20 % sur votre commande aujourd'hui ?". Car qui dirait non à ça ?

Pour y parvenir nous avons 2 boutons : Oui / Non

– Oui, passez à l'étape suivante pour saisir les informations de messagerie.

– Non, ferme la pop-up

Grâce à cet A/B testing, nous avons pu faire passer le taux d'option email de 3,3% de collecte à 9,1%.

Elliot Davidson, fondateur et directeur de Contrast

Offrir

Comparez différentes remises, aimants principaux et informations d'expédition dans votre offre.

Nous avons testé l'offre de livraison gratuite via une fenêtre contextuelle aux utilisateurs qui reviennent lors de l'entrée sur le site Web et avons constaté une augmentation de 73 % du taux de conversion du commerce électronique pour ce public cible. Associer la bonne offre au bon public est crucial, non seulement pour que le pop-up résonne, mais aussi pour que le pop-up contribue positivement au résultat net. La stratégie d'offre ne doit pas toujours être basée sur les prix. Nous avons un taux d'inscription de 6 % sur notre page FSA/HSA pour que les clients demandent plus d'informations sur la façon d'acheter nos produits avec leurs cartes FSA ou HSA.

Jonathan Finegold, CRO chez Medcline.com

SwissWatchExpo, un client d'OptiMonk, a créé deux versions d'une copie d'abandon de panier pour voir quel message donnerait les résultats souhaités.

La version A a invoqué FOMO en informant les utilisateurs qu'ils avaient le dernier article disponible et qu'ils ont constaté une augmentation de 17 % du taux de conversion.

SwissWatchExpo A/B testing cart abandon popup version A
La source

La version B offrait une remise et une messagerie légèrement différente apportant un taux de conversion de plus de 30 %.

SwissWatchExpo A/B testing cart abandon popup version B
La source

Appel à l'action (CTA)

Vous pouvez tester la couleur, la copie, la taille et l'alignement du bouton d'appel à l'action.

Il peut être particulièrement important de vérifier la copie du CTA. S'il y a une déconnexion entre ce que vous proposez et le CTA, les utilisateurs sont moins susceptibles de convertir.

Dans la fenêtre contextuelle ci-dessous, cliqueriez-vous s'il était écrit "S'abonner" au lieu de "Oui, envoyez-moi ces conseils" ?

apparaitre
La source

Probablement pas. Assurez-vous que le CTA correspond à la promesse que vous faites. Et vous pouvez utiliser cela comme une opportunité de choquer et d'admirer.

Jetez un œil au formulaire d'inscription à la newsletter de Klientboost :

Exemple de popup de formulaire d'inscription à la newsletter Klientboost

Au lieu de l'habituel "Abonnez-vous", le "Nous pourrions le regretter" attire l'attention.

Vous pouvez également ajouter ou tester le texte utilisé par les utilisateurs pour fermer une fenêtre contextuelle.

La fenêtre contextuelle d'intention de sortie de CoSchedule qui invite les utilisateurs à essayer l'extension gratuite peut être fermée si vous cliquez sur "Je refuse l'extension gratuite".

Fenêtre contextuelle d'intention de sortie de Coschedule
La source

Nous avons testé une fenêtre contextuelle d'intention de sortie sur nos pages de produits, offrant une remise supplémentaire avec un code de coupon unique, et avons trouvé un taux d'inscription de 7 %. Dans ce cas, la stratégie d'offre a eu un impact important, avec un coupon de réduction de 10 % performant plus de deux fois ainsi qu'une offre de coupon de livraison gratuite (nous avons également constaté une augmentation de 18 % du taux d'ouverture des e-mails d'offre).

Jonathan Finegold, CRO chez Medcline.com

Lisez ensuite : Utilisez les fenêtres contextuelles d'intention de sortie pour augmenter vos inscriptions de 150 % (en seulement 15 minutes)

Gamification

Les pop-ups ludiques motivent les utilisateurs à agir en échange d'une récompense.

Les recherches d'Optimonk ont ​​révélé que les "roues chanceuses" ou roues de la fortune avaient un taux de conversion de 13,23 %.

Mais vous ne devez pas vous arrêter là. Vous pouvez également essayer les pop-ups "choisir un cadeau" ou "gratter la carte".

La source

La source

Medcline a pu augmenter son taux de capture de 12 % en organisant des tirages au sort par rapport à une offre traditionnelle "inscription à notre newsletter".

Un autre bon exemple vient de Ross Kernez qui n'utilise que des pop-ups gamifiés pour son client après ces résultats :

Nous avons testé 2 types différents de pop-ups gamifiés. L'un consistait à faire tourner la roue pour gagner un pop-up de prix et l'autre consistait à sélectionner une boîte pour voir si vous avez gagné un bon de 10 €.

Notre meilleur taux de conversion précédent était de 8 %. Lorsque nous avons testé l'un ou l'autre des pop-ups ludiques, notre taux de conversion est passé à un minimum de 14 % .

Ross Kernez, consultant en chef pour la stratégie en ligne - Ross Kernez Consulting

Meilleures métriques à suivre lorsque les tests A/B pop-ups

Vous ne pouvez pas prendre le gagnant ou le perdant d'un test pour argent comptant lorsque vous testez des idées A/B, car vous devez comprendre à la fois comment et pourquoi vous avez obtenu ces résultats.

C'est là que vos mesures entrent en jeu.

Une métrique est un type de données singulier qui vous aide à mesurer l'impact des tests A/B par rapport à vos objectifs commerciaux.

Mais comment décidez-vous lesquels suivre ?

Il y en a certains que vous devez suivre tandis que d'autres dépendent du type de pop-up.

Selon le type de pop up (coupon pour eCommerce, e-book, etc.), j'essaie d'aller le plus possible vers des métriques plus en amont. Vous devez toujours suivre le taux de « déclenchement » (car ce sera votre dénominateur pour les mesures d'engagement). Cependant, des éléments tels que "popup fermé" et "taux de soumission" sont extrêmement importants à suivre. Combiner cela avec la créativité et le déclenchement des cartes thermiques/enregistrements de session vous donnera PLUS d'informations ! Des points bonus pour des choses comme le taux de sortie, bien qu'ils deviennent délicats avec le bruit (par exemple, le taux de sortie peut ne pas être bien défini SAUF si vous incluez ceux qui ont vu la fenêtre contextuelle ).

Shiva Manjunath, Speero

Karim Naufal, notre expert interne en tests A/B, convient que les métriques générales s'appliquent toujours.

Oui, le taux de conversion doit être mesuré pour les boutons contextuels eux-mêmes, par exemple, et le X de fermeture. Mais mesurer le taux de rebond, ou le taux d'abandon, c'est bien (est-ce que cela crée de la frustration ?). Mesurer également le temps de fermeture de la fenêtre contextuelle est probablement également pertinent (quel intérêt a-t-il suscité ?).

D'autres mesures de clics telles que Ajouter au panier restent pertinentes. Pourtant, le meilleur à suivre est la métrique incontestée des revenus par visiteur qui mesure les revenus, qui en elle-même contient les informations sur le taux de conversion et la valeur moyenne des commandes.

Une autre mesure assez utile qui mesure l'engagement des utilisateurs est Sessions per User .

Mais Jonathan Finegold, CRO chez Medcline.com ne pense pas que vous devriez suivre les revenus, et voici pourquoi :

Pour nos blogs, les revenus ne sont pas le KPI principal, le taux d'inscription l'est parce que notre objectif est de maximiser la capture d'e-mails à partir du trafic organique. De même, même dans un contexte de commerce électronique, les revenus peuvent ne pas toujours être la meilleure mesure car, à la marge, l'offre peut ne pas être rentable, et donc le bon KPI, dans ce cas, peut-être le taux de variation de la marge en dollars .

En un mot, voici les métriques que vous devriez examiner lorsque les tests A/B ou les tests fractionnés s'affichent :

  • Taux de conversion
  • Taux de clics
  • Taux de rebond
  • Taux d'abandon
  • Session par utilisateur
  • Ajouter au panier
  • Revenu par visiteur
  • Pop up fermé
  • Taux de soumission

Connectez votre Google Analytics et Shopify à une plateforme de test A/B comme Convert pour mesurer avec précision toutes ces mesures.

Voici un exemple de ce à quoi ce processus pourrait ressembler :

Par exemple, lors du test de la durée avant qu'une fenêtre contextuelle n'engage un utilisateur, nous examinons les données de la carte thermique et de Google Analytics pour découvrir la vitesse à laquelle les personnes ferment la fenêtre contextuelle.

Nous avons constaté que tout élément de 15 secondes ou moins entraînait un taux de fermeture d'environ 86 % et contribuait également à une augmentation du taux de rebond. Si le moment de la fenêtre contextuelle se situait entre 15 et 45 secondes à partir du moment où l'utilisateur était sur le site, nous avons vu le taux de fermeture chuter à 61 %, avec un taux de rebond réduit de 14 %.

Lorsque nous avons réglé le temps sur 1 minute, nous avons vu le taux de fermeture chuter de 5 % supplémentaires et le taux de rebond diminuer de 6 %. De plus, l'interaction avec le bouton CTA augmentait de 40% lorsque 1 minute était le temps défini. Les deux autres intervalles n'ont vu que peu ou pas de changement dans le taux de clics CTA.

Si nous testons le texte dans le bouton CTA, nous examinons le CTR% du CTA. Lorsque nous utilisons un langage plus direct et spécifique avec un modificateur de temps (ex : maintenant, aujourd'hui), nous avons constaté une augmentation de 14 % du CTR.

Joe Karasin, responsable du marketing de croissance, CircleIt Inc.

Une autre mesure à laquelle vous n'avez peut-être pas pensé et qui peut avoir un impact significatif sur votre entreprise est la vitesse des pages.

La meilleure métrique à suivre lorsque les pop-ups de test A/B sont Page Speed.

Vous ne devriez pas être surpris si le pop-up avec des gifs et des vidéos intégrés ralentit la page. Les pop-up se chargent à partir de la même requête HTTP que la page, affectant la vitesse de la page.

Vous pouvez calculer l'impact d'un pop-up sur la page en analysant le graphique en cascade. Exécutez la variation de votre page via le test Pingdom et comparez la vitesse de la page. S'il y a une différence significative dans la vitesse de chargement, votre test a déjà échoué. La vitesse de chargement du site Web vient avant les pop-ups, car l'expérience de navigation affecte grandement le taux de conversion .

Arek Nowakowski, concepteur de produits chez Spacelift

Remarque : nous avons brièvement mentionné les métriques de garde-corps auparavant, mais il est important de les garder à l'esprit lors du test des fenêtres contextuelles. Ce sont des mesures de base que vous ne voulez pas dégrader lorsque vous testez, car une baisse des performances peut avoir un impact énorme sur votre entreprise.

Consignes à garder à l'esprit lorsque les tests A/B s'affichent

Lorsque vous êtes prêt à démarrer les pop-ups de test A/B, suivez ces recommandations pour améliorer leur efficacité :

  • Effectuez des calculs de pré-test pour vous assurer d'avoir la bonne taille d'échantillon.
    Si vous n'effectuez pas le test sur un groupe de personnes suffisamment important, vous risquez de faire une erreur, comme croire qu'un faux positif est réel. Faites vos calculs de pré-test pour vérifier si vous avez la fréquentation nécessaire pour parcourir le cycle d'ajustements que vous avez en tête.

    Conseil : utilisez notre calculateur de test A/B pour effectuer des calculs de signification, de valeur p, de puissance, de taille d'échantillon et de MDE.
  • Planifiez une foule de changements infimes avec de petits MDE pour les sites à fort trafic.
    Si vous avez un trafic élevé, vous pouvez tracer une cadence complète de changements minute avec de petits MDE (effet minimum détectable). La plupart des expériences contextuelles n'entraînent que des augmentations à un chiffre. Cette approche peut donc vous aider à comprendre comment de petits changements peuvent être liés aux ajustements correspondants des KPI. Plus votre trafic est élevé, plus les ascenseurs que vous pouvez détecter sont petits et soyez sûr des résultats.

    Remarque : MDE est simplement la taille d'effet minimale qui vaudrait la peine d'être observée, sous laquelle le coût ou l'effort de mise en œuvre de la nouvelle variante n'en vaudrait pas la peine.
  • Combinez les modifications si vos pop-ups ne fonctionnent pas bien.
    Si vos fenêtres contextuelles ne tirent pas leur poids, combinez plusieurs modifications et déployez-les en même temps avec un MDE plus grand. C'est également une bonne idée si vous n'avez pas assez de trafic, car cela nécessitera moins de trafic pour atteindre l'importance. L'hypothèse est que toute tentative d'amélioration devrait conduire à des améliorations tangibles, éventuellement à deux chiffres.
  • Méfiez-vous des faux positifs plus vous optimisez.
    Un faux positif ou une erreur de type I indique qu'il existe une différence entre le contrôle et la variante alors qu'en réalité, il n'y en a pas. Une façon de vraiment diminuer les chances d'en avoir est d'abord d'utiliser un calculateur de taille d'échantillon comme mentionné ci-dessus.

    Conseil : Pour les expériences critiques, définissez le niveau de confiance sur 99 % pour réduire les risques de commettre une telle erreur à 1 %.

    Plus vos pop-ups sont optimisés, plus vous devez être attentif pour ignorer les faux positifs.

Test A/B d'une fenêtre contextuelle dans l'application Convert Experiences

En utilisant Convert, vous pouvez tester A/B les pop-ups de votre boutique et modifier l'un des éléments pop-up mentionnés ci-dessus pour voir ce qui améliorera le taux de conversion du site.

La meilleure partie? Vous pouvez ajouter des pop-ups personnalisés sans l'aide de votre équipe UX !

Test A/B des pop-ups existants avec l'éditeur visuel

Votre site Web est opérationnel et les visiteurs de votre boutique en ligne Shopify arrivent sur votre page d'accueil. Alors, où allons-nous partir d'ici?

Étape 1 : Créer une nouvelle expérience Convert :

Créer une nouvelle expérience Convertir

Étape 2 : Chargez l'URL de votre boutique Shopify qui inclut la fenêtre contextuelle :

Exemple de test contextuel Convertir des expériences

Étape 3 : Cliquez sur le pop-up avec votre souris et vous verrez le menu de l'éditeur visuel pour agir et changer son format :

Exemple de test contextuel Éditeur visuel Convert Experiences

Une fois que vous avez terminé avec les modifications, prévisualisez à quoi ressemble la nouvelle fenêtre contextuelle en utilisant l'option Aperçu en direct depuis l'éditeur visuel :

Aperçu de l'exemple de test contextuel Convert Experiences

Voici la nouvelle apparence :

Popup de test A/B avec Convert Experiences

Une fois que vous vous sentez à l'aise avec le nouveau format, activez l'expérience pour vos visiteurs Shopify pour voir lequel des deux fonctionne le mieux.

Ajoutez des pop-ups sur vos variations avec les éditeurs personnalisés de conversion

Si maintenant vous souhaitez inclure une offre pop-up sur votre page d'accueil qui ne fait pas partie de votre modèle Shopify, pas de soucis !

Vous pouvez utiliser Convertir les éditeurs personnalisés CSS + HTML + JS pour l'ajouter et le tester A/B.

Étape 1 : créez à nouveau une nouvelle expérience de conversion :

créer un nouveau test dans Convert Experiences

Étape 2 : chargez l'URL de votre boutique Shopify dans laquelle vous souhaitez inclure la fenêtre contextuelle :

Test de pop-up Boutique Shopify Convertir des expériences

Étape 3 : Utilisez les options CSS personnalisées et Javascript personnalisées pour ajouter le code JavaScript contextuel (vous pouvez trouver de nombreux modèles disponibles en ligne ou coder le vôtre) :

test de code contextuel personnalisé dans Convert Experiences

Pour cet exemple, nous avons utilisé le pop-up disponible ici : https://github.com/beeker1121/exit-intent-popup

test de popup JavaScript personnalisé dans Convert Experiences

Étape 4 : Appliquez ensuite les modifications et enregistrez-les.

Une fois que vous avez terminé avec les modifications, prévisualisez à quoi ressemble la nouvelle fenêtre contextuelle en utilisant l'option Aperçu en direct depuis l'éditeur visuel :

prévisualiser la fenêtre contextuelle dans Convert Experiences

Une fois que vous vous sentez à l'aise avec la nouvelle fenêtre contextuelle, activez l'expérience pour vos visiteurs Shopify pour voir si l'offre fera une différence.

Les pop-ups ne sont ennuyeux, intrusifs et inefficaces que si vous ne les testez pas A/B

Les données nous montrent qu'une utilisation, un placement, un timing et une copie appropriés peuvent faire d'une fenêtre contextuelle un moyen efficace de conduire une action significative. En fait, une découverte intéressante est que lorsque nous utilisons une offre dans la fenêtre contextuelle, nous constatons que nous recevons plus d'interactions que les autres CTA sur le site Web qui sont par ailleurs identiques.

Joe Karasin, responsable du marketing de croissance, CircleIt Inc.

Éloignez-vous de la stratégie « définissez-le et oubliez-le » et adoptez les tests A/B.

L'expérimentation peut vous aider à identifier la façon dont les utilisateurs réagissent à votre stratégie, à effectuer des ajustements et à obtenir les résultats souhaités.

Tant que vous évitez les erreurs que les gens commettent lors des tests A/B et que vous choisissez la bonne plateforme de test comme Convert, vous pouvez créer une situation gagnant-gagnant pour les clients et votre marque.

Maître CRO
Maître CRO