Comment effectuer un test A/B sur des sites à faible trafic

Publié: 2019-04-26
Comment effectuer un test A/B sur des sites à faible trafic

Avertissement de déclenchement:

Nous savons qu'il y a une tonne de débats qui font rage autour de la signification statistique, de la marque mythique (ou pas ?) à 95 %, des tests et du trafic, et plus encore.

Si vous êtes un optimiseur qui est très attaché à ce genre de choses, vous pourriez être déclenché. Eh bien, les commentaires sont ouverts et nous pouvons avoir une conversation vraiment éclairante.

Commençons!

Les tests ne fonctionnent pas pour les sites Web à faible trafic.

Ça c'est sûr.

Parce que pour obtenir des informations statistiquement significatives, vous devez montrer les variantes de votre expérience à (au moins) des milliers d'utilisateurs.

En fait, chez Convert Experiences, nous recommandons souvent à nos utilisateurs d'exécuter des tests A/B - qui sont les expériences CRO les plus simples - uniquement s'ils peuvent envoyer environ 10 000 visiteurs à chaque variante.

En outre, nous vous suggérons d'enregistrer environ 1 000 conversions pour fournir une preuve concluante de la supériorité du contrôle ou de la variante.

Cela explique en quelque sorte pourquoi le CRO n'est pas un marché d'un million de clients, car il n'y a que quelques sites Web (ou entreprises) de 100 000 personnes avec la fréquentation à tester avec succès et les budgets pour les solutions d'optimisation coûteuses (qui vont rapidement "entreprise"). !

Les sites à faible trafic devraient-ils exclure les tests ?

Étant donné qu'une petite entreprise moyenne ne reçoit que quelques centaines de visiteurs par jour sur son site Web, les expériences de test A/B n'ont aucun sens pour elles.

Mais:

Cela ne signifie pas qu'une petite entreprise ne peut pas du tout mener d'expériences.

En fait, il existe de nombreuses expériences que même une petite entreprise peut mener.

Et il y a de nombreux avantages à les faire fonctionner.

Par exemple, si vous possédez une petite entreprise, la réalisation d'expériences vous aidera à passer d'une prise de décision basée sur l'intestin à une prise de décision basée sur les données. Cela vous obligera à regarder les données… et avec des chiffres en face, vous cesserez de vous fier par défaut aux stratégies * je pense *. Cette approche basée sur les données transformera à elle seule la façon dont vous construisez et développez votre entreprise.

Exécuter des expériences vous apprendra également à apprendre en essayant, plutôt qu'en acceptant le statu quo. Cela vous incitera à voir si les principes censés fonctionner fonctionnent réellement pour vous.

Enfin, l'exécution d'expériences vous préparera à une "véritable" CRO lorsque vous aurez "suffisamment" de trafic, car cela vous aidera à développer le bon état d'esprit pour les tests - une condition préalable à une CRO efficace.

Commencez donc à exécuter toutes les expériences que vous pouvez sur les canaux marketing que vous utilisez. Voici quelques-unes de vos options.

Tester par e-mail

Étonnamment, le marketing par e-mail est un canal qui vous permet d'expérimenter différentes idées, sans avoir besoin de tonnes d'abonnés (ou "contacts").

"Dit qui?"

Selon tous les fournisseurs de logiciels de marketing par e-mail, de MailChimp, ConstantContact et Campaign Monitor à HubSpot (qui prend en charge le marketing par e-mail dans son logiciel d'automatisation du marketing).

Commençons par HubSpot.

Ainsi, si vous souhaitez exécuter un test A/B à l'aide de la plateforme de messagerie de HubSpot, vous n'aurez besoin que de 1 000 contacts : 1 000 contacts est également notre référence pour exécuter des tests A/B sur des échantillons d'envois d'e-mails. HubSpot

Campaign Monitor indique également que vous pouvez exécuter des tests A/B même avec de petites listes d'e-mails. Voici les mathématiques derrière cela:

Maintenant, vous pensez peut-être : "La taille de ma liste n'est que de 500 abonnés, comment voulez-vous que je fasse un test réussi ?" Ma réponse est que vous devrez viser un plus grand MDE [Effet minimum détectable (MDE)]. Lorsque vous augmentez la MDE, la taille d'échantillon requise diminue. Ainsi, au lieu d'avoir besoin de 592 abonnés par variation pour détecter un effet relatif de 20 %, vous n'auriez besoin que de 94 abonnés par variation pour détecter un effet relatif de 50 %. Notez que le taux de conversion de base joue également un rôle dans la taille de votre échantillon : plus votre taux de conversion est faible (dans ce cas, ouvert %), plus vous aurez besoin d'abonnés pour exécuter un test précis. — Moniteur de campagne

Donc si vous avez environ 500 ou 1000 abonnés, vous êtes bon à tester, à condition d'avoir une base de données responsive qui s'intéresse à ce que vous avez à dire.

Cependant, quelques fournisseurs de marketing par e-mail recommandent une base de contacts légèrement plus élevée.

Par exemple, le fournisseur de solutions de marketing par e-mail ConstantContact recommande une taille d'échantillon plus élevée à deux fois la taille minimale autorisée par HubSpot. Il suggère que pour un test A/B significatif, la taille de l'échantillon doit être d'au moins 1 000 contacts. Donc, si vous avez 2000 abonnés, vous devriez pouvoir tester (vos versions A et B recevant chacune 50% du total des contacts en tant que trafic de test).

Pour les tests de ligne d'objet, nous vous recommandons de tester chaque ligne sur un échantillon d'au moins 1 000 contacts si possible. 1 000 utilisateurs pour chaque version est généralement une bonne référence pour tout test A/B, mais si vous n'avez pas assez de contacts ou de visiteurs pour atteindre ces chiffres, cela vaut toujours la peine d'exécuter le test. Constant Contact

MailChimp recommande également des listes un peu plus grandes pour exécuter des tests A/B. Il suggère que vous devez avoir au moins 5 000 contacts pour exécuter des tests. Mais comme de nombreuses bases de contacts de petites entreprises sont beaucoup plus petites que cela, il est recommandé de tester les idées sur toute la liste :

Nous vous recommandons d'envoyer des combinaisons à au moins 5 000 contacts abonnés pour obtenir les données les plus utiles de votre test. Si la taille de votre liste ou de votre segment ne permet pas 5 000 abonnés dans chaque combinaison, envisagez de tester l'intégralité de votre liste et utilisez les résultats de la campagne pour éclairer les futures décisions relatives au contenu de la campagne. — MailChimp

Bien qu'il soit vrai qu'avoir une taille d'échantillon énorme vous aidera à atteindre la signification statistique beaucoup plus tôt (et avec beaucoup plus de confiance), mais vous pouvez également commencer à tester avec votre petite liste !

Voici plus de 150 idées de tests fractionnés par e-mail pour vos campagnes par e-mail.

Voici également un guide rapide sur les tests A/B par e-mail.

Tester avec les réseaux sociaux

Les médias sociaux sont un autre canal qui vous permet de tester vos idées, quel que soit le nombre de vos abonnés sur les réseaux sociaux. D'ailleurs, d'une certaine manière, sur les réseaux sociaux, rien ne limite réellement votre portée.

Ainsi, par exemple, chez Convert Experiences, même si nous n'avons pas des dizaines de milliers d'abonnés, notre formidable vendeur social continue d'expérimenter des éléments de notre copie de médias sociaux tels que ses hashtags, ses images, etc.

Et ses tests nous apportent de belles victoires. Par exemple, son expérience utilisant un certain ensemble de hashtags nous a déjà valu un retweet de Google Analytics !

l'expérience en utilisant un certain ensemble de hashtags nous a déjà valu un retweet de Google Analytics !

Maintenant, c'est une certaine exposition aux médias sociaux, n'est-ce pas ?

Vous pourriez dire qu'il est facile de rejeter les victoires rapides comme (peut-être) des coups de chance MAIS lorsque vous voyez un ensemble de hashtags gagner régulièrement plus d'exposition que les autres contre lesquels vous le testez, vous avez plus qu'un résultat de test… ce que vous avez est une tendance .

Vous pouvez exécuter une multitude de tests A/B sur les réseaux sociaux pour découvrir ces tendances et améliorer vos performances sur les réseaux sociaux. Nous avons publié ici une excellente introduction aux tests A/B sur les réseaux sociaux. Lisez-le pour savoir comment vous pouvez commencer avec les tests A/B sur les réseaux sociaux, les différents tests A/B que vous pouvez exécuter sur les réseaux sociaux et les meilleures pratiques de test A/B sur les réseaux sociaux que vous devez garder à l'esprit.

Test A/B avec publicités payantes (PPC)

Tout comme les canaux de marketing par e-mail et réseaux sociaux, le canal de marketing PPC vous permet également d'expérimenter vos copies publicitaires et tous les autres éléments de vos campagnes publicitaires.

Qu'il s'agisse de publicités Google Adwords ou Facebook, la plupart des réseaux payants prennent en charge les expériences afin que vous puissiez obtenir le meilleur retour sur investissement.

Mais pour obtenir des résultats statistiquement significatifs de vos expériences PPC, vous avez besoin de quelques milliers d'impressions de chaque copie publicitaire. Google recommande de tester les groupes d'annonces qui obtiennent au moins 5 000 impressions/semaine.

Alors, combien coûtent quelques milliers d'impressions d'annonces ?

Cela dépend beaucoup de la plate-forme et de l'industrie (entre autres facteurs), mais il existe des données pour vous aider à établir votre budget.

Par exemple, AdStage a analysé plus de 110 millions d'impressions d'annonces (sur Google Adwords) au premier trimestre 2018 et a constaté qu'en moyenne, vous avez besoin de 116,91 $ pour obtenir mille impressions (CPM) sur Google Ads. L'année dernière, c'était environ 13% moins cher .

Les réseaux sociaux comme Facebook offrent également des options CPM accessibles.

Les données de la recherche Statista indiquent que le CPM moyen (coût pour mille ou coût pour 1 000 impressions) pour Facebook est de 1,26 USD. D'autres estimations du coût moyen du CPM de Facebook d'AdExpresso et de WordStream se situent entre 7 et 10 $.

Le fait est que vous pouvez commencer à tester des copies publicitaires même avec un budget limité.

Une manière d'expérimenter (presque) « à l'épreuve du trafic » : la personnalisation

La personnalisation ou la personnalisation de l'expérience d'un visiteur sur un site Web en fonction de ce que vous savez à son sujet est une autre forme courante d'expérimentation.

La meilleure partie de la personnalisation est que même les sites Web à faible trafic peuvent fonctionner avec eux, car les contraintes de trafic qui s'appliquent aux tests CRO ne s'appliquent pas à la personnalisation.

La raison derrière cela est qu'avec la personnalisation, l'objectif final n'est pas d'optimiser les taux de conversion. Au lieu de cela, son objectif est d'offrir une expérience utilisateur plus pertinente qui conduit à plus de conversions ou à une plus grande satisfaction et fidélisation des clients.

Par exemple, vous pouvez créer différentes versions de votre page produit à montrer à vos clients et non-clients (ou prospects).

Sur votre page de produit pour vos clients, vous pouvez afficher du contenu tel que des guides de produits et des vidéos, des liens rapides pour accéder à l'assistance et plus encore, afin qu'ils bénéficient d'une expérience produit plus enrichissante. Alors que la version que vous montrez à vos prospects - par exemple, ceux qui se sont inscrits pour un essai - pourrait se concentrer sur les fonctionnalités ou les études de cas de votre produit pour les aider à se convertir.

Environ 93 % des entreprises constatent de meilleures conversions grâce à la personnalisation.

Et vous pouvez commencer immédiatement la personnalisation.

De plus, avec un outil comme Convert Experiences, vous pouvez configurer des expériences de site Web personnalisées en quelques minutes. Définissez simplement les règles de ciblage et vous pourrez afficher des messages personnalisés à vos différents segments d'audience, incitant chaque segment à passer à l'étape suivante de son parcours d'achat.

Envelopper le tout…

Bien qu'un faible trafic sur le site Web puisse vous empêcher d'effectuer des expériences CRO substantielles, cela ne peut pas vous empêcher d'"apprendre".

Et c'est ce qui est important, car une fois que vous vous concentrez sur l' apprentissage en essayant plutôt qu'en acceptant la norme, vous commencerez à développer la culture de l'expérimentation, une condition préalable à une CRO efficace.

Peu importe à quel stade de croissance vous vous trouvez, vous pouvez investir dans le développement d'une culture de test. Cela vous sera utile lorsque vous aurez suffisamment de trafic sur votre site Web pour vous lancer dans des expériences CRO définitives et définitives.

Essai gratuit de tests A/B à haut retour sur investissement