Pop-ups de teste A/B: como tornar seus pop-ups muito mais eficazes

Os pop-ups estão por toda parte .

Algumas das maiores marcas como Amazon, Pinterest e Adidas usam pop-ups. Na verdade, é muito difícil escapar deles.

Estamos dispostos a apostar que você viu pelo menos meia dúzia hoje. Infelizmente, os pop-ups não são a única coisa popular. “Hacks” para fazer os melhores pop-ups são igualmente desenfreados.

Aqui está a coisa: você pode aprender absolutamente com o que funcionou para sua concorrência, mas a fé cega vai afastar seus visitantes e custar-lhe alguns dólares.

Pop-ups: aborrecimento ou necessidade?

Temos algumas opiniões quentes de especialistas em CRO e profissionais de marketing:

Ah, eles sugam. Eles são os piores – PORQUE as pessoas pensam que 'configure e esqueça' é uma estratégia .

Shiva Manjunath em Speero

Pop-ups são geralmente um aborrecimento. Um profissional de marketing, no entanto, os cria de uma maneira, para que o usuário os considere mais valiosos do que irritantes .

Arek Nowakowski, designer de produto na Spacelift

Mas a resposta certa para essa pergunta é que depende.

Os pop-ups podem render ótimos resultados em comparação com outros canais ou ser uma jogada totalmente ruim para você. Você não saberá com certeza até dividir as páginas de teste com e sem pop-ups.

A verdadeira razão pela qual os pop-ups têm uma má reputação é a má experiência do usuário. Veja o que Amanda Natividad, vice-presidente de marketing da SparkToro, experimentou recentemente:

A má experiência do usuário pode levar a mudanças no comportamento do usuário como esta:

E as pessoas instalam bloqueadores de pop-up para evitar que estraguem sua experiência (essa é a razão pela qual quando você procura pop-ups, esses bloqueadores de anúncios têm uma classificação tão alta no Google).

Temos que reconhecer que os pop-ups ainda serão irritantes. Mas eles não precisam ser irritantes para todos .

Shiva na Speero compartilha:

Quando feito corretamente, eles são direcionados, ENTÃO se tornam valiosos. Servir para todos pode ter taxas de engajamento e envios gerais mais altos, mas a qualidade provavelmente será muito menor. E ninguém também rastreia os efeitos 'prejudiciais' para esses tipos de pop-ups .

Você precisa saber como e se isso afeta desfavoravelmente outras métricas secundárias e de proteção.

As métricas de proteção são métricas críticas projetadas para alertar os experimentadores sobre uma suposição violada. As métricas de proteção fornecem o que Spitzer (2007) chama de “capacidade de instigar uma ação informada”. Quando um efeito de tratamento move inesperadamente uma métrica de proteção, convém reduzir a confiança nos resultados ou interromper um experimento nos casos em que o dano possa ser causado aos usuários ou à organização .

Ronny Kohavi, consultor de testes A/B

Os diferentes tipos de pop-ups (com taxas de conversão de pop-up)

O primeiro anúncio pop-up apareceu no Tripod no final dos anos 90 e seu inventor, Ethan Zuckerman, desde então, pediu desculpas pelo incômodo que desencadeou na internet. Ao longo de sua história turbulenta, os pop-ups passaram por fases de serem um pária do marketing.

Originalmente visto como a novidade brilhante para ser abusado por todos os sites fraudulentos, os pop-ups afundaram na obscuridade mais rapidamente do que os spinners de inquietação. A cegueira de pop-up (ou cegueira de banner) significava que os usuários não os viam como um aborrecimento - eles se tornavam imunes a isso e o ignoravam prontamente.

Os pop-ups ganharam uma nova vida graças aos experientes profissionais de marketing de testes A/B que conseguiram ressuscitá-los dos mortos e usar sua intrusão para o bem proverbial.

Aqui estão os diferentes tipos de pop-ups que você encontrará (com exemplos e referência de taxas de conversão):

Pop-ups de entrada

Os pop-ups de entrada são exibidos para os visitantes do site quase imediatamente após o acesso à página. Alguns bloqueiam a visualização da página inteira (também conhecidos como pop-ups do tapete de boas-vindas), enquanto outros aparecem no meio da tela (lightbox). Por exemplo, Wishpond usa esses dois tipos um após o outro:

Embora isso possa ser eficaz para fazer com que os usuários tomem medidas imediatas, configurar esse como o primeiro pop-up também pode fazer com que os usuários saiam instantaneamente.

O truque aqui é usar um microcompromisso.

Os microcompromissos podem ter um enorme impacto nas taxas de engajamento do seu e-mail opt-in. Faça com que o usuário simplesmente clique em sim para receber um desconto. Depois desse pequeno sim, eles subconscientemente acreditam que devem estar interessados ​​e vão querer permanecer consistentes enquanto continuam a se envolver com o pop-up. Isso cria menos atrito para eles preencherem o formulário, o que exige mais adesão e poder de decisão. É o princípio do compromisso e da consistência .

Anthony Morgan, CEO e fundador da Enavi

Pop-ups ativados por clique

Esses pop-ups aparecem quando os usuários clicam em um link. Eles são muito menos intrusivos e muitas vezes úteis.

Veja a página de produtos da Amazon para Alexa, por exemplo. Quando você clica em “ver o que o Alexa pode fazer”, um pop-up com mais informações é exibido.

Fonte

Os pop-ups ativados por clique são bastante comuns em lojas de comércio eletrônico, pois permitem que os compradores explorem à vontade e ofereçam mais informações quando precisarem.

Pop-ups de intenção de saída

Esses pop-ups são acionados quando os visitantes tentam sair do seu site – uma Ave Maria para que eles convertam antes de abandonarem o carrinho.

No celular, eles são acionados quando alguém rola rapidamente para cima ou pressiona o botão Voltar. A Elauz oferece um desconto de 15% para compradores de primeira viagem que tentarem sair da página de destino.

Pop-ups cronometrados

Um pop-up cronometrado aparece para os visitantes somente após um período especificado. Quanto tempo depois você deve mostrar essa mensagem? Novamente, isso é algo que você precisa testar A/B.

Este pop-up do Sumo é um bom exemplo. Ele aparece depois que você gasta um pouco de tempo lendo o post.

Que tipo de pop-ups converte melhor?

Os últimos estudos de conversão concluídos!

A Sumo analisou 2 bilhões de exemplos pop-up em 2019 e foi isso que eles descobriram:

• Os 10% dos pop-ups com melhor desempenho tiveram uma taxa de conversão de 9,28% em média
• 3 em cada 100 marcas tinham pop-ups com taxas de conversão acima de 11%
• A taxa de conversão para todos os pop-ups ficou em 3,09% em média

Observação: as taxas de conversão caem para sites com grande tráfego. Portanto, embora 3,09% possa parecer um número pequeno, 100.000 visitantes podem gerar 3.000 conversões (o que não é nada ruim).

Aqui está um exemplo da vida real de Dave Evangelisti, fundador e CEO, TestGuide:

Em uma página, conseguimos aumentar nossa “Taxa de conversão calculada” (era uma meta baseada em direcionar as pessoas para uma determinada página) em 1,38%. Embora isso possa não parecer significativo, com milhares de pessoas, 1,38% pode realmente mover a agulha .

O Sleeknote examinou mais de um bilhão de pop-ups em 2020 e aqui está o que eles descobriram:

• Os pop-ups com imagens tiveram uma taxa de conversão de 3,80%, enquanto os pop-ups sem imagens tiveram uma taxa de conversão de 2,07%.
• Os pop-ups configurados para aparecer após um atraso de 8 segundos tiveram uma taxa de conversão de 3,62% e converteram melhor do que os pop-ups mostrados antes ou depois
• Pop-ups com dois campos de entrada tiveram uma taxa de conversão mais alta em 3,31%, que foi melhor em comparação com pop-ups com três campos que tiveram uma taxa de conversão de 1,08%

Assim como o Sleeknote, o OptiMonk analisou os pop-ups de seus usuários em 2021 para publicar suas descobertas:

• A taxa média de conversão foi de 11,09%
• Os 10% principais de pop-ups tiveram uma taxa de conversão média de 42,35%
• A taxa de conversão média para desktop foi de 9,69% e 11,07% para celular
• Os pop-ups de abandono de carrinho tiveram uma taxa de conversão de 17,12%

Nota: Esses benchmarks vêm de pesquisas originais e de hipóteses formadoras que foram testadas e não devem ser usadas para comparação direta. Mas esses resultados podem fornecer uma visão melhor sobre quais elementos você deve testar (vamos mergulhar em mais detalhes abaixo).

Pop-ups de teste A/B: você deve fazer e como?

Estamos pedindo que você jogue fora duas suposições:

1. Só porque os pop-ups funcionam para o seu setor ou concorrente, não significa automaticamente que eles funcionarão para você.
2. Só porque algo funciona, não significa que não possa ser melhorado.

Para saber com certeza, você precisa fazer um teste A/B de pop-ups.

Aqui está um exemplo do Sumo para mostrar quanta diferença ele pode fazer.

Você pode supor que a versão B teve um desempenho melhor porque segue todas as “melhores práticas”, mas, na verdade, o primeiro pop-up superou em 30%.

O que é teste A/B e teste de divisão para pop-ups?

O teste A/B permite testar alterações em um ou mais elementos. Você pode adicionar, eliminar ou modificar elementos e acompanhar as alterações para ver como elas aumentam as conversões.

Ao testar A/B pop-ups, você cria duas versões quase idênticas e coloca a variante (ou desafiante) contra a original (controle).

Embora a maioria das pessoas confunda o teste A/B com o teste A/B, essas são duas técnicas de otimização de taxa de conversão completamente diferentes.

Em testes divididos ou testes de URL dividido, você divide o tráfego igualmente para enviar visitantes para duas versões totalmente diferentes hospedadas em URLs diferentes. Isso ajuda a identificar qual versão tem o melhor desempenho.

Se você quiser entender se os pop-ups são ou não uma boa ideia, um teste A/B seria o melhor caminho a percorrer. Uma página com um pop-up empilhado contra a outra com uma mistura de elementos como cópia e sugestões para oferecer os mesmos benefícios e valor.

Tome Marks & Spencer, por exemplo. Em vez de usar um pop-up para criar sua lista de e-mail, eles têm uma seção na parte inferior da página onde os visitantes podem se inscrever.

Se você descobrir que os pop-ups não estão afastando os visitantes, faça uma alteração de cada vez para isolar os efeitos do teste A/B por meio de uma série de experimentos para saber o que funciona para o seu negócio.

Faizan Fahim, Growth Hacker da Breeze, recomenda evitar alguns erros comuns ao testar A/B pop-ups:

• Não mostre o mesmo pop-up duas vezes. É um insulto para os usuários, pois eles ignoraram e fecharam o pop-up uma vez, mas o site ainda está mostrando o mesmo pop-up.
• Torne o pop-up relacionado à página em que o visitante está.
  
  
  • Se o visitante estiver na página do carrinho, mostre o desconto.
  • Se o visitante estiver na página de comparação, mostre a ele o pop-up 'iniciar teste'.
  • Se o visitante estiver lendo o artigo por um longo tempo, mostre a ele o pop-up de inscrição.

Arek Nowakowski, Designer de Produto da Spacelift alerta contra outro erro comum:

Evite fazer os testes A/B durante festivais e eventos. Os comportamentos dos clientes mudam em torno de festivais e feriados. Execute todos os testes pop-up A/B quando os negócios estiverem normais

Testes A/B pop-up: diferentes elementos a serem alterados

Você pode testar praticamente todos os elementos do seu pop-up, desde que saia da pesquisa de conversão.

Estude o comportamento do usuário, análises de minas, tíquetes de suporte, assista a repetições de visitantes e analise as métricas atuais antes de iniciar o planejamento de testes. Isso formará a base de sua hipótese para que você não faça alterações arbitrariamente que possam prejudicar seus negócios.

Dito isso, os elementos mais comuns que são testados A/B são a cópia, o acionador, o posicionamento, o texto da CTA e os diferentes tipos de pop-ups .

Tempo de acionamento

A pesquisa do Sleeknote indica que 8 segundos é o ponto ideal que você deve buscar, mas, novamente, você não pode ter certeza a menos que teste.

Mas a maioria dos especialistas parece concordar em uma coisa – não é uma boa ideia mostrar a seus visitantes um pop-up assim que eles acessarem uma página.

Os acionadores baseados em tempo são maneiras de nível A para garantir que você esteja segmentando os usuários certos sem irritar o resto.

Shiva Manjunath, Speero

Um dos clientes da Wise Pop testou 3 atrasos diferentes — 10, 20 e 40 segundos — com este pop-up:

Seus testes revelaram que o melhor momento para exibir sua oferta é após 10 segundos.

Atrasos mais longos resultaram em menos pessoas vendo o pop-up, portanto, embora a taxa de assinatura fosse alta, o número de e-mails coletados não era.

Certifique-se de não ser vítima de falsos positivos. Leia nosso guia para ajudá-lo a interpretar corretamente os resultados do teste A/B e melhorá-los.

Posição

Você deve colocar seu pop-up no início de sua página, usar um tapete de boas-vindas para cobrir toda a tela ou uma mesa de luz?

Fonte

Ou melhor ainda, tente um pop-up na lateral da página ou um pop-up de rolagem que seja menos intrusivo?

Usar um pop-up acionado por rolagem em um artigo de blog é uma boa maneira de persuadir os usuários a ler mais do seu conteúdo. Isso irá persuadir as pessoas a se inscreverem para o seu boletim informativo, que conterá dicas úteis e links para novos conteúdos do blog.

Josh Pelletier, Diretor de Marketing (CMO) da BarBend

Getsitecontrol tem dois pop-ups menos intrusivos em sua página que não bloqueiam a visualização da página.

PS Você também deve levar em conta a experiência móvel versus desktop ao pensar na posição dos pop-ups. Preste muita atenção ao celular, pois o Sleeknote descobriu que os pop-ups para celular aumentam as conversões (5,8%) em comparação com o desktop (3,11%)

Os pop-ups para telefones celulares devem ser projetados levando em consideração a área de tela disponível, bem como outros aspectos da experiência do usuário móvel.

Veronica Miller, gerente de marketing digital, visão geral da VPN

cópia de

A cópia certa pode fazer com que seus clientes ajam ou ignorem completamente suas tentativas.

A cópia é muito importante e pode mover a agulha em alguns pontos percentuais. Tentamos cópias diferentes o tempo todo. Alteramos as manchetes e o texto dos nossos bloqueadores de pop-up e alcançamos uma melhoria de 30%. Passamos de um pop-up de parada mais agressivo que nega as reservas que alguém pode ter que se inscrever, para um pop-up que destaca a prova social e o valor que nosso aplicativo localizador de colegas de quarto pode trazer para você .

Rany Burstein, CEO e fundador, Diggz.co

Você pode fazer microexperimentos alterando o título do seu texto, variando o tamanho ou usando palavras poderosas.

Na Paperbell, Laura Roder (Fundadora) acha que a manchete é onde está o maior elevador.

Você pode usar mapas de calor e mapas de cliques para saber como os visitantes interagem com a cópia e o que chama a atenção deles.

Outro exemplo que você pode estudar é da Contrast, uma agência de marketing de e-commerce:

Executamos um pop-up de e-mail específico da página de destino para um cliente da Contrast em torno da hipótese do micro-sim.

A maioria das lojas exibe um pop-up como “se você nos der seu e-mail, poderá obter x% de desconto”. Queríamos executar uma variante diferente para testar essa ideia. Mudamos a redação para explorar a psicologia humana.

Corremos a seguinte mensagem: “Você gostaria de economizar 20% no seu pedido hoje?”. Porque quem diria não a isso?

Para isso temos 2 botões: Sim / Não

– Sim, continue na próxima etapa para inserir informações de e-mail.

– Não, fecha o pop-up

Por meio desse teste A/B, conseguimos elevar a taxa de opções de e-mail de 3,3% de coleta para 9,1%. ”

Elliot Davidson, Fundador e Diretor de Contraste

Oferta

Compare diferentes descontos, iscas digitais e informações de envio em sua oferta.

Testamos a oferta de frete grátis por meio de um pop-up para usuários recorrentes na entrada do site e encontramos um aumento de 73% na taxa de conversão de comércio eletrônico para esse público-alvo. Emparelhar a oferta certa com o público certo é crucial, não apenas para que o pop-up ressoe, mas também para que o pop-up contribua positivamente para o resultado final. A estratégia de oferta nem sempre precisa ser baseada em preços. Temos uma taxa de inscrição de 6% em nossa página FSA/HSA para que os clientes solicitem mais informações sobre como adquirir nossos produtos com seus cartões FSA ou HSA.

Jonathan Finegold, CRO da Medcline.com

SwissWatchExpo, um cliente OptiMonk, criou duas versões de uma cópia de abandono de carrinho para ver qual mensagem produziria os resultados desejados.

A versão A invocou o FOMO informando aos usuários que eles tinham o último item disponível e viram um aumento de 17% na taxa de conversão.

A versão B ofereceu um desconto e mensagens ligeiramente diferentes, trazendo uma taxa de conversão de mais de 30%.

Chamada à ação (CTA)

Você pode testar a cor, a cópia, o tamanho e o alinhamento do botão de chamada para ação.

Pode ser particularmente importante verificar a cópia do CTA. Se houver uma desconexão entre o que você está oferecendo e o CTA, é menos provável que os usuários convertam.

No pop-up abaixo, você clicaria se dissesse "Inscrever-se" em vez de "Sim, envie-me essas dicas"?

Provavelmente não. Verifique se o CTA corresponde à promessa que você está fazendo. E você pode usar isso como uma oportunidade para chocar e admirar.

Dê uma olhada no formulário de inscrição na newsletter do Klientboost:

Em vez do habitual “Inscrever-se”, o “Podemos nos arrepender disso” chama a atenção.

Você também pode adicionar ou testar o texto que os usuários usam para dispensar um pop-up.

O pop-up de intenção de saída do CoSchedule que solicita aos usuários que tentem a extensão gratuita pode ser fechado se você clicar em "Rejeito a extensão gratuita".

Testamos um pop-up de intenção de saída em nossas páginas de produtos, oferecendo um desconto adicional com um código de cupom exclusivo e encontramos uma taxa de inscrição de 7%. Nesse caso, a estratégia de oferta teve um grande impacto, com um cupom de 10% de desconto com desempenho mais que o dobro de uma oferta de cupom de frete grátis (também encontramos um aumento de 18% na taxa de abertura de e-mail de oferta).

Jonathan Finegold, CRO da Medcline.com

Gamificação

Os pop-ups gamificados motivam os usuários a agir em troca de uma recompensa.

A pesquisa da Optimonk descobriu que as “rodas da sorte” ou rodas da fortuna tiveram uma taxa de conversão de 13,23%.

Mas você não precisa parar por aí. Você também pode tentar "escolha um presente" ou "raspe o" pop-ups de cartão.

Fonte

Fonte

A Medcline conseguiu aumentar sua taxa de captura em 12% realizando sorteios versus uma oferta tradicional de “inscreva-se em nosso boletim informativo”.

Outro grande exemplo vem de Ross Kernez, que só usa pop-ups gamificados para seu cliente após esses resultados:

Testamos 2 tipos diferentes de pop-ups gamificados. Um era girar a roda para ganhar um pop-up de prêmios e o outro era selecionar uma caixa para ver se você ganhou um voucher de € 10.

Nossa melhor taxa de conversão anterior era de 8%. Quando testamos qualquer um dos pop-ups gamificados, nossa taxa de conversão saltou para um mínimo de 14% .

Ross Kernez, consultor-chefe de estratégia online - Ross Kernez Consulting

Melhores métricas para rastrear quando pop-ups de teste A/B

Você não pode aceitar o vencedor ou o perdedor de um teste pelo valor nominal quando estiver testando ideias A/B, pois você precisa entender como e por que alcançou esses resultados.

É aí que entram suas métricas.

Uma métrica é um tipo de dados singular que ajuda a medir o impacto do teste A/B em relação aos seus objetivos de negócios.

Mas como você decide quais rastrear?

Há alguns que você precisa rastrear, enquanto outros dependem do tipo de pop-up.

Dependendo do tipo de pop-up (cupom para eCommerce, e-book, etc.), tento ir para métricas mais upstream o máximo que posso. Você sempre tem que acompanhar a taxa de 'gatilho' (porque esse será o seu denominador para as métricas de engajamento). No entanto, coisas como 'popup fechado' e 'taxas de envio' são extremamente importantes para rastrear. Combinando isso com a criatividade com o disparo de mapas de calor/gravações de sessão, você terá MAIS insights! Pontos de bônus para coisas como taxa de saída, embora sejam complicados com ruído (por exemplo, taxa de saída pode não ser bem definida, A MENOS que você inclua aqueles que viram o pop-up ).

Shiva Manjunath, Speero

Karim Naufal, nosso especialista interno em testes A/B, concorda que as métricas gerais ainda se aplicam.

Sim, a taxa de conversão deve ser medida para os próprios botões pop-up, por exemplo, e o X de fechamento. Mas medir a taxa de rejeição ou de desistência é bom (isso cria frustração?). Também medir o tempo para fechar o pop-up provavelmente também é relevante (quanto interesse ele capturou?).

Outras métricas de clique, como Adicionar ao carrinho, permanecem perspicazes. No entanto, o melhor para rastrear é a métrica indiscutível de Receita por Visitante, que mede a receita, que por si só contém as informações sobre a Taxa de Conversão e o Valor Médio do Pedido.

Outra métrica bastante útil que mede o engajamento do usuário é Sessions per User .

Mas Jonathan Finegold, CRO da Medcline.com não acredita que você deva acompanhar a receita, e aqui está o porquê:

Para nossos blogs, a receita não é o principal KPI, a taxa de inscrição é porque nosso objetivo é maximizar a captura de e-mail do tráfego orgânico. Da mesma forma, mesmo em uma configuração de e-commerce, a receita pode nem sempre ser a melhor métrica porque na margem a oferta pode não ser lucrativa e, portanto, o KPI certo, nesse caso, talvez seja a taxa de variação em dólares de margem .

Em poucas palavras, estas são as métricas que você deve observar quando o teste A/B ou o teste A/B aparecerem:

• Taxa de conversão
• Taxa de cliques
• Taxa de rejeição
• Taxa de desistência
• Sessão por usuário
• Adicionar ao carrinho
• Receita por visitante
• Pop-up fechado
• Taxa de envio

Conecte seu Google Analytics e Shopify a uma plataforma de teste A/B como o Convert para medir com precisão todas essas métricas.

Aqui está um exemplo de como esse processo pode ser:

Por exemplo, ao testar a quantidade de tempo antes que um pop-up envolva um usuário, analisamos os dados do mapa de calor e do Google Analytics para descobrir a taxa em que as pessoas fecham o pop-up.

Descobrimos que qualquer coisa de 15 segundos ou menos resultou em uma taxa de fechamento de cerca de 86% e também contribuiu para um aumento na taxa de rejeição. Se o tempo do pop-up estivesse entre 15 e 45 segundos a partir do momento em que o usuário estava no site, vimos a taxa de fechamento cair para 61%, com a taxa de rejeição reduzida em 14%.

Quando definimos o tempo para 1 minuto, vimos a taxa de fechamento cair mais 5% e a taxa de rejeição diminuiu 6%. Além disso, a interação com o botão CTA aumentou em 40% quando 1 minuto era o tempo definido. Os outros dois intervalos tiveram pouca ou nenhuma mudança na taxa de cliques do CTA.

Se estivermos testando o texto no botão CTA, veremos o CTR% do CTA. Quando usamos uma linguagem mais direta e específica com um modificador de tempo (ex: agora, hoje), vimos um aumento de 14% na CTR.

Joe Karasin, chefe de marketing de crescimento, CircleIt Inc.

Outra métrica que você pode não ter pensado e que pode ter um impacto significativo no seu negócio é a velocidade da página.

A melhor métrica para acompanhar quando os pop-ups de teste A/B são a velocidade da página.

Você não deve se surpreender se o pop-up com gifs e vídeos incorporados diminuir a velocidade da página. O pop-up é carregado da mesma solicitação HTTP da página, afetando a velocidade da página.

Você pode calcular o impacto de um pop-up na página analisando o gráfico em cascata. Execute a variação da sua página através do Pingdom Test e compare a velocidade da página. Se houver uma diferença significativa na velocidade de carregamento, seu teste já falhou. A velocidade de carregamento do site vem antes dos pop-ups, pois a experiência de navegação afeta muito a taxa de conversão .

Arek Nowakowski, Designer de Produto @ Spacelift

Observação: mencionamos brevemente as métricas de proteção antes, mas é importante mantê-las em mente ao testar pop-ups. Essas são as principais métricas que você não quer que sejam degradadas quando estiver testando porque uma queda no desempenho pode ter um grande impacto em seus negócios.

Diretrizes a serem lembradas ao testar pop-ups de teste A/B

Quando estiver pronto para iniciar pop-ups de teste A/B, siga estas recomendações para melhorar sua eficácia:

• Realize cálculos de pré-teste para garantir que você tenha o tamanho de amostra correto.
  Se você não realizar o teste em um grupo grande o suficiente de pessoas, corre o risco de cometer um erro, como acreditar que um falso positivo é real. Faça seus cálculos de pré-teste para verificar se você tem o passo necessário para percorrer o ciclo de ajustes que tem em mente.
  
  Dica: Use nossa calculadora de teste A/B para realizar cálculos de significância, valor p, poder, tamanho da amostra e MDE.
• Planeje uma série de alterações mínimas com pequenos MDEs para sites de alto tráfego.
  Se você tiver alto tráfego, poderá traçar uma cadência completa de alterações de minutos com pequenos MDEs (efeito mínimo detectável). A maioria dos experimentos pop-up resulta em aumentos de apenas um dígito. Portanto, essa abordagem pode ajudá-lo a entender como pequenas mudanças podem se relacionar com os ajustes correspondentes nos KPIs. Quanto maior o seu tráfego, menores os aumentos que você pode detectar e ter certeza dos resultados.
  
  Nota: MDE é simplesmente o tamanho de efeito mínimo que valeria a pena observarmos, sob o qual o custo ou esforço de implementação da nova variante não valeria a pena.
• Combine as alterações se seus pop-ups não estiverem funcionando bem.
  Se seus pop-ups não estão fazendo o seu peso, combine várias alterações e implemente-as de uma vez com um MDE maior. Além disso, é uma boa ideia se você não tiver tráfego suficiente, pois isso precisará de menos tráfego para alcançar significância. A suposição é que qualquer tentativa de melhoria deve levar a melhorias tangíveis, possivelmente na casa dos dois dígitos.
• Cuidado com falsos positivos quanto mais você otimizar.
  Um falso positivo ou um erro Tipo I indica que há uma diferença entre o controle e a variante quando, na verdade, não há. Uma maneira de realmente diminuir as chances de tê-los é primeiro usar uma calculadora de tamanho de amostra, conforme mencionado acima.
  
  Dica: para experimentos de missão crítica, defina o nível de confiança para 99% para reduzir as chances de cometer esse erro para 1%.
  
  Quanto mais otimizados forem os seus pop-ups, mais cuidadoso você deve ter para ignorar os falsos positivos.

Teste A/B de um pop-up no aplicativo Convert Experiences

Usando o Convert, você pode fazer um teste A/B dos pop-ups da sua loja e alterar qualquer um dos elementos pop-up mencionados acima para ver o que melhorará a taxa de conversão do site.

A melhor parte? Você pode adicionar pop-ups personalizados sem a ajuda de sua equipe de UX!

Pop-ups existentes de teste A/B com o editor visual

Seu site está funcionando e os visitantes da sua loja virtual da Shopify estão acessando sua página inicial. Então, para onde vamos a partir daqui?

Etapa 1: crie uma nova experiência de conversão:

Etapa 2: carregue a URL da sua loja da Shopify que inclui o pop-up:

Passo 3: Clique no pop-up com o mouse e você verá o menu do Editor Visual para agir e alterar seu formato:

Depois de concluir as alterações, visualize a aparência do novo pop-up usando a opção Visualização ao vivo de dentro do Editor Visual:

Esta é a nova aparência:

Quando se sentir confortável com o novo formato, ative a experiência para seus visitantes da Shopify para ver qual dos dois tem melhor desempenho.

Adicione pop-ups em suas variações com os editores personalizados do Convert

Se agora você deseja incluir uma oferta pop-up em sua página inicial que não faz parte do seu modelo da Shopify, não se preocupe!

Você pode usar os editores Convert CSS + HTML + JS personalizados para adicioná-lo e testá-lo A/B.

Etapa 1: novamente, crie uma nova experiência de conversão:

Etapa 2: carregue o URL da sua loja da Shopify que você deseja incluir no pop-up:

Etapa 3: use as opções de CSS personalizado e Javascript personalizado para adicionar o código JavaScript pop-up (você pode encontrar muitos modelos disponíveis on-line ou codificar seu próprio):

Para este exemplo, usamos o pop-up que está disponível aqui: https://github.com/beeker1121/exit-intent-popup

Passo 4: Em seguida, aplique as alterações e salve-o.

Depois de concluir as alterações, visualize a aparência do novo pop-up usando a opção Visualização ao vivo de dentro do Editor Visual:

Assim que se sentir confortável com o novo pop-up, ative a experiência para seus visitantes da Shopify para ver se a oferta fará alguma diferença.

Os pop-ups são irritantes, intrusivos e ineficazes apenas se você não os testar A/B

Os dados nos mostram que o uso, o posicionamento, o tempo e a cópia adequados podem tornar um pop-up uma maneira eficaz de gerar ações significativas. De fato, uma descoberta interessante foi quando usamos uma oferta no popup, vemos que recebemos mais interação do que outros CTAs no site que de outra forma são iguais.

Joe Karasin, chefe de marketing de crescimento, CircleIt Inc.

Afaste-se da estratégia “configure e esqueça” e adote o teste A/B.

A experimentação pode ajudá-lo a identificar como os usuários reagem à sua estratégia, fazer ajustes e gerar os resultados desejados.

Contanto que você evite os erros que as pessoas cometem ao testar A/B e escolha a plataforma de teste certa, como o Convert, você pode criar uma situação vantajosa para os clientes e sua marca.