Obtendo o teste A/B mais suave possível

Na Convert, entendemos o valor por trás das ferramentas de teste A/B para aumentar as taxas de conversão e obter o máximo para o site do seu cliente. Mas, o processo de teste é um assunto altamente técnico e complexo que pode criar muita confusão e falta de comunicação.

Para obter o teste mais eficaz e eficiente possível, o cofundador da Convert, Dennis van der Heijden, examinou as três coisas que todos devem fazer ao implementar um teste A/B:

• Instale códigos de uma só vez
• Pré-verifique o site para instalações avançadas
• Conheça o funcionamento interno dos testes A/B

Há muito em cada uma dessas três etapas, e temos os detalhes e dicas de que você precisa para obter um teste que funcione muito bem para você e seus clientes.

Instalar códigos de uma só vez

O primeiro passo real para obter um uso mais eficiente e produtivo de seus testes A/B é garantir que o teste seja instalado de maneira eficiente e eficaz. Sites grandes com vários testes e a necessidade de várias linhas de código para instalar abrem a porta para vários erros diferentes que criarão confusão, falta de comunicação e testes que não darão os melhores resultados. Aqui está uma lista de verificação de tudo o que você deveria ter feito até o final do primeiro dia de início do teste A/B e, em seguida, os detalhes para garantir que seja feito:

1. Obtenha códigos de instalação em um pacote

Como Dennis van der Heijden observa: “Entre você e o cliente, a instalação do código é geralmente o grande fator de atraso”. A melhor maneira de começar seu teste é enviar um pacote com modelos contendo códigos para cada página, em vez de vinte diferentes páginas de endereçamento de e-mail individualmente. Além disso, crie um índice para seu uso, onde você possa acompanhar qual página precisa do quê.

Entre você e o cliente, a ida e volta da instalação do código geralmente é o grande fator de atraso

2. Instale os códigos no cabeçalho

Quando se trata do processo de instalação real, é importante colocar o código diretamente no cabeçalho. Pode haver algum debate sobre se isso é necessário ou não, mas um estudo do Convert confirmou que deixar o código fora do cabeçalho leva a piscar – aquela fração de segundo em que a página muda repentinamente para acomodar o teste A/B. Ainda mais importante, o estudo descobriu que esse “piscar” teve um impacto negativo nas taxas de conversão, levando quase 1 em cada 5 pessoas a abandonar o site antes de converter, o que não faria de outra forma.

3. Pense no futuro

Outra coisa a ter em mente desde o início do seu teste é o futuro. Mesmo se você estiver executando um teste relativamente simples para um cliente agora, mapear o CMS para corresponder à infraestrutura de um cliente pode trazer grandes recompensas mais tarde. O sistema do Convert facilita a criação de campos personalizados em um menu suspenso, por exemplo, pontos de preço específicos ou uma página específica no processo de check-out. Isso facilita a implementação de novos testes no futuro e ajuda você a garantir que cada evento de meta em um processo de checkout de várias etapas seja contabilizado desde o início com apenas uma instalação.

4. Responda a todas as questões de TI no primeiro dia

Esses códigos podem gerar muitas perguntas para um departamento de TI. Você reduzirá longas cadeias de e-mail e retransmissão de mensagens entre os técnicos da Convert e seu cliente, fornecendo a eles uma documentação completa e atualizada que aborda as principais preocupações de TI. A Convert consegue isso mantendo um guia de implementação útil à mão que você pode repassar diretamente ao departamento de TI, dando a eles acesso direto às nossas informações mais úteis para solução de problemas.

5. Verifique a funcionalidade

Essa pode ser uma das maiores tarefas da sua lista, e falaremos mais sobre ela na próxima seção, mas um ponto simples e importante para começar no primeiro dia é com os códigos Ajax. Esses são os códigos que executam e atualizam algo na página depois que ela é carregada pela primeira vez. Como o teste A/B do Convert é projetado para carregar rapidamente com a página desde o início, ele pode causar problemas com esses códigos Ajax, mas o Convert tem soluções, como um plug-in do Chrome disponível. É apenas importante saber se alguma coisa vai atrapalhar o teste o mais rápido possível.

Pré-verificação de instalações avançadas

Não culpe a ferramenta... prepare-se bem.

A última coisa na lista de verificação acima é aquela em que você deve gastar mais tempo. Existem muitos problemas complexos que podem surgir com testes envolvendo URLs, logins, domínios e receita externa. van der Heijden enfatiza que não importa qual ferramenta de teste A/B você tenha escolhido, nunca ajuda culpar a ferramenta pelos problemas. Como ele diz: “Isso não ajuda porque você provavelmente escolheu a ferramenta. Se o cliente escolheu a ferramenta, você está ferindo o ego dele ou dizendo que ele fez a escolha errada. Se você escolheu a ferramenta, está apenas prejudicando sua imagem. Não culpe a ferramenta... prepare-se bem.”

URLs

Comece observando os URLs das páginas de produtos que você pode estar testando. Muitas vezes, os URLs estruturados serão simples de adicionar ferramentas, exibindo claramente um nome relacionado ao produto. Mas, URLs não estruturados que são nomeados para fins de SEO ou especiais serão difíceis de marcar de uma só vez. Você precisará usar outras ferramentas, como java script, para marcar essas páginas, por isso é importante estar ciente do possível problema de forma proativa. Este também é um momento para considerar especialmente pop-ups ou informações flutuantes, esses códigos Ajax e a ferramenta precisará ser incorporada ao Java ou CMS.

Subdomínios e domínios cruzados

O Convert criou maneiras fáceis dentro da ferramenta para ver todos os subdomínios e domínios cruzados associados ao seu cliente. No entanto, isso não significa que você deve ignorá-los. Observe atentamente o que está associado à página do seu cliente. O rastreamento de receita, tanto por meio do Google Analytics quanto por ferramentas mais avançadas da Convert, pode ser difícil e até impossível se as páginas de checkout levarem a um domínio do Yahoo ou Shopify que não seja atualizado - tornando perigoso prometer testes e dados concretos do check- processo de saída.

Testando por trás do login

Muitas ferramentas de teste A/B não descobriram como fazer um teste funcionar por trás dos recursos de login, mas felizmente o Convert tem uma solução fácil para esse problema. O Convert usa uma configuração de sessão cruzada, algo que era impossível até um ano atrás, o que significa que um ambiente seguro pode ser conectado em uma guia e o editor visual Convert em outra guia pode ser aberto para ainda mostrar a mesma sessão - tornando-o mais fácil projetar testes para check-outs e carrinhos.

Gerenciadores de tags

A maioria dos gerenciadores de tags, incluindo o Google Analytics, apresenta mais problemas do que valem com o teste A/B. Van der Heijden aconselha: “Sempre que você encontrar um fã do gerenciador de tags, apenas avise-o que esta ferramenta de teste A/B, e nenhuma ferramenta de teste A/B, é capaz de fazer isso corretamente, então todos nós preferimos estar diretamente no header a menos que você tenha Tealium ou Adobe.”

Metas externas e acompanhamento de receita

Algumas empresas podem ter fontes de pagamento ou conversões adicionais que não podem ser rastreadas diretamente por meio de um processo de check-out online. A Convert tem soluções para isso, então eles ainda podem ser incluídos nos testes. Você só precisa identificá-los antecipadamente e passar um ID de experiência e um ID de variação e, em seguida, informar ao Convert por meio de um webhook quando eles ocorrerem.

Conheça o funcionamento interno do teste A/B

Quando se trata de selecionar uma ferramenta de teste A/B, há muitas declarações por aí que se concentram em declarações de testes síncronos e assíncronos. Além disso, eles podem alegar que o tamanho do script pode ter um efeito significativo nos tempos de carregamento de um experimento. Van der Heijden tenta desmascarar alguns desses mitos e equívocos, observando que “copiar constantemente os artigos de outra pessoa para algum conteúdo pode realmente prejudicá-lo. Muitos desses artigos não dizem a verdade ou não têm absolutamente nenhuma ideia do que estão falando.”

Para ele, o mais importante é entender que ferramentas diferentes fazem as coisas de maneira muito diferente, saber a real diferença entre sincronização e assíncrona e por que é importante ter ferramentas de teste A/B que funcionem o mais rápido possível.

Muitos desses artigos não dizem a verdade, ou não têm absolutamente nenhuma ideia do que estão falando.

A primeira coisa importante a saber ao analisar criticamente as declarações sobre o teste A/B é a diferença entre sincronização e assíncrona. Algumas ferramentas ou artigos usarão esses termos em suas alegações de serem muito rápidos.

Um experimento de sincronização permitiria 100 milissegundos para o tráfego de rede e, em seguida, 200 milissegundos para carregar um teste A/B sincronizado e, finalmente, 400 ms para carregar todo o resto. Um experimento assíncrono permitiria os 100 milissegundos, enquanto o teste A/B e todo o resto da página começariam a carregar o mais rápido possível e simultaneamente. A realidade de como o Convert e outras ferramentas funcionam é uma mistura dessas duas ideias:

Para um usuário que está experimentando uma experiência de conversão:

• Em 0,3 segundos nada é visível, a conexão está sendo feita.
• Em 0,35 o html começa a ficar disponível para manipulação, é quando o convert começa a funcionar e determina a variação a ser acionada com base em cookies enquanto a página ainda está montando.
• Convert oculta o corpo do usuário inteiramente por um segundo com uma página em branco.
• A cada 0,05 segundos o Convert passa por cima do que está disponível e precisa ser alterado para o teste.
• Em 1,5 segundos, a página está pronta.

Outras ferramentas podem fazer as alterações no mesmo período de tempo, mas com as alterações visíveis (piscando). Algumas outras ferramentas irão esperar até que o HTML já esteja completamente disponível em 1,5 segundos, o que significa que há 2 a 3 segundos adicionais que o usuário tem que esperar até que a página fique disponível.

Claro, estamos falando de centésimos de segundo aqui, mesmo com o piscar. Mas, como discutimos anteriormente, a Convert descobriu que esses flashes ou atrasos de milissegundos podem ter um impacto enorme na conversão. Muitas ferramentas que apresentam intermitências ou atrasos apontam para dados com o teste para mostrar que a conversão foi melhorada, mas na maioria das vezes, olhar para o Google Analytics mostrará uma queda na conversão entre o período de pré-teste e o período em que os usuários experimentam piscando e demorando.

Escolher e implementar a ferramenta certa para o teste A/B do seu cliente envolve todo esse conhecimento técnico e muito mais. Mas, o mais importante é que você vá para o teste A/B preparado e pronto para ter certeza de que selecionou a ferramenta certa, preparou-a para o site e facilitou ao máximo o processo de instalação para o seu cliente.

Para assistir ao webinar completo você pode se inscrever aqui, abaixo você encontra a apresentação.

Se você estiver pronto para experimentar o Convert Experiments e nossa equipe de especialistas, convidamos você a iniciar sua avaliação gratuita de 15 dias.