Como trabalhar com uma agência de testes A/B (e atingir todas as suas metas de crescimento)

Verdade dura: Terceirizar seus testes A/B não garante crescimento.

Gostaríamos que fosse tão simples. Mesmo com especialistas de classe mundial, as expectativas erradas misturadas com as direções erradas geralmente levam a colaborações infrutíferas.

Por outro lado, há uma maneira mais inteligente e muito mais produtiva de colaborar com sua agência de testes A/B. É o segredo por trás das histórias de sucesso que o atraíram para trabalhar com especialistas em CRO.

Neste artigo, mostraremos esse molho secreto - um plano passo a passo claro para colaborar e fazer parceria com as melhores agências de testes CRO ou A/B. No final, você saberá como trabalhar com agências de CRO para atingir todas as suas metas de crescimento.

Vamos cavar…

Quatro grandes razões para integrar uma agência de testes A/B

Ao mergulhar nesses quatro motivos, você encontrará classificações por estrelas para colaboração. Estamos chamando isso de índice de colaboração .

Para isso, mapeamos o nível de colaboração que é essencial para obter sucesso na integração de uma agência de CRO, e eles estão vinculados a cada um desses quatro motivos (ou benefícios).

Para garantir esses benefícios, você terá que comprometer uma medida de colaboração em sua parceria. É isso que essas estrelas representam.

Por exemplo, se você está apenas procurando assistência com a compilação de teste A/B, a colaboração não precisa necessariamente ser exaustiva, mas ainda precisa existir. Por isso leva duas estrelas.

Agora que está resolvido, então vamos prosseguir.

1. Assistência com construção de teste A/B

COLABORAÇÃO:

Se o seu programa de otimização amadureceu até certo ponto, você definitivamente não é um lobo solitário executando toda a operação do início ao fim. Você precisa de engenheiros e desenvolvedores.

Mas o problema aqui é que a maioria dos departamentos de otimização não tem engenheiros e desenvolvedores dedicados.

Quando você atinge uma hipótese que se sente confiante em testar, prejudica sua eficiência se você precisar implorar e emprestar recursos da equipe de desenvolvimento para implementá-los.

Além disso, embora o aspecto subjacente da “codificação” permaneça o mesmo, desenvolver um produto e construir um teste são dois contextos muito diferentes que exigem uma mudança de mentalidade.

Portanto, não confie em agentes internos que priorizam algo além da configuração bem-sucedida de testes para dimensionar seu programa. Existe uma estratégia melhor que também injeta agilidade em seu programa de experimentação…

Terceirização .

Nesse cenário, isso não é apenas desejável, mas também lógico. As agências não apenas têm uma equipe de desenvolvimento dedicada, mas também são especializadas em construção, incluindo os parceiros do Convert BrillMark & ​​EchoLogyx efetivamente ampliando 10 vezes seus esforços internos.

Os clientes que desejam aumentar seu programa de testes em várias dobras devem procurar contratar agências externas. Com base na minha experiência, há um limite de quanto eles podem aumentar seu programa de testes com a equipe interna. Por exemplo, se a equipe interna conseguir desenvolver dois testes por mês com base no recurso disponível para suporte com o desenvolvimento de testes A/B e controle de qualidade e quiser aumentar para 10 testes por mês, é melhor usar uma agência quem pode fornecer esse suporte dedicado .

Tasin Reza, Ecologiax

2. Assistência com Telemetria

COLABORAÇÃO:

Falamos muito sobre a importância de estabelecer os canais corretos de coleta de dados e tratar dados qualitativos e quantitativos com relação à eliminação de vieses.

As agências de teste A/B entendem por que plataformas diferentes relatam números diferentes para o mesmo evento ou ação. Eles podem fazer um balanço de quão perniciosa é essa discrepância e ajudar a equipe interna a traduzir isso no impacto nos resultados finais dos testes.

Sem essa percepção inestimável, como você pode confiar em seus resultados quando as fontes de dados geralmente discordam em métricas críticas?

Como Chad Sanderson menciona, acreditar que diferentes entradas de dados se reconciliarão na saída do resultado é ingênuo. As agências de testes A/B trazem essa alfabetização de dados tão necessária para o mix.

É parte do motivo pelo qual Alex Birkett (citado abaixo) trabalha com agências – para adicionar a integridade necessária aos resultados dos testes A/B. Como você pode imaginar, requer ainda mais contribuições colaborativas do que apenas obter ajuda com a compilação de teste.

Na grande maioria dos casos, trabalhei com uma agência de testes A/B, contratei-a para ajudar exclusivamente no desenvolvimento de experimentos e garantia de qualidade. Isso se deve ao fato comum de que o recurso limitante da maioria das organizações são engenheiros. Usar uma agência terceirizada de desenvolvimento de testes A/B me permitiu aumentar o rendimento da experiência de qualidade, e posso confiar no fato de que os experimentos são bem projetados porque estão acostumados a trabalhar na plataforma que estou usando.

Recentemente, considerei contratar uma empresa de serviço completo para ajudar no desenvolvimento de testes A/B, bem como em dois outros gargalos: telemetria e pesquisa de clientes. Configurar os pipelines de dados adequados é complicado e fazer com que sua empresa de testes A/B faça isso alinha bem os incentivos (eles claramente desejam atribuir adequadamente seu valor, portanto, desejam a configuração de análise correta). E a pesquisa do cliente está sempre faltando, mesmo que eu mesma faça muitas delas. Quanto mais melhor, e os especialistas às vezes têm ferramentas de difícil acesso .

Alex Birkett, cofundador da Omniscient Digital

A próxima razão requer tanta colaboração para o sucesso quanto a terceirização para assistência com telemetria.

3. Assistência com pesquisa de clientes

COLABORAÇÃO:

A pesquisa com o cliente é, sem dúvida, o aspecto mais caro, demorado e tedioso da idealização de uma hipótese confiável. Mas, como sugere a hierarquia de evidências, é a base sobre a qual se baseiam os experimentos on-line controlados (testes A/B).

Existem algumas coisas que podem dar errado aqui:

• As equipes internas não têm o know-how para estruturar adequadamente as perguntas de pesquisa do cliente.
  
  Eles podem ser enganosos, tendenciosos e, em última análise, buscar validar uma opinião existente, em vez de investigar um problema trazido à luz pelos dados quantitativos.
  
  Um pesquisador externo trará uma perspectiva mais neutra para cavar esta mina de ouro.

• As equipes internas não têm largura de banda para mergulhar em uma variedade impressionante de perspectivas que apenas um verdadeiro especialista pode.
  
  Quais são todos os ângulos para explorar? Como você produz melhores hipóteses com esse nível de perspectiva sem recorrer a uma experiência rica e variada?

4. Assistência na Experimentação Evangelizadora

COLABORAÇÃO:

Sim, a adesão à experimentação deve vir do C-suite.

Essa “remissão” de que fala Manuel Da Costa é aqui crucial. A experimentação inserida no DNA de um negócio é

• Parte do entusiasmo em torno da promessa de trazer “mais” testes vencedores.
• Compreensão parcial de como esses sucessos díspares nos primeiros dias de um programa de CRO podem evoluir da otimização de uma métrica para se tornar o suporte à tomada de decisões para a empresa.
• Parte do mandato “experimentação não é negociável” da liderança que escolhe proativamente a viabilidade científica sobre o instinto.

Veja como ter uma agência a bordo contribui para cada parte:

• Os testes se beneficiam de sua vasta experiência em processo e controle de qualidade. Os dados internos da Convert sugerem que as agências realizam testes mais significativos.
• Eles cuidam dos aspectos técnicos da implantação de testes, dando aos Changemakers a confiança para falar abertamente sobre o impacto da experimentação em toda a empresa. Não faz mal que eles ajudem com a educação em toda a organização.
• Eles podem ajudar os líderes de experimentação nos estágios iniciais de adesão do C-suite por causa de seu histórico de provar o poder da experimentação em todos os setores e verticais. O eventual lobby que pode ser necessário se beneficia de seu ponto de vista maduro.

Cobrimos ótimos motivos para integrar uma agência de testes A/B. Agora, mostraremos os motivos errados para terceirizar seus testes A/B.

Três razões realmente ruins para terceirizar

1. Você quer ver seus experimentos vencerem TODA A HORA.

Você obtém os resultados de experimentação que merece.

Este post e seus comentários são a prova:

Se você trouxer uma agência a bordo para procurar vencedores, eles procurarão vencedores. E há uma centena de maneiras sutis e não tão sutis de influenciar tudo, desde a consulta de dados até a interpretação dos resultados, a fim de ter um portfólio de testes vencedores que nunca geram aprendizado ou impacto nos resultados.

O resultado: você provavelmente vai declarar que fazer testes A/B com uma agência não é a sua praia. Mas você teria conseguido exatamente o que está procurando – GANHANDO TESTES.

As agências devem ser parceiras. Eles devem ter a liberdade de investigar os problemas que estão realmente impedindo a receita e o desempenho. Especialmente se você os estiver contratando não apenas para construir, mas também para pesquisar e projetar os experimentos.

2. Você quer aproveitar a “intuição” da agência para cortar cantos no teste de rigor

A experimentação segue o processo científico. Portanto, não há uma maneira precisa de explorar a experiência do cientista (leia-se: sua agência de testes A/B) para encontrar o caminho mais rápido para as vitórias.

Ao integrar uma agência, você está apresentando a ela um desafio único; não uma situação em que eles possam dizer: “Sabe, já vimos isso antes. Isso é o que geralmente funciona. Vamos fazer isso."

Quando clientes em potencial nos procuram para trabalhar com eles em CRO/experimentação, eles geralmente perguntam sobre nossa experiência anterior nesse nicho ou setor. Por exemplo, que experiência você tem de trabalhar com marcas de viagens de luxo/móveis de alto valor/serviços financeiros/etc?

Isso muito firmemente não entende o que é a experimentação.

Se você contratar uma marca ou agência criativa, eles usarão sua intuição e poderes criativos para projetar algo que você provavelmente não testará. Você, portanto, precisa saber que tipo de intuição e criatividade você está comprando e se eles 'pegam' seu público. Você está confiando em alguém para fazer uma comunicação não testada com seus clientes.

Por outro lado, todo o objetivo da experimentação – que é, em última análise, a replicação do método científico nos negócios – é remover opinião, preconceito e intuição:

a) usar pesquisas e dados para formular ideias

b) testar essas ideias com seus clientes reais e

c) construir aprendizados de tal forma que as coisas maiores que você faz sejam comprovadamente eficazes antes de você fazê-las

Você está comprando um processo e método que requer muita experiência para ser executado corretamente, não a 'experiência' anterior de um setor.

Somos guiados por dados, não pela opinião de ninguém do seu setor ou clientes.

Jonny Longden (via boletim Test Everything )

Se você planeja alavancar a intuição de uma agência de testes A/B e não se sente completamente no escuro ao tentar diagnosticar um problema ou fornecer um roteiro mais integrado para o sucesso do CRO, você precisa trabalhar para uma melhor colaboração cliente-agência por meio de uma comunicação clara e um sistema de fluxo.

3. Você não tem intenção de acender uma paixão por testes internos e quer a agência como uma muleta para sempre

Você não vê a contratação de uma agência como uma oportunidade de trampolim para algo maior internamente. Você pode marcar alguns testes vencedores – e eles podem ou não se converter em benefícios comerciais reais – mas uma coisa é certa: a experimentação consistente nunca decolará.

A experimentação não pode ser uma tática. Como o PPC, ele pode funcionar divorciado dos outros departamentos e (ainda) sobreviver.

O verdadeiro poder da execução de testes está em reformular como cada membro da equipe toma decisões importantes no trabalho. É perceber que experimentamos de qualquer maneira e arquivamos isso como “correr um risco”. Ter uma estrutura científica sólida subjacente a esses riscos e apostas é o que leva uma empresa à previsão, maior clareza sobre o que está funcionando e, o mais importante, sucesso consistente.

Certificar-se de que você e sua agência de CRO se encaixam bem no curto e no longo prazo é fundamental para criar um relacionamento sinérgico que consiga atender às métricas e superar as expectativas.

Um modelo simples para trabalhar com agências de teste A/B

1. Fique claro

Você quer saber por que está trazendo a agência a bordo. Escolha KPIs — tanto para o programa quanto para o negócio — que você se esforçará para melhorar.

Deve haver sempre metas de negócios de nível macro e metas de nível micro para atingir essas metas mais altas. As equipes de teste precisam se concentrar nesses objetivos abrangentes por meio de pesquisa e inovação que, por sua vez, podem ser testadas.

A chave aqui é comunicar isso com as partes interessadas do negócio – como a experimentação ajudará o negócio a tomar as decisões corretas – para alcançar os KPIs esperados. O roteiro para a experimentação deve ser criado com base nisso; no entanto, ao mesmo tempo, o roteiro deve ser flexível o suficiente para suportar os requisitos comerciais urgentes. E, finalmente, é preciso haver uma pessoa dedicada para conduzir isso com o apoio de uma equipe dedicada .

Tasin Reza

Tenha cuidado aqui. KPIs relacionados apenas ao programa resultarão em mais testes (maior velocidade de teste), talvez menos testes implantados com bugs e menor tempo de implantação. Estes são todos grandes sinais de um programa saudável.

Mas, a menos que haja clareza no que a máquina de experimentação deve eliminar – também conhecido como o problema que deve resolver – você prosperará na otimização, mas não fará sua empresa avançar.

Sem clareza, haverá uma lacuna entre a estratégia do produto/local (conduzindo os KPIs que impactam os negócios) e a estratégia de experimentação (conduzindo os KPIs que promovem um programa CRO vibrante).

Para preencher essa lacuna, mantenha o foco no aprendizado e na melhoria da experiência do usuário. Ao ficar de olho nas métricas de receita, certifique-se de não desenvolver uma visão de túnel e perder de vista o que é realmente a experimentação.

Para um programa que depende do orçamento, você também terá que relatar em termos de ROI.

Tim Mehta, gerente do programa de experimentação da Microsoft Store, compartilhou nesta entrevista com Speero que ajuda se a liderança for focada na inovação, porque você pode mostrar o ROI em termos dos insights que obtém dos experimentos enquanto fala a linguagem da receita potencial e métricas evitadas de perda de receita potencial.

E então, não compartilhe apenas “vitórias” e “perdas”. Esses termos não significam a mesma coisa fora da esfera CRO. Será melhor interpretado e traduzido em decisões de negócios valiosas se apresentado como recomendações .

2. Identifique as partes interessadas

É mais fácil apresentar uma agência se houver total clareza sobre como o programa de experimentação será executado. Você não precisa esperar para começar e corrigir os erros à medida que eles ocorrem. Isso é ineficaz e caro.

Em vez disso, simplifique o processo desde o início com a matriz de atribuição RACI. Este gráfico ajuda a mapear os principais objetivos, marcos, tarefas e responsabilidades em seu projeto para cada uma das partes interessadas envolvidas.

É também como você descobre quem são seus principais stakeholders (ou seja, aqueles que precisam se manter informados).

RACI é um acrônimo que explica como você estrutura o projeto:

• Responsável – Quem é responsável por completar as tarefas ou tomar decisões? Geralmente é um grupo de pessoas.

• Responsável – Quem assinará as tarefas e garantirá que os marcos sejam concluídos? Quem irá atribuir tarefas aos responsáveis ​​por completá-las? Geralmente é o líder do projeto e é um papel singular para que ele possa dar a decisão final.

• Consultado – Quem precisa ser consultado sobre as tarefas do projeto? Quem precisa dar entrada em uma tarefa para ajudá-la a ser concluída?

• Informado – Quem precisa ser informado sobre o status do projeto? Quem precisa de atualizações sobre o progresso, mas não precisa de informações diárias?

Já falamos sobre como construir e usar um gráfico RACI para seu projeto de experimentação. Aqui está um exemplo de como ele é usado para organizar a comunicação:

Concentre-se nas partes interessadas que devem ser informadas sobre o que a agência está fazendo e aquelas cujo trabalho será diretamente afetado. Porque a integração de uma agência não precisa interromper as operações comerciais regulares.

Ao contratar uma agência de CRO experiente, certifique-se de usar a matriz RACI para poder identificar aqueles com experiência para entregar resultados e trazer soluções variadas para quaisquer problemas futuros.

3. Poço a bordo

Pense na integração de uma agência como você faria na integração de um novo membro da equipe. Você sabe que terá que preparar os recursos necessários para que eles comecem com facilidade.

Há muitas coisas que eles não saberão se vocês não trabalharam juntos antes. Por exemplo: o funcionamento interno e vários casos de uso do seu site, sua matriz de priorização, etc. Então, como você pode passar esse conhecimento?

É imperativo que eles (agências) saibam como trabalhar dentro dos parâmetros do nosso programa, incluindo nossa matriz de priorização, nosso planejamento de sprint, a lista de verificação de controle de qualidade que usamos para o lançamento e nossa equipe de design. Felizmente, a maior parte disso é automatizada em grande parte e disposta em um Airtable que qualquer pessoa pode acessar .

Alex Birkett

Percebi que os clientes esquecem o que as pessoas de fora sabem sobre seu site interno ou aplicativos que precisam ser otimizados. A equipe interna é muito próxima do próprio site. Eles conhecem os detalhes de todos os diferentes cenários, casos de uso e anomalias que o site apresenta. E às vezes esquecem que alguém de uma agência externa não necessariamente tem a mesma profundidade de conhecimento de seu site. Isso pode trazer alguns desafios para a agência no estágio inicial. Compartilhar o conhecimento interno necessário para ajudar o negócio com seu programa de CRO no início é muito importante. Dessa forma, as agências saberão o que esperar e o que considerar quando tiverem uma ideia de teste ou desenvolver e fazer o controle de qualidade dos testes .

Tasin Reza

Caso você esteja começando do zero, dê à sua agência o tempo necessário para entender seu negócio e criar o seguinte:

• Manual de pesquisa do cliente
  
  Este é um documento/banco de dados interno que fornece à agência informações preciosas sobre quem é o cliente. Ele conterá dados coletados de grupos de foco, entrevistas, pesquisas por e-mail, análises analíticas, bem como perfis de clientes ideais e informações demográficas apoiados por dados.

• Matriz de Priorização
  
  Você não pode testar tudo. De acordo com David Mannheim em seu artigo, a maioria dos programas são limitados por:
  
  • O objetivo do teste na organização
  • Disponibilidade de tráfego
  • A mudança desejada
  • A quantidade de tempo disponível

Em um oceano de ideias de teste, você precisa de um sistema para decidir qual teste implementar e o que deixar para mais tarde. Se você descobriu isso, sua agência também precisa saber.

• Lista de verificação de perguntas e respostas
  
  Quando os testes são concluídos, como você valida a precisão dos resultados? Muitas etapas são executadas para executar um teste e isso significa vários pontos de contato em que algo pode dar errado.
  
  Você precisa compartilhar as etapas que você toma para refletir sobre o que foi feito para verificar os resultados. Temos uma lista de perguntas e respostas que você pode usar, para que não precise começar do zero.

• Repositório de Aprendizagem Rudimentar
  
  É aqui que você mantém os dados e a documentação dos testes anteriores. As informações aqui podem melhorar a eficácia e a qualidade de seus testes futuros para níveis excelentes.
  
  Se você não tem um repositório de aprendizado, está perdendo insights que podem aumentar o sucesso de seu programa de experimentação.

Então, por que você precisa dar tempo à sua agência para entender seu negócio e absorver as informações desses recursos? Porque os processos são um pilar da Maturidade da Experimentação. Criar algumas regras básicas é um aspecto fundamental da integração rigorosa. Não perca.

4. Estabeleça Confiança

Dê a eles a liberdade de relatar testes sem resultados e perdedores. Entenda que a maioria dos testes que você executa perderá. Isso é ótimo, por quê? Porque você está eliminando ativamente o que pode não funcionar e avançando em direção a mudanças, recursos e decisões que têm uma chance maior de gerar um impacto positivo significativo.

Se você estiver apenas ouvindo sobre as vitórias, estará perdendo 90% de seus insights. Porque 9 em cada 10 testes geralmente são um fracasso.

Além disso, se suas agências tiverem que se explicar toda vez que você ver um teste simples, elas sentirão que seus serviços serão mais valiosos em outros lugares – pelo menos, as agências que entendem de experimentação e seu potencial o farão.

Você não quer isso. Em vez disso, você quer trazer sua comunicação para o jogo A e construir confiança. Veja como:

• Comunique-se abertamente com sua agência

Fale e ouça. Fale sobre os objetivos da sua organização e o que você espera do relacionamento com sua agência. E então ouça o que eles esperam de você e de sua equipe.

Certifique-se de reconhecer essas demandas e opiniões. Mesmo durante as reuniões subsequentes, à medida que o projeto avança, deixe-os saber que seus comentários e ideias são valiosos para sua equipe.

Se você tiver preocupações, expresse-as honestamente. Na maioria das vezes, sua agência de CRO está familiarizada com essas preocupações e sabe como abordá-las de maneira saudável. Eles também podem ajudá-lo a mapear um caminho seguro para seus objetivos.

Isso é algo que você sempre pode olhar para trás quando as coisas estão confusas e saber que está no caminho certo.

• Defina metas de comunicação mutuamente benéficas

Sempre que fizer parceria com uma agência, você terá que definir expectativas de comunicação claras. Isso incluirá meio de comunicação, horário e frequência das reuniões, pontos de discussão, etc.

Definir essas coisas de antemão não apenas suaviza o processo de trabalho a longo prazo, mas essa quantidade de certeza promove a confiança. Ambas as partes sabem o que esperar, então você pode relaxar e cumprir outras obrigações.

Mas há mais uma coisa: você não apenas configura isso e segue com ele até o fim. Você terá que verificar de tempos em tempos para garantir que está funcionando conforme o esperado. Pergunte à sua agência se eles estão recebendo informações críticas a tempo, por exemplo.

PS: Se você estiver alterando alguma coisa, informe outras partes interessadas.

• Lide com conflitos como campeões

Adoramos ter um passeio róseo, mas o fato é que os conflitos ocorrerão. Se você está microgerenciando, está acumulando suas chances em favor do conflito. Por favor, não microgerencie.

Mas no caso de você discordar em algo com sua agência de CRO, o que você faz?

Canalize seu gerente de RH interno e lide com essas conversas difíceis como um profissional. Entenda que esses momentos não são um concurso “você contra a agência” para você vencer. Em vez disso, esse é o seu parceiro e você tem um objetivo comum – crescimento por otimização (ou outra coisa).

Tranquilize-os sobre o objetivo, revisite-o juntos e trabalhe a partir daí.

Você precisa mudar alguma coisa? Essa mudança o aproxima dos objetivos originais do projeto? Tem algo que você não entendeu? Ou tem algo que você possa explicar melhor?

Mais perguntas durante um momento como esse podem economizar tempo na resolução.

Finalmente, você dá confiança para obter confiança. Confie em sua agência para fazer o melhor trabalho e entregar resultados, e é mais provável que eles retribuam essa confiança para você.

Se você se relacionar dessa maneira com seus parceiros de CRO, cultivará uma qualidade de relacionamento que os deixará animados para ir além da sua organização.

5. Extrair Aprendizagem

Construa seu repositório de aprendizado. Você não pode deixar de lado os insights de testes anteriores e negar à sua equipe de controle de qualidade a oportunidade de diagnosticar campanhas com falhas mais rapidamente.

Isso também o ajudará a facilitar o processo de relatar processos e resultados para seus chefes e aumentar a velocidade do seu teste (já que você tem ideias espalhadas por todo o seu histórico de experimentação).

Mas isso só pode ser valioso se for acessível e bem estruturado. Um repositório de aprendizado produtivo começa com você documentando cada aprendizado desta forma:

1. Grave todos os metadados de seus testes

Destaque o tipo de teste, as páginas em que você executou o teste, pontos de contato, públicos e áreas de superfície de crescimento. Condense essas informações, bem como hipóteses, métricas e resultados, em um scorecard de metadados.

Preserve isso em uma ferramenta de repositório de experimentação. Ao iniciar, você pode usar o Google Slides, Notion ou Airtable para manter e compartilhar essas informações.

2. Grave para diferentes estilos de aprendizagem

Nem todo mundo será fã da maneira como você prefere salvar informações. Alguns prosperam com texto, outros adoram recursos visuais como imagens e vídeos. Ao gravar seu aprendizado de testes anteriores, adicione capturas de tela e gravações de tela onde puder.

3. Marque seus testes

Qualquer pessoa que passe pelo repositório deve ser capaz de identificar instantaneamente o propósito de um teste. Foi iterando ou interrompendo? Ou foi para otimização ou inovação? Desenvolva as tags adequadas ao seu programa de experimentação e use-as para classificar os testes.

Este repositório de aprendizado será inestimável para você e sua agência de CRO. Eles podem explorar a história do seu programa de experimentação sem fazer muitas perguntas.

E eles podem diagnosticar rapidamente um problema ou, melhor ainda, elaborar um plano que não perca tempo com testes que você já fez.

Além disso, não pense em seu programa de experimentação como uma entidade separada de outros processos em sua organização. Outros membros da equipe precisam acompanhar o que sua agência está fazendo. É quando você organiza encontros individuais para que eles possam imitar e absorver como os especialistas da agência pensam e abordam os testes.

Embora esses 1:1s sejam essenciais na promoção de uma cultura de experimentação, você também deve combiná-los com o acesso a dados e relatórios agregados.

Essa é uma maneira de aproveitar a experiência dos especialistas da sua agência CRO. Outra maneira é pedir a opinião deles sobre a estruturação de sua equipe de otimização (CoE centralizado ou descentralizado). Como os especialistas têm previsão e precedentes, eles podem guiá-lo na direção certa com base em seu roteiro de experimentação.

Conclusão

Agora que você sabe como trabalhar com agências de CRO para obter produtividade máxima, pode começar a atingir suas metas de crescimento com o mínimo de atrito possível. Pode haver casos em que você duvide do seu progresso, mas, contanto que você esteja fornecendo colaboração suficiente e tenha as expectativas certas, sua parceria será frutífera.