La guía para emprendedores de pruebas A/B en tiendas Shopify (+ 9 emprendedores de Shopify comparten sus historias de pruebas A/B con resultados)

Publicado: 2022-04-13
La guía para emprendedores sobre pruebas A:B en tiendas Shopify

Así que has oído hablar de las pruebas A/B a través de rumores.

Tal vez su competidor lo mencionó casualmente en un podcast o su equipo de marketing piensa que es una gran idea. O la agencia de crecimiento con la que está en conversaciones quiere realizar pruebas A/B.

Hacer crecer un negocio no es fácil. Tú lo sabes. Habiendo llegado tan lejos, debe haber habido varias ocasiones en las que ha tenido problemas para comprender si una decisión comercial es la correcta.

¿No sería bueno si en lugar de apostar por lo que crees que querrá tu audiencia, tuvieras una forma de saberlo con certeza?

Eso es lo que hacen las pruebas A/B.

Claro, los beneficios de las pruebas A/B trascienden la toma de decisiones basadas en datos, pero en esencia, es el ingrediente secreto para desbloquear el crecimiento a escala.

Entonces, ya sea que intente hacer bricolaje o subcontratar sus necesidades, aquí está todo lo que un emprendedor de Shopify como usted debe saber sobre las pruebas A/B.

¿Qué son las pruebas A/B de comercio electrónico?

Las pruebas A/B son un proceso mediante el cual puedes comprender lo que busca tu audiencia antes de convertirse en cliente.

Por lo general, las pruebas A/B se consideran en términos de hacer ajustes menores, como cambiar el color del botón de llamada a la acción (CTA) o agregar un nuevo título, pero es más profundo que eso.

Le permite determinar qué copia, diseño y funcionalidad (UX) resuenan con sus visitantes al colocar una versión de su página o elemento en una página con una variación para ver qué funciona.

¡Y apenas estamos comenzando!

Puede tomar el concepto de prueba A/B y aplicarlo a cada canal que use e interacción que tenga con su audiencia.

Pero es importante comprender que las pruebas A/B de comercio electrónico son diferentes en comparación con otras verticales como B2B SaaS.

  1. El tiempo para obtener ingresos es más corto

    Las pruebas A/B pueden revelar el impacto en los ingresos mucho más rápido que el B2B tradicional. En B2B, las ofertas son de subprocesos múltiples, tienen múltiples tomadores de decisiones que hacen que los ciclos de ventas abarquen meses, si no trimestres.

    Aunque idealmente debería usar las pruebas A/B para la investigación y la mitigación de riesgos y no solo para aumentar los ingresos, el elemento vital de cualquier negocio son los ingresos, por lo que hay una buena razón para introducir las pruebas A/B en la mezcla de crecimiento.
  2. Los procesos de pago son complejos (por lo que hay más espacio para las pruebas)

    Si bien los embudos de compra de comercio electrónico no son complicados como B2B, el proceso de pago no es unidimensional.

    Rubén De Boer, autor de Psicología de la compra , explica que pagar literalmente duele. En un estudio de 2007 para investigar cómo las personas sopesan los factores para tomar decisiones de compra, a los participantes se les mostraron imágenes del producto y luego el precio. Sus cerebros fueron analizados por máquinas fMRI para ver qué vías neuronales se iluminarían.

    Como era de esperar, ver imágenes de productos iluminó el centro de recompensas en su cerebro.

    Pero el precio? La parte del cerebro asociada con el dolor físico y social se iluminó como un árbol de Navidad, lo que ayudó a los investigadores a concluir que la compensación entre ganancia y dolor debe tener sentido para que los consumidores abran sus billeteras.

    Eso no significa que tenga que bajar sus precios porque el precio también indica la calidad del producto. Puede probar una fuente más pequeña, ofrecer prepago, mostrar descuentos en una fuente más grande o evitar el lenguaje monetario en su copia.

    Por lo tanto, reducir el dolor de la compra significa que debe comprender la mezcla de motivaciones, deseos y frustraciones humanas, lo cual es imposible sin las pruebas A/B. Puede probar sus mensajes, elementos de la interfaz de usuario o revisar el proceso de pago, todo en tiempo real.

    En algunos casos, es posible que no pueda realizar cambios radicales en el carrito y el flujo de pago debido a las limitaciones que impone su plataforma de comercio electrónico, pero esa no es razón para abandonar las pruebas ambiciosas. Siempre puede probar cambios más pequeños que le den una idea del potencial que podrían tener los ajustes más grandes.

    Jonny Longden, director de conversión de Journey Further, recomienda hacerse una pregunta:

    ¿Qué es lo más pequeño/sencillo que podemos probar para empezar a probar esto y aprender sobre ello?
    No caiga en la trampa de "solo probaré cambios pequeños" o si ha realizado cambios más grandes "el dinero ya se ha hundido, así que no lo probaremos".
  3. La minería de reseñas puede convertirse en una ciencia

    La investigación de conversión basada en datos cualitativos es un elemento básico en cualquier tipo de prueba A/B pero, en el comercio electrónico, los datos cualitativos, como la minería de reseñas, se pueden convertir en una ciencia que lo ayuda a comprender:

    • USP de productos a destacar
    • Beneficios que puedes probar en tu copia
    • Cómo perciben los clientes a los competidores
    • Copiar ángulos para historias de productos
    • Puntos débiles que ha abordado
    • Puntos débiles no abordados que causan el abandono del carrito Lorenzo Carreri, CRO y consultor de experimentación, recomienda pensar como un detective. Al igual que un detective tiene que descubrir la historia detrás de un crimen, puedes usar las reseñas para descubrir muchas historias.

      La gente ya tomó una decisión sobre la compra y ahora, sin que los molestemos con una encuesta de salida o un widget, en realidad están compartiendo su experiencia de forma orgánica.

      De hecho, el análisis de pulso de Carreri para diferentes industrias revela un tema común: las personas no tienden a compartir información sobre su experiencia en el sitio. Así que no importa qué pregunta hagas o cómo la hagas.

      Pero con la minería de reseñas, especialmente en Amazon, las personas tienden a compartir sus ideas. Cuanta más información recopile, más significativos se vuelven sus datos, lo que le ayuda a formar una mejor hipótesis para la prueba.
  4. No hay escasez de tráfico para el comercio electrónico

    Un obstáculo importante con las pruebas A/B es no tener suficiente tráfico, lo que significa que los resultados pueden estar sesgados.

    Pero esto no es un problema para las tiendas de comercio electrónico. Una tienda Shopify de 7 cifras obtiene fácilmente cientos de miles de visitantes, pero una empresa B2B de la serie D probablemente obtendría 1/4 de ese tráfico.

¿Por qué los emprendedores de Shopify (en serio) deberían considerar las pruebas A/B?

El comercio electrónico está maduro para las pruebas A/B. El potencial de ver resultados rápidamente con una gran cantidad de visitantes y mucho espacio para jugar es motivo suficiente para adoptar una cultura de pruebas A/B.

Pero tal vez usted no está allí todavía. Un aumento en su tráfico en este momento produce un aumento de ingresos.

La pregunta es, ¿cuánto tiempo puedes mantener eso?

Más tráfico ≠ más ingresos más allá de un punto. Ese camino requiere que gaste más en anuncios y, al mismo tiempo, consuma sus márgenes de beneficio con descuentos.

Y cuando mire a los gigantes del comercio electrónico como Amazon, eBay o Etsy, notará que tienen pruebas A/B integradas en su ADN. Es la razón por la que prosperan. Sin mencionar que es el hilo común que comparten todas las tiendas exitosas de Shopify.

Es fácil entender por qué las pruebas A/B impulsan el crecimiento. Mire cuán granulares son las pruebas que ejecuta Amazon:

Pero cuando se trata de eso, las pruebas A/B no son solo una forma de mantenerse competitivo, es una buena decisión comercial.

¿Por qué? Porque sus estrategias actuales probablemente no estén funcionando a su favor.

  1. Tu ROAS está cayendo en picado gracias a iOS 14
    Probablemente esté gastando más dinero que antes tratando de llamar la atención sobre su producto, pero el mundo posterior a ATT se ha alterado con la forma en que funcionan las conversiones basadas en píxeles. ¿Y el retargeting y las audiencias similares? Ya no son tan efectivos. En caso de que obtengas algunas conversiones, prepárate para lidiar con las discrepancias entre Ad Manager y tu backend de Shopify.
  1. Sus tasas de apertura están sesgadas
    Los números de correo electrónico ya no son precisos. Mail Privacy Protection (MPP) se ha asegurado de eso. Y sus listas basadas en el compromiso pueden tener una orientación cuestionable y conversiones más bajas.
  1. A tu ecuación le falta retención
    Perseguir el tráfico frío es un mal negocio. El 40% de sus ingresos proviene de clientes leales. El tráfico lleva a los compradores a su embudo, pero la retención aumenta el valor de por vida (LTV) de estos compradores.
  1. Tu atribución de marketing apesta
    Las herramientas no pueden brindarle ningún dato utilizable y su equipo no puede atribuir los ingresos a cambios específicos. No puedes presionar todos los botones con la esperanza de ver un crecimiento. Necesita ser específico o construir un negocio de 8 cifras está fuera de discusión.

Las pruebas A/B le dan la vuelta al viejo libro de jugadas y le brindan la oportunidad de utilizar un enfoque científicamente válido que es repetible, confiable y rentable.

Esta es la razón por la que OLIPOP, una empresa alternativa a los refrescos de DTC, respalda las pruebas A/B:

Las pruebas A/B mejoran la interacción con el contenido, reducen las tasas de rebote, aumentan la tasa de conversión y minimizan el riesgo, todo mientras proporciona datos que son fáciles de analizar. Al ejecutar una prueba A/B, puede descubrir qué contenido resuena con su público objetivo. A continuación, puede utilizar estos datos para influir en su estrategia de marketing. Estas pruebas también lo ayudan a identificar datos irrelevantes y áreas donde sus usuarios experimentan dificultades en su sitio web, lo que reduce su tasa de rebote una vez que realiza los cambios necesarios.

Una vez que pueda identificar la variación que mejora su experiencia de cliente, verá un aumento en el tiempo que los usuarios pasan en su sitio, lo que generará una tasa de conversión más alta. Por último, las pruebas A/B minimizan el riesgo porque tomas decisiones basadas en datos precisos en lugar de conjeturas informadas. Le permite realizar cambios mínimos sin comprometer todo su sitio web. Su ROI aumentará con las pruebas A/B .

Steven Vigilante, Jefe de Desarrollo de Nuevos Negocios de OLIPOP

Haz pequeños (o grandes) cambios fácilmente

La optimización, la ciencia de mejorar las cosas, es fácil con las pruebas A/B. Puede introducir cambios para encontrar la versión que crea una mejor experiencia de compra y convierte parte de su tráfico de PPC.

Reducir el costo de fallar

El costo de fallar a veces es demasiado alto y, como era de esperar, inhibe la innovación. Pero con las pruebas A/B, puedes probar tus ideas en un entorno controlado sin tener que construir o implementar nada.

Mirar hacia el futuro

Nada puede garantizar el éxito. No es su instinto, sugerencias de agencias o incluso una sólida investigación de la competencia. Pero si desea tomar decisiones basadas en datos, las pruebas A/B son su amigo. Las mejores versiones en una prueba no se eligen en función de la validez estadística, lo que le permite vislumbrar su potencial de ingresos.

Dejar poco espacio para malas interpretaciones

Las pruebas A/B le permiten escuchar realmente a su audiencia al recopilar datos de los cambios en la tasa de conversión, el abandono del carrito, el valor promedio de pedido (AOV), los ingresos y las ganancias.
En lugar de adivinar los efectos de sus cambios, los resultados son transparentes y dejan poco espacio para malas interpretaciones.

Problemas con las pruebas A/B en Shopify (+ Soluciones)

Mientras contempla hacer que las pruebas A/B sean centrales para su estrategia, es importante abordar los posibles problemas que puede enfrentar al ejecutar pruebas A/B en Shopify.

Problema n.º 1: el sistema anti-clickjacking de Shopify puede interferir con el control de calidad de su dispositivo móvil

El secuestro de clics engaña a los usuarios para que hagan clic en contenido procesable en un sitio señuelo. Para evitar que esto suceda, Shopify utiliza tecnología antisecuestro de clics. Pero impide que las herramientas de prueba A/B funcionen de manera óptima.

Solución: use la extensión de Google Chrome, ignore los encabezados de X-Frame.

Problema n.º 2: las pruebas no son un problema, pero la implementación sí lo es

Implementar los resultados de una prueba no es algo que pueda hacer una aplicación o un complemento, requiere personalización. Incluso si encuentra complementos que funcionen para usted, muchos de ellos pueden ralentizar su sitio, lo que anula efectivamente la ganancia potencial.

Solución: Trabaje con un desarrollador competente, use Convert Deploy o estas principales aplicaciones de Shopify de optimización de la tasa de conversión (CRO).

Problema n.º 3: tienes una tienda Shopify estándar que limita lo que puedes probar

Las tiendas estándar de Shopify no pueden acceder a la mayoría de las funciones de Shopify Plus, lo que significa que no puedes ejecutar pruebas como pruebas divididas de los temas. Las pruebas de menor complejidad dan como resultado un menor impacto en sus ingresos.

Solución: Primavera para Shopify Plus.

Una guía rápida de los conceptos básicos de las pruebas A/B

Ahora que te has centrado en las pruebas A/B, es hora de entrar en el meollo de la cuestión.

Haga una pausa por un momento y responda sí o no a estas preguntas antes de desplazarse hacia abajo para ver la respuesta.

  • Las pruebas A/B son lo mismo que las pruebas divididas
  • Las pruebas A/B y las pruebas multivariadas son diferentes
  • Solo puedes hacer ajustes menores con las pruebas A/B
  • No necesitas aprender estadísticas para ejecutar pruebas A/B
  • No puede ejecutar pruebas A/B en otros canales
  • Debe detener las pruebas A/B una vez que vea los resultados.

Pruebas A/B frente a pruebas divididas

Con las pruebas A/B, puede probar uno o más elementos en una página. Básicamente, crea una versión similar de la página original para ver el impacto en la tasa de conversión.

La prueba de URL dividida es diferente de la prueba A/B. El tráfico se divide por la mitad y se envía a dos versiones completamente diferentes para ver qué página web lo ayuda a lograr sus objetivos específicos.

Cuándo ejecutar pruebas divididas frente a pruebas A/B: Pruebas temáticas

Un gran ejemplo de cuándo elegir las pruebas divididas en lugar de las pruebas A/B es cuando quieres probar los temas de Shopify. Su tema puede afectar la CX y, en última instancia, los ingresos, por lo que es esencial que lo pruebe con una herramienta como la opción de URL dividida de Convert.

Convert emplea la inferencia frecuentista para comprender qué tema supera al otro. Recomendamos ejecutar este tipo de prueba durante al menos dos semanas, a menos que tenga un tráfico inusualmente alto en su sitio.

PD Solo puedes probar temas si eres un usuario de Shopify Plus.

Pruebas A/B frente a pruebas multivariadas

En las pruebas A/B, compara páginas casi idénticas con el original.

En lugar de cambiar un elemento a la vez, como en las pruebas A/B, la prueba multivariable es un proceso en el que prueba varios cambios en una sola prueba. El objetivo de las pruebas multivariadas es averiguar qué combinación de cambios produce mejores resultados.

Ejemplos de pruebas A/B para ejecutar en tiendas Shopify

Pregunte en Internet qué debe hacer una prueba A/B y, a menudo, le dirán que pruebe con un CTA diferente o un color de botón o que cambie un título.

No es que no sea importante, pero el mundo es tu patio de recreo, y solo estás jugando en tu pequeña caja de arena si te limitas. Pensar fuera de la caja es crucial para el espíritu de experimentación.

Nos comunicamos con 8 emprendedores de Shopify y les preguntamos esto:

¿Qué pruebas A/B has realizado, por qué elegiste realizar este experimento y cuáles fueron los resultados?

#1. AOV potenciado, órdenes ligeramente bajas

Usamos Shopify en todas nuestras tiendas en línea y hemos estado probando paquetes o agrupando nuestros productos para aumentar el AOV. La prueba es un carrito que tiene ventas adicionales o paquetes, frente a un carrito que solo contiene el producto inicial. Los resultados aún no están completos, pero hasta ahora parece que el AOV ha aumentado, mientras que el número total de pedidos ha disminuido ligeramente. Ejecutaremos esto durante algunas semanas más antes de realizar un análisis completo y podríamos probar otras configuraciones para tratar de generar mejoras tanto en el AOV como en las conversiones .

Sylvia Kang, Mira

#2. Optimizado cada elemento del sitio para CX

Como empresa de Shopify, hemos realizado una multitud de pruebas A/B para características como chat en vivo, llamadas a la acción, imágenes de productos, ubicación de ventas adicionales, páginas de destino, menús de navegación y más. Por ejemplo, nuestras pruebas A/B nos ayudaron a encontrar el equilibrio entre ventas cruzadas y ventas adicionales sin irritar a los consumidores ni agregar fricciones a su experiencia .

A través de numerosas pruebas, descubrimos que nuestra audiencia valoraba las sugerencias altamente relevantes directamente en las páginas de productos en lugar de ofrecerlas durante el pago y, al hacerlo, aumentamos el valor promedio de compra. Las pruebas A/B son cruciales porque le permiten identificar exactamente qué funciones funcionan mejor y ofrecen los mayores rendimientos sin perder tiempo y energía implementando elementos que no son óptimos. Estas pruebas le brindan datos precisos sobre qué opciones de diseño se adaptan mejor a su audiencia, y una experiencia de usuario más sólida es la forma en que las empresas logran el crecimiento y la longevidad .

Stephen Light, Colchón Nolah

#3. Se usaron repeticiones de sesiones para incluir videos y obtener mejores resultados

Uno de los aspectos más importantes que pueden hacer o deshacer una conversión es lo fácil que es para un usuario navegar por su tienda y realizar una compra. Con pruebas A/B en repeticiones de sesiones, logramos ver cómo los usuarios reales con la intención de comprar navegaban por nuestra tienda, dónde estaba el problema, qué los frustraba, qué los detenía durante el proceso y les impedía realizar una compra. Nos dimos cuenta de que los listados que incluían videos del proceso daban mejores resultados y las imágenes con mala calidad o que no mostraban varias imágenes generaban dudas.

Michael Nemeroff, camisetas de pedido urgente

#4. Aumento de las conversiones en un 2 % con cambios de diseño

En esta prueba A/B, quería ver cómo un nuevo diseño podría afectar la tasa de conversión de mi tienda Shopify. El sitio original había estado funcionando durante seis meses y estaba convirtiendo al 3 %, por lo que parecía el momento de probar algo diferente. Mi cambio de diseño incluyó mover las recomendaciones de productos debajo del pliegue en los dispositivos móviles en lugar de en línea con los productos, así como eliminar los banners de la navegación superior, ya que de todos modos no se hacía clic en ellos. Esto resultó en un aumento instantáneo de las conversiones en un 2%.

Jar Kuznecov, Centro de ablandadores de agua

#5. Aumento de los clics relativos en un 14 % al cambiar el color del botón CTA

Aunque hemos realizado multitud de pruebas A/B a lo largo de los años, una de las pruebas más eficaces que hemos realizado también fue la más sencilla: cambiar el color de nuestro botón CTA. Eso es todo. Escuché de un amigo que al cambiar el color de sus botones en la página, había aumentado sus tasas de respuesta en un 16% (en relación con la cantidad de clics que estaba recibiendo anteriormente). Esto me hizo pensar y decidí hacer nuestra propia prueba A/B. De hecho, en realidad fue una prueba A/B/C, ya que probamos 3 colores diferentes: nuestro color verde original, además de naranja y rojo. ¿El resultado? El botón rojo arrojó una tasa de respuesta un 8 % más alta, mientras que el botón naranja nos dio resultados un 14 % mejores en términos de clics relativos. Es sorprendente que un cambio tan simple como convertir un botón verde en naranja pueda tener un efecto tan profundo. Por lo tanto, mi mejor consejo es que cuando intente que alguien agregue un producto a su carrito, no se deje engañar por el color del botón CTA. Piénselo seriamente y pruébelo .

John Ross, Perspectiva de preparación para exámenes

#6. Mayor CVR y AOV con Sticky Add-to-cart y Upsells posteriores a la venta

Las pruebas A/B son un arma de doble filo. Suena bien optimizar tu tienda Shopify y aumentar la tasa de conversión. Pero necesita saber qué es cada prueba A/B agregando una capa de complejidad y usando sus recursos. Qué probar es tan importante como cómo lo prueba .

He probado diferentes pedidos de fotos de productos. Cada vez, descubrí que la imagen más simple siempre convierte la mejor. En las páginas de productos, su cliente necesita entender exactamente cuál es su producto sin tener que pensar.

Un complemento pegajoso al carrito es un ganador conocido. Tener el botón también en la pantalla, al alcance de la mano, fue un aumento fácil del 8 % en mi CVR.

No te olvides de las ventas posteriores a la venta. Fue fácil aumentar el valor promedio de mi pedido de $24 a $40. Te sorprendería lo fácil que es vender más a personas que ya están comprando .

Matt Phelps, especialista en CRO y fundador de STEEL.

¿Te sientes inspirado? Aquí hay más de 20 elementos de prueba A/B con los que los principiantes pueden jugar en su sitio web de comercio electrónico:

  • Ofrecer envío gratis
  • Imágenes destacadas frente a carruseles
  • tamaño de llamada a la acción
  • color de llamada a la acción
  • ubicación de la llamada a la acción
  • copia de llamada a la acción
  • Imágenes humanas vs. no imágenes
  • Copia del título
  • Tamaño de fuente
  • Altura de la línea
  • Personalización frente a ninguna
  • Notificación de reposición de existencias
  • Descripciones de productos basadas en beneficios
  • Consejo experto en la página del producto
  • Destacando descuentos y ofertas.
  • Pago de una sola página o de varias páginas
  • Soporte durante el pago
  • Menús de navegación sencillos
  • Vista rápida del producto
  • vídeos de productos
  • Venta ascendente frente a venta cruzada
  • Etiquetas en imágenes de vista previa
  • Contenido generado por el usuario

De la lista de elementos que puede probar A/B, es evidente que las páginas de productos son el mejor lugar para comenzar.

Pero otras páginas de su sitio también son candidatas perfectamente viables para las pruebas A/B.

Veamos qué páginas puede poner a prueba con algunos ejemplos de la vida real de las marcas:

  1. Página de inicio

    • Salty Captain cambió el color de la barra de anuncios en su página de inicio y obtuvo un 234,54 % más de clics y aumentó el CVR en un 13,39 %.
    • Legendary Wall Art experimentó con la sección de héroes y la copia de CTA y aumentó su interacción en un 325,39 % y los ingresos en un 30,07 %.
    • byBiehl agregó un control deslizante para mostrar sus productos importantes, lo que resultó en un aumento de las visitas a la página de categoría (5,87 %), los ingresos por usuario (3,25 %) y el CVR (19,73 %).
  2. Página de categoría

    • Copycat Fragrances agregó su versión de las Historias de Instagram en sus páginas de categorías, lo que aumentó la interacción en un 4 % y los ingresos por usuario en un 18 %.
    • Iceshaker cambió su página de categoría para incluir la historia de su producto que aborda las objeciones comunes y obtuvo un aumento del 15,95 % en las conversiones.
    • Oliver Cabell se centró en la experiencia móvil de sus usuarios modificando el diseño y mejorando el diseño, lo que resultó en un aumento del tráfico del 14,86 % y un aumento del tráfico de la página de pago en un 5,49 %.
  3. Página de pago

    • Oflara recomendó otros artículos a los compradores cuando estaban pagando con un botón Agregar al carrito, lo que resultó en una mejora significativa en los ingresos generales.
    • Conscious Items eliminó la fricción del proceso de pago con un carrito fijo, lo que resultó en un aumento del 10 % en los ingresos por usuario y un aumento del 10 % en el CVR.
    • Homeware notó que los usuarios solo compraron un artículo en su tienda Shopify. Por lo tanto, simplificaron el proceso de pago para redirigir a los usuarios a la página de pago directamente, lo que resultó en un aumento del 47,7 % en CVR y un aumento del 71,4 % en los ingresos por visitante en dispositivos móviles.

Consejo de experto: concéntrese en los grandes cambios

Mi mejor consejo para los emprendedores primerizos que realizan pruebas A/B por primera vez es centrarse en los grandes cambios. Por ejemplo, un rediseño completo de la página de un producto. Es poco probable que pequeños cambios como cambiar los colores de los botones muevan la aguja de manera significativa .

Al hacer un rediseño completo de la página y agregar gifs de explicación de productos a nuestras páginas de productos, pudimos aumentar la tasa de conversión en un 40% .

Philip Pages, fundador de PostPurchaseSurvey.com y una marca Shopify de comercio electrónico de siete cifras.

Conceptos de estadísticas con los que debe familiarizarse cuando ejecuta pruebas A/B

Aunque las pruebas A/B se utilizan para comparar dos versiones de su sitio web, no es útil mirar solo los números, ya que no se tiene en cuenta la importancia estadística de los datos. Terminará malinterpretando los resultados y perjudicando sus ventas.

Entonces, ya sea que su equipo interno esté a cargo del proyecto o que contrate a una agencia de CRO, es importante que se familiarice con los conceptos de estadísticas de pruebas A/B de los que escuchará mucho.

Muestra y Población

Todos los visitantes que llegan a su sitio se consideran población, mientras que una muestra es el número de visitantes que participan en una prueba A/B.

Media, mediana y moda

Media = promedio

Mediana = valor en el medio

Moda = valor repetido

Varianza y desviación estándar

La varianza es la variabilidad promedio de los datos. Cuanto mayor sea la variabilidad, menos precisa será la media como predictor de un punto de datos individual.

La desviación estándar es la raíz cuadrada de la varianza y se expresa en las mismas unidades que los valores originales, lo que lo hace intuitivamente más fácil de entender. Por otro lado, la varianza se expresa en el cuadrado de la unidad original, pero sigue siendo importante para los resultados de las pruebas A/B.

Significancia estadística

Cuando un tablero de pruebas A/B dice que hay un "95 % de probabilidad de vencer al original" o "90 % de probabilidad de significancia estadística", está haciendo la siguiente pregunta: suponiendo que no haya una diferencia subyacente entre A y B, ¿con qué frecuencia lo haremos? ¿Ves una diferencia como la que vemos nosotros en los datos por pura casualidad ?

Evan Miller, desarrollador de software estadístico (Fuente)

El nivel de significación debe ser lo más pequeño posible. El 1 % es ideal, ya que equivale a un nivel de confianza del 99 %. Y los resultados insignificantes pueden significar que lo que está viendo es en realidad un falso positivo, por lo que es importante esperar la significación estadística, pero no solo eso.

Debe calcular un tamaño de muestra que coincida con un aumento mínimo de su elección (MDE: efecto mínimo detectable), tendrá un mayor cambio de hacer un falso positivo.

valor p

El valor p es la probabilidad de obtener resultados al menos tan extremos como los resultados observados de una prueba de hipótesis estadística, asumiendo que la hipótesis nula es correcta.

Pero lo que realmente necesita saber sobre el valor p es esto: "¿Qué tan sorprendente es este resultado?"

Para obtener una lista completa de lo que un emprendedor de Shopify debe saber, lea nuestra guía de conceptos de estadísticas de pruebas A/B.

¿Cuánto tiempo debe ejecutar una prueba A/B en una tienda Shopify?

Hay dos falacias comunes con las que te encontrarás a menudo:

  • Finalice la prueba A/B cuando alcance la significación estadística
  • Supervise los valores p y declare el ganador tan pronto como alcance el objetivo.

La detención de una prueba debe basarse en el tamaño de la muestra. Pero si bien no debe finalizar su experimento antes de tiempo, no debe ejecutarse para siempre. Si después de 3 meses aún no ha alcanzado la significación, es mejor intentar otros cambios de su lado, preferiblemente más audaces.

Convert y Shopify recomiendan que sus pruebas se ejecuten durante al menos dos ciclos comerciales o 14 días.

Avid Faruz, CEO de Faruzo está de acuerdo:

Los nuevos empresarios deben saber que en las pruebas A/B, el marco de tiempo es muy importante. Cuanto más tiempo ejecute sus pruebas A/B, más precisas serán las pruebas que obtendrá. Esto se debe a que sus pruebas utilizarán más puntos de datos para obtener resultados. Los especialistas en marketing experimentados realizan sus pruebas durante dos semanas. Aconsejaría a todos los vendedores y empresarios que establezcan un marco de tiempo de acuerdo con el nivel de tráfico que reciben sus sitios web .

Es por eso que nuestra plataforma ofrece una prueba gratuita de 14 días para que puedas probar tu hipótesis.

Proceso de 4 pasos para ejecutar pruebas A/B en una tienda Shopify

¿Listo para ejecutar pruebas?

Utilice este proceso de prueba A/B de 4 pasos para crear mejores pruebas y comprender su impacto.

#1. Realizar investigaciones cualitativas y cuantitativas

La investigación de conversión es el primer y más importante paso. Esto le permite construir hipótesis que puede probar A/B. También conocida como la fase de descubrimiento, aquí es cuando usted pone su suposición operativa en reposo y deja que los datos lo guíen.

Terminará con dos tipos de datos: cuantitativos y cualitativos.

Comience con la recopilación de datos cuantitativos. Estos constituyen los hechos fríos y duros que no se pueden discutir y que los motores de análisis como Google Analytics, Amplitude o Mixpanel pueden escupir.

Por ejemplo, es posible que desee ver las tasas de rebote, el número total de conversiones o las páginas vistas/sesión.

Una vez que haya acumulado los datos cuantitativos, obtenga datos cualitativos. Dado que esto es subjetivo, existe la posibilidad de que surjan sesgos subconscientes, pero interpretar sus hallazgos es la única forma en que puede responder el "Por qué".

Use Hotjar para generar mapas de calor y registrar sesiones de visitantes. Las respuestas que puede encontrar no son definitivas, pero presenta nuevas posibilidades que contribuyen a una mejor hipótesis en general.

Pero antes de entrar en eso, es importante observar los datos cualitativos y cuantitativos en conjunto para tener una comprensión holística. Análisis es igual a consulta de datos y pensamiento crítico.

#2. Crear hipótesis creíbles

Seguir el método científico significa que debe crear una hipótesis creíble, una solución propuesta cuya validez requiere evaluación.

Matt Beischel, fundador de CorvusCRO, comparte los 3 componentes principales de una hipótesis: comprensión, respuesta y resultado.

Aquí hay un ejemplo de cómo se vería:

  • Comprensión : hemos observado una reducción en las compras de varios artículos al comparar los datos de compra de los últimos 6 meses.
  • Respuesta : Queremos promocionar productos combinados con una venta adicional en línea en la página del carrito en teléfonos móviles para usuarios recurrentes que ya tienen un artículo en su carrito.
  • Resultado : Esto debería llevar a los compradores de un solo artículo a encontrar y comprar productos complementarios más fácilmente, lo que se medirá por el valor promedio de pedido (AOV) y se respaldará por el tamaño promedio de pedido, el recuento de compras de varios artículos, la conversión de pedidos y los ingresos.

Para ayudarlo a simplificar y estandarizar la creación de hipótesis, tenemos un generador de hipótesis de prueba A/B.

En esta etapa, también desea comprender el tamaño de su muestra y calcular un punto de parada para la prueba en función de eso. Utilice nuestra calculadora de importancia de las pruebas A/B para eso.

Consejo de experto:

Una vez que sepa el tamaño de su muestra y cuánto tiempo debe ejecutar su prueba, debe establecer sus prioridades de prueba. Puede optar por probar diferentes partes del proceso, como una sola página, un sitio web completo, ventanas emergentes o anuncios pagados. Lo mejor es concentrarse en una parte del proceso a la vez, para que pueda obtener respuestas claras sobre qué cambios conducen a una mejor experiencia del cliente y tasas de conversión .

Allan Borch, fundador de DotcomDollar.com
Prioriza tu hipótesis

La experimentación tiene muchas ventajas, por lo que a menudo verá expertos que abogan por probar todo. Sin embargo, debe priorizar qué pruebas necesita ejecutar ahora y qué experimentos pueden esperar porque los recursos son limitados sin importar cuán pequeña o grande sea su empresa.

Entonces, los experimentadores recurren a modelos de priorización como RICE, PIE, ICE o PXL. Pero David Mannheim, consultor de personalización, sugiere que estos modelos tienen fallas:

Carecen de alineación con el contexto más amplio del negocio. La priorización debe ser de arriba hacia abajo, centrándose primero en la misión comercial, luego en los objetivos comerciales, y así sucesivamente. La mayoría de los modelos de priorización se enfocan en la 'ejecución', es decir, lo último dentro de un diagrama de jerarquía triangular de ejecución en la base, el concepto, el problema del usuario, los objetivos del producto, los objetivos comerciales y la misión en la parte superior .

Estos modelos también utilizan el "esfuerzo" como factor de puntuación, lo que significa que realmente se está absteniendo de crear funciones que potencialmente tienen el mayor impacto porque son complejas. En última instancia, estos modelos carecen de objetividad.

Andrea Saez, gerente sénior de marketing de productos en Product School, dice:

No hay manera de que puedas saber el alcance, el impacto o el esfuerzo en la mayoría de las cosas sin haber investigado adecuadamente si estás trabajando en las cosas correctas, incluso menos si no has hablado con nadie al respecto. Entonces, ¿cómo es posible que tenga alguna confianza ?.

La respuesta aquí es construir su propio modelo de priorización.

Paso 1: Inspírate con ejemplos

Paso 2: tenga en cuenta factores como la alineación con los objetivos comerciales, el potencial de iteración, el aprendizaje específico de la empresa y la inversión en recursos.

Paso 3: Asigne una ponderación a las pruebas que desea ejecutar

Paso 4: enjuague y repita hasta que encuentre un acrónimo que funcione para usted.

#3. Implementar la prueba

Tiene su investigación en su lugar y construyó una hipótesis creíble. Ahora es el momento de ir a batear.

La implementación exitosa requiere 3 cosas: la plataforma de prueba A/B adecuada, el equipo adecuado para codificar las pruebas y control de calidad y depuración.

Comencemos con el primero.

¿Qué hace que una buena plataforma de pruebas A/B para Shopify?

Idealmente, desea una herramienta única que le permita probar temas, precios, menús, colecciones de productos, páginas de búsqueda, ejecutar pruebas multivariadas y realizar un seguimiento de los ingresos.

Muchos complementos pueden ayudarlo a lograr una o más de estas cosas, pero ya sabemos que los complementos causan una sobrecarga de código, lo que no es una buena noticia para su SEO o conversiones.

Una plataforma de prueba dedicada como Convert Experiences se integra a la perfección con su tienda Shopify, le permite ejecutar todo tipo de pruebas que desee y tiene una aplicación de prueba Shopify A/B personalizada que puede usar, eliminando la posible sobrecarga de código.

A continuación, desea contar con el equipo adecuado para codificar las pruebas.

Nota: Hay una diferencia entre codificadores y codificadores que trabajan con equipos de pruebas A/B.

En última instancia, la prueba está incompleta sin el control de calidad y la depuración. Sin control de calidad, pueden surgir errores de variación que causen errores estadísticos: un falso positivo o un falso negativo. Sin mencionar que puede terminar recopilando datos incorrectos que no brindan ningún valor a sus visitantes.

Aquí hay 4 mejores prácticas para el control de calidad de las pruebas A/B:

  • Desarrollar una estrategia de control de calidad
  • Identificar qué QA
  • Centrarse en la experiencia de la página
  • Alinear el control de calidad con los objetivos de conversión

Consejo profesional: evite estos errores de pruebas A/B de novatos:

  • Solo prueba las mejores prácticas de la industria
  • Sigues mirando tus "resultados"
  • Te rindes después de una prueba
  • No logras iterar y mejorar las victorias
  • Echas a perder el seguimiento de ingresos

#4. Analice y aprenda de sus pruebas A/B

Ya sea que tenga un ganador o un perdedor en sus manos, es crucial analizar lo que funcionó y aprender de ello para influir en futuras pruebas A/B.

Porque si bien las pruebas A/B son una estrategia para aumentar sus ingresos, también está "comprando datos" de su audiencia.

Aquí hay un proceso de 7 pasos para aprender de las pruebas A/B:

  • Asegúrese de que sus datos sean precisos, válidos y significativos
  • Verifique sus métricas de micro, macro y guardarraíl
  • Segmenta tus resultados
  • Comprobar el comportamiento del usuario
  • Continuar mejorando en los ganadores
  • Crear un repositorio de aprendizaje para futuras pruebas

El último paso le permite ejecutar pruebas en el futuro que están respaldadas por los aprendizajes de sus experimentos anteriores.

Consejo de experto: prepárate para fallar.

Es difícil predecir la tasa de conversión de su sitio web, incluso si cree que ha creado la prueba A/B perfecta. Como nuevo emprendedor, casi sucumbo a la frustración de no ver el éxito en los primeros meses. No estoy acostumbrado al fracaso y muchos emprendedores son así. El enfoque debe ser brindar a los usuarios la mejor experiencia y dejar espacio para lo inesperado .

Leslie Radka, fundadora y directora de contratación de GreatPeopleSearch

Pruebas A/B en otros ámbitos que pueden aumentar las ganancias de su tienda Shopify

No te limites solo a tu sitio web. Las pruebas A/B pueden y deben aplicarse a otros canales y ámbitos donde se produce la participación del cliente.

Ventanas emergentes de pruebas A/B (con Privy)

¿Esas ventanas emergentes que tienes en tu sitio web? También puedes realizar pruebas A/B con herramientas como Privy. Experimente con su título, oferta, formulario, CTA o imágenes.

La herramienta Convert de Privy le permite presentar la ventana emergente en diferentes formatos y dirigirse a los visitantes en función de los conjuntos de reglas.

Correos electrónicos de prueba A/B

Cuando se trata de marketing por correo electrónico, surgen 3 áreas principales de mejora: entrega, tasas de apertura y CTR.

Puede probar sus correos electrónicos en este orden:

  • Primero, las líneas de asunto para mejorar la tasa de apertura.
  • Luego, el texto del cuerpo para asegurarse de que sea relevante.
  • Por último, las CTA para conseguir más clics

¿Qué más puedes probar en tu correo electrónico? Consulte nuestra guía completa de correos electrónicos de prueba A/B.

Así es como dos emprendedores de Shopify usaron las pruebas A/B para hacer crecer su canal de marketing por correo electrónico: [h5] #1. Creció la lista de correo electrónico 3 veces usando pruebas divididas

La estrategia más efectiva para probar contenido es la prueba A/B. Las pruebas A/B han demostrado resultados medibles e inmediatos que nos dicen si una u otra base de contenido es más efectiva para convertir a los clientes para que se suscriban a correos electrónicos, realicen una compra, etc.

En el comercio minorista, las métricas de vanidad, como el tráfico directo a su sitio web, son las menos efectivas para medir el éxito del contenido, mientras que las pruebas A/B (es decir, el seguimiento de la tasa de conversión, la participación del usuario, los embudos de correo electrónico) son las más efectivas. Probamos nuestro CTA de suscripción de correo electrónico con pruebas divididas y aumentamos nuestra lista de correo electrónico más de tres veces en una campaña. Cuanto mejor conozca su ICP, más efectiva será la conversión de su estrategia de marca. Use pruebas A/B para comprender mejor a su grupo demográfico objetivo y deles el contenido al que responden mejor .

Zach Goldstein, grabación pública
#2. Aumento de la tasa de apertura de correo electrónico en un 25 % con emojis en las líneas de asunto

Después de ver un estudio, quise probar las tasas de apertura usando un emoji en la línea de asunto versus no usar uno. El estudio implicaba que el uso de un emoji ayudaría a mejorar las tasas de apertura, pero sentí que podría parecer poco profesional y spam.

Utilizo la plataforma de correo electrónico ActiveCampaign junto con Shopify y, de hecho, integro los dos para maximizar la comunicación con el cliente. ActiveCampaign permite a los usuarios ejecutar muchas pruebas A/B para que puedan ver qué pasa con su público objetivo. Cuando llegaron los resultados, tuve que admitir que estaba equivocado porque los correos electrónicos con un emoji en el asunto recibieron una tasa de apertura un 25 % más alta. Es seguro decir que he sido bastante liberal con mi teclado emoji desde entonces, y también he notado un aumento en las tasas de conversión .

Stephanie Venn-Watson, gorda15

Pruebas A/B en Redes Sociales

Al igual que los anuncios pagados, puede probar su contenido orgánico en las redes sociales para mejorar la participación. El encabezado, el texto, las imágenes y el CTA pueden someterse a pruebas A/B.

Al hacer esto manualmente, escalone la publicación de sus publicaciones para tener un espacio razonable que le permita recopilar datos significativos.

O puede usar herramientas de programación como Later, Buffer o MeetEdgar para automatizar la publicación.

Errores de las pruebas A/B de comercio electrónico que se deben evitar

Nuestra necesidad de gratificación instantánea también se filtra en las pruebas A/B. Jon Ivanco, cofundador de Formtoro, cree que la mayoría de las pruebas A/B son reaccionarias:

Las marcas quieren una solución rápida que sea rentable; odian la idea de invertir en perspectivas y ganancias a largo plazo. La única vez que miran estas cosas es cuando las cosas no van bien .

Hay "expertos" que son cualquier cosa menos expertos, malos consejos presentados como mejores prácticas y experimentos diseñados para recoger la fruta madura.

En cambio, Ivanco recomienda hacer lo básico correctamente:

– Todas las pruebas a las páginas de aterrizaje
– Todas las pruebas de audiencias específicas
– Probar una variable a la vez
– No pruebe a menos que tenga una hipótesis claramente articulada y pueda aprender si algo sale bien o falla.
– Hacer todas las pruebas desde la perspectiva del recorrido del cliente
– Las cosas pequeñas son parte de una cadena más grande, trate de aislar las cosas tanto como pueda paso a paso

Piense en la privacidad

Nadie quiere convertirse en una rata de laboratorio sin darse cuenta.

La reacción violenta al estudio de contagio emocional de Facebook 2014 es una prueba. Incluso las actualizaciones de privacidad de Apple indican que los usuarios se preocupan por su privacidad y no quieren ser manipulados para comprar productos.

Las leyes sobre privacidad, existentes y futuras, seguirán evolucionando. Cada vez que se produzca un cambio significativo, dañará su negocio a menos que comience a pensar primero en el usuario e incorpore pruebas A/B éticas en su estrategia.

Entonces, ¿Qué significa eso para ti?

  • Tome en serio la privacidad de los datos cuando recopile datos
  • Descartar tácticas manipuladoras
  • Almacenar y procesar datos de forma segura
  • Respete el consentimiento del usuario y permítale optar por no participar en los experimentos.

Haga eso y preparará sus pruebas A/B para el futuro y construirá una mejor relación con su audiencia.

Shopify
comprar