Asegúrese de que sus pruebas A/B sean infalibles con Quality Assurance: la guía completa para el control de calidad de sus pruebas A/B

Publicado: 2022-04-05
Asegúrese de que sus pruebas A:B sean infalibles con control de calidad

Las pruebas A/B que no funcionan correctamente no convierten.

Una prueba A/B puede consumir una cantidad significativa de tiempo, dinero y recursos para los optimizadores. Y, por supuesto, nadie quiere que su arduo trabajo se desperdicie. Esta es la razón por la que debe realizar el control de calidad (QA) en los sitios web, las páginas de destino, las personalizaciones, las pruebas A/B, las campañas de correo electrónico, etc., para asegurarse de que todo funcione como debería .

Y la mejor manera de crear pruebas A/B simples, fáciles de usar, intuitivas, sin errores y eficientes es adoptar un proceso de control de calidad adecuado . De esta manera, los visitantes reciben un producto final valioso, confiable y altamente interactivo.

El control de calidad es la clave para la prevención de desastres. Su capacidad para descubrir defectos y vulnerabilidades antes de que se vuelvan críticos ayuda a los optimizadores a evitar altos costos a medida que avanzan las pruebas.

Si bien es bien sabido que la garantía de calidad es importante, muchos optimizadores realmente no se toman el tiempo para realizar el control de calidad de sus pruebas correctamente. Como resultado, estas pruebas a menudo fallan. Habría menos sitios web que "no funcionaran" si lo hicieran.

ocultar
  • ¿Qué es la garantía de calidad?
    • ¿Qué es la calidad?
    • ¿Qué es la seguridad?
    • Garantía de calidad en pruebas A/B
  • Pruebas de usuario frente a control de calidad
  • ¿Por qué es importante el control de calidad en las pruebas A/B?
    • Los optimizadores y desarrolladores están demasiado cerca de las pruebas A/B
    • Los emuladores no son el verdadero negocio
    • Interacciones
    • Puntos de interrupción y cambio del modo de visualización del dispositivo
    • Pruebas desde una perspectiva humana
  • ¿Qué sucede si no realiza las pruebas A/B de control de calidad?
    • Retrasos en el lanzamiento de pruebas A/B
    • Errores en los resultados del informe
    • Mala compatibilidad
    • Frustración del cliente y pérdida de reputación
    • Falta de confianza en la herramienta de prueba A/B
    • El negocio sufre por la pérdida de ventas
  • 4 mejores prácticas para las pruebas A/B de control de calidad
    • 1. Desarrollar una estrategia de control de calidad
    • 2. Identificar qué QA en una prueba A/B
      • Elementos en la página
      • Integraciones con herramientas de terceros
      • Parpadeando o Parpadeando
      • Entre navegadores y entre dispositivos
    • 3. Centrarse en la experiencia de la página
    • 4. Alinee el control de calidad con sus objetivos de conversión
  • Por qué el control de calidad no se realiza correctamente
    • Restricciones de tiempo
    • Códigos de seguimiento mal implementados
    • Sin hipótesis claras
    • Tamaño de muestra inadecuado
  • Cómo Convert supera los desafíos típicos de control de calidad
    • El depurador de conversión de Google Chrome
    • Vista previa de las URL de variación
    • Forzar URL de variación
    • Uso de parámetros de consulta en audiencias de control de calidad
    • Registros en vivo
  • ¡Mira hacia adelante, siempre!

¿Qué es la garantía de calidad?

Primero saquemos algunas definiciones rápidas.

¿Qué es la calidad?

La calidad se traduce como “adecuado para el uso o propósito”. En el contexto de la funcionalidad, el diseño, la confiabilidad, la durabilidad y el precio de las pruebas A/B, se trata de satisfacer los deseos y expectativas de los clientes.

¿Qué es la seguridad?

La seguridad es simplemente una declaración positiva sobre una prueba A/B que infunde confianza. Es la certeza de que una prueba A/B funcionará correctamente y de acuerdo con las expectativas o requisitos.

Garantía de calidad en pruebas A/B

En pocas palabras, el control de calidad es una técnica para determinar la calidad de una prueba A/B . Reúne a los optimizadores y desarrolladores para garantizar que todo se vea y funcione correctamente en todos los dispositivos y navegadores relevantes.

En otras palabras, un sitio web (o página de destino, variación, campaña de correo electrónico, etc.) debe ser de alta calidad para evitar exponer a los visitantes a fricciones y otros puntos débiles.

Pruebas de usuario frente a control de calidad

Las pruebas de usuario analizan cómo un usuario realmente experimenta un sitio web, mientras que el control de calidad se centra más en el diseño real del sitio web.

Pruebas de usuario:

  • Examina cómo las personas reales usan un sitio web y cómo esto difiere de lo que pretendían los desarrolladores.
  • Detecte los posibles malentendidos de los visitantes y los puntos de fricción en un entorno de uso del mundo real.

Seguro de calidad:

  • Errores de superficies y elementos rotos en el sitio web
  • Mejora el rendimiento del sitio

Entonces, son diferentes, siendo QA un término mucho más amplio.

Control de calidad frente a pruebas
Cómo se ve el control de calidad frente a las pruebas

¿Por qué es importante el control de calidad en las pruebas A/B?

Claro, algunos errores aquí y allá son irritantes .

Pero, al final del día, ¿tienen un impacto en el resultado final? ¿Vale la pena invertir más recursos en el control de calidad? ¿Qué diferencia hay si las cosas no son perfectas?

Aunque hemos superado obstáculos considerables en el aseguramiento de la calidad, muchas organizaciones continúan subvalorándolo.

Averigüemos los mayores riesgos que afectan al control de calidad y por qué juega un papel tan importante en las pruebas A/B.

Los optimizadores y desarrolladores están demasiado cerca de las pruebas A/B

Los optimizadores y los desarrolladores suelen trabajar juntos para configurar pruebas A/B. Son tan cercanos que es fácil pasar por alto aspectos menores pero cruciales cuando están a cargo del control de calidad.

Sin embargo, los evaluadores de control de calidad se aseguran de que se preste atención a la calidad. Realizan funciones no obvias que impulsan una aplicación de "maneras inesperadas", a menudo nunca intencionadas. Los probadores de control de calidad se niegan a aceptar que "los errores se han corregido" a menos que tengan pruebas. No tienen miedo de probar cosas nuevas y fracasar. Si no encuentran un error la primera vez, se vuelven más creativos con las pruebas y lo alinean con los estándares esperados.

Un segundo par de ojos en las pruebas A/B y su diseño pueden descubrir fallas inesperadas.

Los emuladores no son el verdadero negocio

Los usuarios finales no usan un emulador; en cambio, un dispositivo real con un navegador. Es totalmente posible pasar por alto problemas específicos del navegador si no los investiga en dispositivos o navegadores reales.

Hemos visto muchos casos de soporte en los que los usuarios están bastante seguros de que su experimento A/B funciona bien en BrowserStack (simulando cómo se ve una prueba A/B en diferentes navegadores). Pero cuando lanzan la prueba para visitantes reales, se comunican con nuestros agentes de soporte para informar el mal funcionamiento de la prueba A/B.

Caso de soporte real:

Tengo un problema con una conversión en mi proyecto.

Click_Cart_Checkout_1 no parecerá activarse en iPhone XR/Safari. Revisé la consola de herramientas de desarrollo en ambos (chrome: // inspeccionar y vincular un iPhone a una macbook), y puedo ver el código ejecutándose para esa conversión, pero no está rastreando en el informe.

La conversión se rastrea cuando se usa XR para emular un iPhone en herramientas de desarrollo, pero no en pruebas del mundo real.

Hemos probado en dos iPhone separados. Nuestro probador de control de calidad y el mío.

Es posible que no pueda probar si la configuración de sus métricas es correcta a menos que realice un control de calidad manual en todos los navegadores. Después de unas pocas semanas, es posible que incluso verifique sus resultados y descubra que su acción principal no se activa correctamente o no se activa en absoluto en algunos navegadores.

Así que asegúrese de realizar el control de calidad de sus pruebas en diferentes entornos, no solo en emuladores.

Interacciones

También puede pasar por alto los errores vinculados a las interacciones de página o variación si no examina las variaciones manualmente . Esto puede generar problemas simples, como dificultad para abrir un acordeón, presionar un botón o algo significativo que afecte todo el embudo.

Caso de soporte real:

En la página de variación, tenemos problemas con el botón Pagar y, a veces, enfrentamos problemas con el botón de PayPal, aunque en la página original todo funciona bien.

Cuando hago clic en el botón de pago, me redirige aquí: cart.php/checkout.php pero debería ser /checkout.php

También tenemos problemas con el Logo; a veces se muestra, a veces no.

Las pruebas A/B no se tratan solo de agregar nuevos elementos a las variaciones de la página y cómo estos elementos interactúan entre sí y cómo mejoran la funcionalidad general del sitio.

Puntos de interrupción y cambio del modo de visualización del dispositivo

Si usa emuladores, es posible que pase por alto problemas al cambiar el modo del dispositivo de vertical a horizontal o viceversa. Puede verificar rápidamente si la variación se muestra correctamente en ambos modos y si el usuario está cambiando entre los dos asegurando la calidad de las variaciones en dispositivos móviles o tabletas reales.

Caso de soporte real:

Estábamos ejecutando una prueba multivariada en nuestro proyecto y el cliente notó que las imágenes se mostraban incorrectamente en el modo horizontal móvil. ¿Puedo obtener su ayuda para averiguar por qué?

Pruebas desde una perspectiva humana

Solo el control de calidad manual realizado por un ser humano puede decir cuándo algo parece "extraño". Los métodos de prueba automatizados no detectan estos defectos visuales. Un ingeniero de control de calidad puede encontrar problemas de usabilidad y fallas en la interfaz de usuario (UI) al interactuar con un sitio web como si fuera un usuario. Los scripts de prueba automatizados no pueden probarlos.

¿Qué sucede si no realiza las pruebas A/B de control de calidad?

Ahora que está claro que el control de calidad puede significar la diferencia entre el éxito o el fracaso empresarial, veamos qué sucede si lo ignora (pista: no es bonito) .

Retrasos en el lanzamiento de pruebas A/B

Para garantizar el éxito de una prueba A/B, es crucial reservar suficiente tiempo para el control de calidad de antemano. Esto incluye garantizar que todos los elementos web o de la aplicación funcionen correctamente y satisfagan las necesidades comerciales y de los clientes. El control de calidad ayuda a identificar y solucionar problemas antes de comenzar las pruebas para evitar retrasos en el lanzamiento.

Errores en los resultados del informe

Sin control de calidad, surgen errores de variación y pueden causar errores estadísticos en los resultados del informe.

Un resultado falso positivo (también conocido como error Tipo I ) ocurre cuando los resultados de la prueba muestran una diferencia significativa entre el original y la variación cuando no hay ninguna. Otro error es un falso negativo (también conocido como error de tipo II ) cuando los resultados no muestran una diferencia significativa entre la variación y el original, pero hay una.

Sin un control de calidad adecuado, es posible que no pueda determinar con precisión los resultados de su prueba A/B. Esto puede conducir a conclusiones incorrectas sobre el rendimiento de su empresa y las posibles optimizaciones. ¿A qué otras estadísticas afecta la falta de control de calidad?

Mala compatibilidad

Sus visitantes acceden a sus servicios desde varias ubicaciones y navegadores.

Compatibilidad con dispositivos e idiomas en los que deberías pensar y probar, si es posible. Es su responsabilidad asegurarse de que su aplicación funcione en diferentes navegadores, especialmente en todas las versiones.

Frustración del cliente y pérdida de reputación

¿Sabías que es más probable que los consumidores insatisfechos dejen una reseña pública que los clientes satisfechos?

Las quejas en línea y fuera de línea, así como el abandono de productos, son malas noticias para su negocio. Debido a la información negativa, otros compradores potenciales dudan en comprar el producto. Unos pocos clientes descontentos (y abiertos) pueden significar una menor confianza en su marca. Si los consumidores publican una reseña negativa en línea, su insatisfacción puede afectar futuras compras.

Falta de confianza en la herramienta de prueba A/B

La única razón por la que las marcas invierten en una solución de prueba A/B en primer lugar es para tomar decisiones informadas y brindar a sus visitantes la mejor experiencia en línea posible. No puede contar con que sus esfuerzos de optimización se traduzcan en beneficios significativos si no puede confiar en su solución de pruebas A/B.

Al asegurarse de que todas las pruebas A/B tengan garantía de calidad, sabrá que los datos se recopilan correctamente y que sus esfuerzos de optimización brindan beneficios reales a sus visitantes .

Los problemas técnicos en las pruebas A/B son críticos porque presentan riesgos significativos para las marcas, incluida la pérdida de datos, informes distorsionados y toma de decisiones sesgada. También tienen graves consecuencias financieras. Las marcas deben confiar plenamente en su solución, ya que es una herramienta de decisión que impacta directamente en el aumento de las tasas de conversión, las ventas y los ingresos.

El negocio sufre por la pérdida de ventas

Solo tienes una oportunidad para causar una primera impresión. Es cierto en muchos sentidos, y si no se toma el tiempo necesario para realizar el control de calidad, es posible que esté dejando dinero sobre la mesa.

Cosas aparentemente pequeñas como evitar el progreso de pago o no mostrar CTA pueden hacer que sus clientes abandonen su tienda. Necesita probar todo esto para enriquecer la experiencia del cliente .

La clave para el éxito y la felicidad del cliente es entregar un producto de alta calidad. Los clientes satisfechos regresan e incluso pueden recomendar a otros.

4 mejores prácticas para las pruebas A/B de control de calidad

Si ha leído hasta este punto, significa que comprende el valor de la garantía de calidad y desea obtener más información al respecto. Pero, ¿qué partes de una prueba A/B puede realizar el control de calidad? ¿Y cuáles son las mejores prácticas a seguir?

Aquí hay algunas maneras de empezar.

1. Desarrollar una estrategia de control de calidad

Antes de realizar el control de calidad de sus pruebas A/B, cree una estrategia o establezca un proceso estructurado. Debe tener un objetivo claro y estándares de calidad específicos para medir el control de calidad.

Además, discuta los puntos débiles con sus equipos de desarrollo y optimización. Reúna a todos los involucrados en la misma página considerando diferentes perspectivas y estableciendo objetivos y estándares compartidos.

Su estrategia de control de calidad también debe alinearse con sus objetivos de conversión . Si el tiempo y los recursos que dedica a la garantía de calidad no contribuyen en última instancia a las conversiones, es posible que deba repensar todo el proceso.

Una lista pequeña que quiere exactamente lo que ofreces es mejor que una lista más grande que no está comprometida.

S. Ramsay Leimenstoll, asesor de inversiones y planificador financiero de Bell Investment

¿Qué se necesita normalmente para crear una estrategia práctica?

  • Sentar las bases y asignar roles
  • Saber exactamente qué QA
  • Previsión de problemas que pueden surgir y formas de solucionarlos
  • Listado de variaciones
  • Identificar a quién está destinado el control de calidad (grupo de usuarios objetivo)
  • Establecimiento de estándares para el control de calidad

2. Identificar qué QA en una prueba A/B

Asegurar la calidad de una prueba A/B puede ser bastante tedioso y complejo si no sabe qué y cómo prepararse para un control de calidad. Estos son algunos de los aspectos más críticos a considerar.

Elementos en la página

Los elementos en la página son la carne de una prueba A/B. Debido a que están orientados al cliente y afectan directamente la velocidad de la página y la experiencia del usuario, debe evaluar su calidad constantemente. Antes de comenzar, prepare una lista de todos los elementos para el control de calidad. Esto debería ser una parte más importante de su estrategia de control de calidad para realizar auditorías exitosas, reducir el tiempo de respuesta e identificar y corregir las debilidades y problemas evidentes del sitio.

Algunas áreas críticas en las que debe centrarse:

  • Velocidad de la página y capacidad de respuesta: estos son fácilmente los más esenciales y los que se pasan por alto en un control de calidad. Muchos factores dinámicos del sitio influyen en el rendimiento y la capacidad de respuesta de la página. Y si bien puede evaluar estos factores para funcionalidades individuales, ver si hacen que su sitio sea lento y cómo pueden significar toda la diferencia. Debe crear una imagen más amplia y explorar todas las posibilidades de un diseño receptivo, teniendo en cuenta tanto el rendimiento de su sitio como la experiencia del cliente.
  • Tipo de dispositivo: las resoluciones de pantalla difieren según el dispositivo desde el que se accede a una página. Esto es extremadamente importante cuando se realizan pruebas para una audiencia móvil donde las resoluciones tienen un gran impacto en el comportamiento del usuario. Para habilitar una experiencia de calidad, debe identificar qué dispositivo utilizan sus consumidores. Realice un seguimiento de los patrones y control de calidad de sus elementos de prueba (para esos dispositivos) en consecuencia.
  • Gráficos y elementos visuales: todos los elementos gráficos y visuales de la página deben someterse a control de calidad, lo que afecta el rendimiento de la página y el tiempo de carga. Idealmente, debe comprender cómo usar imágenes en sus pruebas A/B. Cualquier imagen que use debe sincronizarse con la estructura y el diseño de su sitio y cargarse correctamente en diferentes dispositivos.
  • Básicamente todo: ¿Funcionan bien los formularios en la página? ¿Algún cambio en ellos afectó la calidad del sitio? ¿Cómo se ve lo antiguo frente a lo nuevo? Podemos analizar cientos de elementos para el control de calidad en un sitio, pero aun así no entender el punto. Es por eso que debe conocer cada pequeño detalle que necesita validación y prueba. ¿Y cómo haces eso? Al verificar y asegurar constantemente los resultados que traen sus cambios.

Integraciones con herramientas de terceros

Si configuró una integración de Google Analytics (o cualquier otra interfaz de terceros, como Google Analytics, Mixpanel o Kissmetrics) para enviar datos específicos de variación entre plataformas, asegúrese de que los datos fluyan sin problemas y con precisión.

Parpadeando o Parpadeando

Elimine cualquier parpadeo antes de hacer la prueba en vivo.

Si utiliza un fragmento de código asíncrono en su sitio, es posible que vea el original antes de que se cargue la variación. Para brindarles a sus visitantes una experiencia fluida en el sitio, cambie a un "sitio web síncrono". Por el corto tiempo de carga, el original está oculto y su visitante solo ve la variación

Descubra cómo Convert resolvió el efecto de parpadeo.

Entre navegadores y entre dispositivos

Uno de los problemas más comunes con las pruebas A/B es la "compatibilidad de navegadores y dispositivos". Examine cómo aparece la variación en los navegadores más populares, incluidos Chrome, Safari, Firefox, Edge y tipos de dispositivos, computadoras de escritorio, tabletas y dispositivos móviles.

El hecho de que su sitio sea receptivo no significa que se mostrará y funcionará correctamente en todos los dispositivos. Aún debe realizar el control de calidad teniendo en cuenta los problemas específicos de los dispositivos móviles . Recuerda que no es lo mismo una buena “experiencia de escritorio” que una buena “experiencia móvil”.

Todavía debe llevar a cabo el control de calidad. También debe considerar los problemas específicos de los dispositivos móviles. Recuerda que una buena experiencia de escritorio no es lo mismo que una buena experiencia móvil.

Talia Wolf, consultora de optimización de conversiones de GetUplift, resume bastante bien los problemas entre dispositivos y ofrece algunas posibles soluciones:

Cita de Talia Wolf sobre la experiencia móvil

La visión de Talia sobre la usabilidad del dispositivo arroja luz sobre más que los aspectos habituales de la experiencia del dispositivo, centrándose esencialmente en áreas que permiten una navegación fácil y un manejo sencillo. Debe ir más allá y considerar las capacidades de los dispositivos existentes y futuros para ofrecer la calidad adecuada.

3. Centrarse en la experiencia de la página

¿Para qué estás haciendo todos los esfuerzos si en última instancia no mejoran la experiencia de la página? La funcionalidad de una página afecta significativamente la experiencia de la página y debe someterse a un control de calidad de inmediato.

  • Interacción del usuario: Comience analizando cómo interactúa un usuario con una página. Enumere diferentes puntos de contacto de interacción y clasifíquelos en función de su tecnicismo. Asegúrate de revisar el más mínimo detalle. ¿Se puede hacer clic en todo y se puede redirigir correctamente? ¿Cómo se ve el cursor de navegación? ¿Hay fallas en la página o disparadores de rebote?
  • Tiempo de carga de la página: antes de ejecutar una prueba A/B y justo después de iniciarla, verifique el tiempo de carga de su página. Cualquier diferencia en el tiempo de carga de la página suele ser insignificante, pero vuelva a comprobar los cambios de variación si observa un aumento significativo. Esto puede deberse a que los cambios que realizó en la variación tardaron mucho en cargarse o a la velocidad del fragmento de código de seguimiento.

Vale la pena señalar que el tiempo de carga es más largo de lo habitual cuando se realiza el control de calidad con una herramienta de prueba, una representación inexacta del tiempo de carga real de la página.

Sugerencia: el script de seguimiento de Convert agrega alrededor de 450 ms de tiempo de carga adicional para llegar a la primera página de los sitios web en los que está instalado. Captura las cargas subsiguientes en el nivel del navegador o en el nivel de borde de CDN.

Además, la vista previa de la prueba en diferentes variaciones garantiza que se cargue correctamente y produzca los resultados esperados.

4. Alinee el control de calidad con sus objetivos de conversión

Las pruebas A/B son precursoras de las conversiones. Si sus pruebas finalmente no se alinean con sus objetivos de conversión y prueba A/B, se encontrará a largo plazo y corre el riesgo de agotar los recursos existentes.

El mejor diseño no es el que solo hace que su empresa se vea genial, vanguardista y sofisticada. Es el diseño que admite la conversión, tiene espacio para una copia genial y potencia las llamadas a la acción que hacen que las personas hagan clic en el gran botón naranja.

Brian Massey, científico de conversión en Conversion Sciences

Si las palabras de Brian son válidas, todos los elementos discutidos anteriormente no solo deberían mover a sus visitantes hacia abajo en el embudo de conversión, sino también generar conversiones . Solo puede probar y probar y volver a probar mientras tenga el tiempo, las personas y el presupuesto. Esto requiere optimizar todas estas áreas de una manera que impacte en sus resultados y mantenga su negocio en funcionamiento.

Aquí hay un caso de uso:

Si ejecuta selectores de CSS en su consola, puede ver si los elementos producidos son lo que está buscando. Si algo se desvía, verifique si las expresiones regulares no fueron lo suficientemente estrechas. Para estar seguro, tome un puñado de URL de sitios web y ejecútelos con una herramienta como RegEx Pal. Esto se aplica tanto a la ejecución de sus pruebas como al seguimiento de las conversiones. ¿Puede verificar aún más si está ejecutando su prueba en páginas que no están diseñadas para ello?

Todo esto puede parecer mucho, pero el proceso debería ser similar a las pruebas exhaustivas que haría al lanzar un nuevo sitio web/aplicación, lo que puede llevar días y mucho esfuerzo.

Por qué el control de calidad no se realiza correctamente

Los siguientes factores contribuyen a que sus pruebas A/B no se controlen adecuadamente.

Restricciones de tiempo

Los equipos de desarrollo están bajo una presión constante para mantener un ritmo alto de pruebas divididas para lograr un crecimiento más rápido. Sin embargo, es más probable que las pruebas A/B se implementen incorrectamente bajo tal carga.

Códigos de seguimiento mal implementados

Este es un error simple de cometer, pero que puede tener enormes consecuencias. Cuando implementa códigos de seguimiento de forma incorrecta o los olvida por completo, los datos de una prueba A/B se vuelven inútiles porque no habrá forma de saber qué variante fue mejor para convertir visitantes en clientes potenciales y clientes.

Sin hipótesis claras

Las nuevas hipótesis se prueban con su página original en pruebas A/B, nada más y nada menos . Y necesitan ser delineados y definidos adecuadamente.

Por ejemplo, es posible que desee ver si incluir una cita de un director ejecutivo aumenta o disminuye la tasa de conversión de una página de destino. La hipótesis nula establece que la cotización integrada no tiene un impacto significativo en la tasa de conversión. Puede desarrollar una hipótesis dirigida: incluir la cotización da como resultado una tasa de conversión mucho más alta .

¿Está bien formulada su hipótesis? Obtenga grandes aumentos de conversión con el generador de hipótesis de Convert.

Tamaño de muestra inadecuado

Este puede ser el caso de pequeñas tiendas en línea y sitios web donde las pruebas no son útiles o apropiadas. Debido al pequeño tamaño de la muestra, los resultados son propensos a una gran volatilidad y distorsiones.

Cuanto más “pequeña” sea la muestra, más “mayor” será la probabilidad de inexactitud en la estimación.

Las muestras excesivamente grandes también pueden ser una preocupación. Incluso las diferencias medias menores se vuelven significativas en muestras grandes cuando se utilizan datos escalados por intervalos, como la medición de la duración de la estadía. Calcular el tamaño del efecto y el tamaño de muestra ideal puede ayudarte a resolver este desafío.

Sugerencia: utilice nuestra calculadora de significación de pruebas A/B en línea para planificar sus pruebas.

Cómo Convert supera los desafíos típicos de control de calidad

Cualquier empresa que introduzca la experimentación en su estrategia de marketing digital debe incorporar medidas de control de calidad en sus flujos de trabajo operativos , como certificar integraciones y obtener una vista previa de las experiencias antes de lanzarlas.

En Convert, integramos las muchas piezas de un rompecabezas para crear una estrategia personalizada de la forma más sencilla posible . Hemos ayudado a cientos de empresas a mejorar su capacidad para crear, probar, revisar y lanzar experiencias con nuestras diversas herramientas y recursos.

Permítanos mostrarle qué son y cómo pueden ser una solución completa para todos sus problemas de control de calidad.

El depurador de conversión de Google Chrome

Nuestra extensión de Google Chrome genera "Convertir registros de secuencias de comandos" en la consola de herramientas para desarrolladores de Chrome. Incluye experimentos y ciertas variaciones activadas. Esta herramienta le permite determinar la secuencia de eventos de prueba y proporciona información valiosa al depurar una prueba.

Recuerde: use este depurador durante todo el proceso de control de calidad para decidir si está incluido en el experimento y observar las variaciones.

Obtén más información sobre cómo instalar la extensión Chrome Debugger para Convert Experiences.

Líneas del depurador de la consola desde la extensión Convert
Líneas del depurador de consola generadas por la extensión Convert

Es común quedarse con la variación original y asumir erróneamente que el experimento no está funcionando. Recomendamos habilitar la extensión y realizar el control de calidad en sesiones de incógnito para solucionar este problema. Todas las referencias de variaciones y experimentos en la salida del depurador se realizan con los ID correspondientes.

Descubra cómo determinar los ID de experimentos y variaciones.

Vista previa de las URL de variación

Estas direcciones URL admiten el desarrollo o la redacción de una experiencia con el editor visual . Mientras está en funcionamiento, el probador de control de calidad del experimento debe alternar entre estas URL y la vista del editor visual. Es posible que la vista no sea del todo precisa, ya que la ventana de edición solo tiene un marco. Además, el código que realiza cambios en el editor se ejecuta repetidamente para una mejor experiencia de usuario .

Editor visual de URL de vista previa en vivo
URL de vista previa en vivo a la que se accede a través del editor visual
Panel de informes de URL de vista previa en vivo
URL de vista previa en vivo a la que se accede a través del panel de informes

Tenga en cuenta algunas cosas al obtener una vista previa de las URL de variación:

  • Las condiciones del área del sitio y de la audiencia no se tienen en cuenta al obtener una vista previa con la "URL de vista previa en vivo".
  • Los cambios se realizan en la URL de la página donde se agregan los parámetros. Esto es para probar fácilmente diferentes vistas.

La vista previa de una campaña y la realización del proceso de control de calidad son bastante diferentes.

La vista previa de una campaña no reemplaza un proceso de control de calidad real, ya que el "modo de vista previa" obliga a que se muestren los cambios para generar una vista previa y no le permite verificar el seguimiento de clics o la orientación.

Forzar URL de variación

Las URL de variación forzada le ofrecen una perspectiva de prueba inequívoca. Con estos, prueba su experimento en un entorno similar al de un visitante.

Recuerde: debe usar estas URL para la prueba final de su experimento.

Forzar URL de variación a través del editor visual
Forzar URL de variación a la que se accede a través del editor visual

Las variaciones publicadas con esta URL se publican desde el servidor CDN utilizado para publicar los experimentos.

Las variaciones publicadas con esta URL se publican desde el servidor CDN.

Cuando se usa una URL de variación forzada, se evalúan las condiciones de prueba, así que asegúrese de que coincidan. Además, recuerde que las configuraciones de objetivos a menudo incluyen condiciones de URL. Esta podría ser la razón por la que sus objetivos no se activan con una URL de variación forzada.

¿Tiene dificultades para dar formato a las URL de variación? Aquí hay algunos consejos útiles.

Uso de parámetros de consulta en audiencias de control de calidad

Puede limitar los visitantes que ven su experimento al agregarle una audiencia de control de calidad.

Si agrega parámetros de consulta de control de calidad a la URL del experimento, puede agrupar aún más esta audiencia.

https://www.dominio.com/mipagina.html?utm_medium=qa

Para crear una "Nueva audiencia", puede usar una condición como:

Medio: Coincide exactamente con qa

Convertir nueva vista de audiencia
Nueva vista de audiencia

La audiencia de control de calidad le permite "Activar" y verificar una prueba sin agrupar a los visitantes en ella.

  • Primero, asigne un grupo objetivo a su experimento.
  • Abra una nueva ventana de incógnito en su navegador para probar.
  • No abras una segunda pestaña y asegúrate de que no haya otras ventanas de incógnito abiertas.
  • Cierre la ventana cuando haya terminado con la prueba actual y abra una nueva ventana para cada nueva prueba.

Antes de visitar el sitio, agregue lo siguiente al final de su URL:

?utm_medium=qa (reemplace qa con el valor que eligió cuando creó la audiencia).

La mayoría de las veces visita la URL que coincide con las condiciones del "Área del sitio". Dependiendo de la estructura de su experimento, en algunos casos, primero puede visitar una página diferente y luego navegar al Área del sitio que activa la ejecución del experimento. En cualquier caso, asegúrese de agregar el parámetro de consulta a la primera URL que visite . Este parámetro se guarda incluso si navega a otras páginas.

Por ejemplo, si la URL es "http://www.mysite.com", debe visitar:

http://www.misitio.com?utm_medium=qa

Si sigue las instrucciones anteriores, puede ver cada variación del experimento, ya que se elige al azar. Además, si aún no comenzó con la URL que coincide con las condiciones del Área del sitio, puede visitar la que sí lo hace. Luego debería ver el "Original" o una de las variaciones, según lo que seleccione aleatoriamente el experimento.

Recuerde: agregar una audiencia de control de calidad puede afectar su capacidad para hacer coincidir las condiciones del área del sitio y la URL de destino.

Registros en vivo

Live Logs en Convert Experiences rastrea cómo los usuarios finales interactúan con las páginas web y los experimentos a nivel de proyecto y experimento en tiempo real. Capturan información como la marca de tiempo cuando se dispara un objetivo, el tipo de evento disparado, la variación presentada al usuario final y más.

Para ver los registros en vivo de un proyecto específico, puede navegar a Proyectos > Registros en vivo en el panel superior.

Vista de registro en vivo en Convert Dashboard
Vista de registros en vivo en el panel Convert

Aquí puede hacer clic en cualquier parte de la fila para ver más detalles de la actividad, como el nombre del experimento, el tipo de navegador, el dispositivo utilizado para acceder al experimento, el país del usuario, los objetivos activados durante una visita, etc.

Vista de registro en vivo individual en el tablero de conversión
Vista de registro en vivo individual en Convert Dashboard

Con Live Logs, puede realizar un seguimiento y controlar cómo se producen las conversiones. También le facilitan la validación de su configuración y la depuración de cualquier problema encontrado durante la configuración de prueba o las conversiones. Live Logs también actúa como una fuente para ayudarlo a realizar un seguimiento de los ingresos y validar el experimento y los objetivos establecidos.

¡Mira hacia adelante, siempre!

Las pruebas de control de calidad A/B son esenciales para garantizar que su sitio web sea completamente funcional y libre de errores. El control de calidad no solo ayuda a resolver los problemas actuales, sino que también sienta las bases para prevenir problemas futuros.

Sin embargo, armar un proceso de control de calidad puede ser difícil. Con tantos usuarios potenciales en muchos dispositivos con diferentes objetivos y ambiciones, es difícil saber por dónde empezar y qué preguntas hacer.

Encuestamos a la comunidad de optimización de la tasa de conversión sobre la importancia del control de calidad.

La respuesta fue inequívoca.

El procedimiento de control de calidad es importante para el éxito de un experimento, según el 100 % de los encuestados.

Hemos combinado las mejores prácticas de control de calidad de toda la industria con los conocimientos de las agencias asociadas certificadas de Convert para crear una lista de verificación integral que usará una y otra vez.

La lista de verificación anterior no pretende ser una lista completa de todo lo que debe verificar, sino más bien un punto de partida para pensar en lo que debe hacerse antes de iniciar sus pruebas A/B. Es importante recordar que el control de calidad es un viaje, no un objetivo, y que debe realizarse con regularidad y durante los cambios importantes.

Prueba gratis
Prueba gratis