Cómo elegir una herramienta de prueba A/B en 2023

Publicado: 2022-07-19
Cómo elegir una herramienta de prueba A:B en 2023

¿Sabía que hay más de 50 herramientas de prueba A/B en el mercado?

Sí, tantos.

Con tantas opciones disponibles, ¿cómo sabe cuál se adaptará a sus necesidades en 2023?

No necesita romper el banco o ir con el líder de la categoría si desea satisfacer sus necesidades de prueba. Considere qué tipo de desafíos de optimización enfrenta regularmente: el mejor software de prueba A/B para usted debe coincidir con sus necesidades y presupuesto.

¿Cómo reduce 'el uno' de todas las herramientas en el mercado?

En esta publicación de blog, describiremos los factores que debe considerar al tomar su decisión y compartiremos nuestras mejores opciones para las mejores herramientas de prueba A/B de 2023.

¡Vamos a ayudarte!

ocultar
  • Resumen rápido: comprensión del rompecabezas de optimización
  • ¿Tiene suficiente tráfico para probar?
  • Comience con el problema
    • Determine por qué compró la herramienta de prueba A/B existente
    • ¿Dónde estaba su programa cuando comenzó?
    • ¿Qué métricas de guardarraíl esperaba mover con la adquisición de la herramienta?
    • ¿Terminaste logrando tus metas?
  • Pregunte a las personas adecuadas
    • Lo que dicen los compradores B2B sobre las herramientas de compra: aquí es donde comienzan
    • Lo que recomendamos
      • Pregunte a las personas de su red que realizan pruebas con regularidad
      • Use BuiltWith para buscar otras marcas en su espacio
      • Toque su equipo
  • Cree su conjunto de consideración
    • Llenando los huecos
  • Hacer contacto con la herramienta
    • Comience una prueba gratuita y reserve una demostración
    • Medir la cultura
    • Solicite la información que le falta
  • Equipo previo a la compra
  • Una práctica lista de verificación de factores a tener en cuenta al migrar
    • 1. ¿Qué nivel de atención al cliente proporciona la herramienta de prueba A/B?
    • 2. ¿La herramienta de prueba A/B afecta la velocidad de su sitio?
      • 1. Sincrónicamente
      • 2. Asíncronamente
  • 5 herramientas de prueba A/B que nos gustan
    • 1. Convierte Experiencias
    • 2. Camaleón
    • 3. AB Sabroso
    • 4. Optimizado
    • 5. Google Optimize (y Optimize 360)
  • Conclusiones clave

Pero primero…

Resumen rápido: comprensión del rompecabezas de optimización

Este informe sobre el estado de madurez de la experimentación identificó 4 pilares de la madurez de la experimentación. Estos son aspectos centrales de la experimentación que ayudaron a las organizaciones de diversas industrias a tener éxito en la experimentación mientras escalaban sus programas.

Es interesante lo que aprenderemos aquí. Esos pilares son

  1. Proceso y responsabilidad: Esto incluye el proceso de ideación y priorización, diseño de experimentos, cómo se mide el éxito, etc.
  2. Cultura: ¿Cuál es la actitud general de la organización hacia la experimentación? ¿Cuánto soporte C-suite está presente?
  3. Experiencia: tiempo, recursos y conjuntos de habilidades. Y finalmente…
  4. Herramientas y tecnología: la pila tecnológica que impulsa su experimentación.

Aunque esta investigación se realizó hace algunos años, los fundamentos permanecen sin cambios. Las herramientas son solo una pieza muy pequeña de su rompecabezas de optimización.

Si está leyendo esto para encontrar la mejor herramienta de prueba A/B que pueda llevar su programa de prueba de 0 a 100 o de aceptable a fantástico, entonces considere esto como una prueba de realidad.

Entonces, ¿cuál debería ser su enfoque principal?

Podría decirse que las personas y los procesos se llevan la palma cuando se trata del éxito de la experimentación. Las marcas y agencias en la cima de su juego de CRO se toman la capacitación muy en serio. Y tú también deberías:

Debe invertir en su equipo más que solo como una mejor práctica en las pruebas A/B; a menudo es una prioridad prescrita por expertos para las organizaciones que desean llevar su juego de optimización al siguiente nivel.

Esta capacitación va más allá de los tutoriales básicos de pruebas A/B y también incluye investigación, recopilación y análisis de datos, pensamiento crítico, diseño de experimentos, estadísticas, control de calidad, comunicación con las partes interesadas y mucho más.

Pongamos un alfiler en esta idea porque la retomaremos más adelante.

Un flujo de esta combinación educativa debe provenir de su proveedor de pruebas A/B. Eso es algo a tener en cuenta en la búsqueda de la herramienta adecuada para su equipo.

La herramienta adecuada proporcionará educación que corresponda a la comprensión de qué prácticas y marcos ofrecen la mayor eficiencia para la alta velocidad de prueba (que es un objetivo del programa que recomiendan muchas de las mejores mentes en experimentación, incluidos Ronny Kohavi y Lukas Vermeer) en el contexto de eso. plataforma de prueba particular.

Dado que las personas y los procesos hacen o deshacen su programa con un mayor grado de influencia que su elección de software de prueba A/B, una idea que está ganando popularidad en la industria es gastar tan solo el 20 % del presupuesto de optimización en herramientas y el descansar en la educación, el reclutamiento y Ops.

Por ejemplo, la agencia WeTeachCRO cree que el gasto en herramientas puede y debe ser muy inferior al 20 %:

La sabiduría convencional dice que no gaste más del 20 % de su presupuesto total de CRO en herramientas, dejando un 80 % libre para las personas; después de todo, las personas son las que marcarán la diferencia real en su programa, mientras que la herramienta es simplemente un habilitador. Pero dejando de lado esa "sabiduría", nuestra experiencia es que la mayoría de los clientes pueden (y deben) gastar mucho menos del 20%.

Para la mayoría de nuestros clientes, sus costos de herramientas son <£500 / mes con un costo de personal de 10-15x, lo que los coloca más en el rango de 5-10%. Comenzar con una herramienta gratuita como Google Optimize debería ayudarlo a despegar, con miras a graduarse a algo que cuesta unos cientos de libras por mes una vez que las complejidades de su prueba superen sus capacidades.

Extracto de 52 preguntas que todo CRO experimentado tuvo que hacer una vez por WeTeachCRO

Ahora que tenemos la mentalidad correcta, pasemos a la siguiente consideración crucial al comprar una herramienta de prueba A/B. Especialmente si esta es su primera compra de herramientas de prueba A/B.

De lo contrario, puede pasar a describir por qué necesita una nueva herramienta.

¿Tiene suficiente tráfico para probar?

Las pruebas A/B no funcionan para sitios web con poco tráfico. Antes de comenzar la prueba, su sitio web debe tener suficiente tráfico para enviar a cada variación de su prueba A/B. Sin el tráfico adecuado, sus experimentos no alcanzarán la significación estadística y pueden durar mucho tiempo.

En una prueba A/B típica, debe atraer a miles de visitantes a cada variación. En Convert, recomendamos enviar al menos 5000 visitantes a cada variación y alrededor de 1000 conversiones para producir resultados concluyentes sobre qué variante es la clara ganadora.

Dirígete a la calculadora de prueba A/B de Convert para averiguar cuánto tráfico, conversiones y pedido promedio por ingreso necesitas para ejecutar tu prueba A/B. En caso de que no tenga el tráfico necesario para la prueba A/B, diríjase a nuestra guía sobre pruebas con poco tráfico.

Una vez que haya resuelto el tráfico necesario para ejecutar con éxito una prueba A/B, describa lo que lo está impulsando a obtener una nueva herramienta de prueba A/B.

Comience con el problema

Averigüe exactamente por qué necesita una nueva herramienta de prueba A/B. Eso es evidente, pero es vital tener un enfoque estructurado para hacer esto. Así es cómo:

Determine por qué compró la herramienta de prueba A/B existente

Si ya tiene una herramienta de prueba en su pila, ¿qué lo llevó a ella?

Toma nota de esto. Es tu punto A y te ayudará a llegar al punto B, que es tu próxima herramienta ideal. Pero haremos algunas paradas en el camino.

Incluir elementos objetivos como las características de la plataforma. ¿Cuáles te atrajeron a ti y a tu equipo? ¿Cuáles te retuvieron como usuario? ¿Qué le gustó de este proveedor en particular?

No dudes en profundizar más. Es comprensible que haya un fuerte aspecto emocional en nuestro proceso de toma de decisiones, pero en aras de un programa de optimización sólido que avance, debe profundizar en su herramienta actual.

¿Dónde estaba su programa cuando comenzó?

¿Estabas comenzando en las pruebas A/B y solo querías mojarte los pies? ¿Escuchó sobre la optimización de sitios web en un podcast de marketing de crecimiento y le recomendaron esta herramienta? ¿O tenía una herramienta gratuita y quería ampliar sus pruebas más allá de sus límites?

¿Qué métricas de guardarraíl esperaba mover con la adquisición de la herramienta?

Las métricas de Guardrail están destinadas a mantenerlo alineado con sus metas y objetivos. Te alertan cuando las cosas no van como las habías planeado.

Entonces, definitivamente obtuviste la herramienta porque creías que había algo que podías cambiar. ¿Qué era? ¿Ingresos? ¿Métricas de UX como la tasa de rebote y la tasa de pedidos?

¿Terminaste logrando tus metas?

Si no, ¿por qué? ¿Tu programa de pruebas pivotó? ¿O fue la herramienta, GASP, una mala compra?

Responda a estas con honestidad y tendrá un mapa claro del problema. Ese es tu punto A.

¿No encontraste ningún problema en absoluto? ¿O no tiene las respuestas a algunas o todas estas preguntas? ¿Quiénes son los compradores reales y los usuarios de herramientas pesadas? Tener una conversación informal con ellos le dará las respuestas que necesita.

Porque no desea cambiar las herramientas solo porque tiene el presupuesto y alguien quiere una característica nueva y elegante.

Las características casi nunca resuelven problemas. Pueden, en el mejor de los casos, ayudar en la ejecución de soluciones. Y el cambio debería tener sentido para usted:

  • Adopción sabia
  • En cuanto al soporte del proveedor: si tiene una excelente relación con su proveedor actual, esto significa algo. Es tener un compañero en el viaje.
  • Implemente y amplíe el tiempo: los días perdidos para adaptarse a una nueva herramienta son los días que no estará probando, ya sea en absoluto o en toda su capacidad.

En pocas palabras: decida cambiar si y solo si sabe que el movimiento abordará todos los elementos que componen el problema que ha identificado, así como también tapará los agujeros y aportará valor adicional a su gente y procesos.

La tecnología se pondrá al día con cualquier campana y silbato que crea que necesita si esas campanas y silbatos permiten una oportunidad real y no tendencias. No sacuda el barco por una característica.

Pregunte a las personas adecuadas

Una vez que haya establecido que existe un problema real que se puede resolver mediante la experimentación o cambiando de plataforma y no algo frívolo que no valdrá la pena o una quimera (el fantasma del caos operativo y de procedimientos que se manifiesta como un problema de herramienta), luego pase a construir su conjunto de consideración.

Para construir el conjunto de consideraciones, tenemos que armarnos con los datos correctos para tomar una decisión acertada que cubra todas las bases. Y como en todo, los datos correctos son tus problemas, no opiniones.

También querrás evitar un error común que comete la mayoría de la gente: ir por el líder de la categoría. Los líderes de categoría rara vez son los mejores en todo. Tampoco debe utilizar por defecto las mismas herramientas que evaluó la última vez.

Porque la experimentación es compleja. Necesita una plataforma que respalde los objetivos específicos de su programa y sus flujos de trabajo de experimentación. Sin dejar de encajar perfectamente en tu cultura, ya que todos los pilares de la experimentación maduran tienen que trabajar en conjunto.

Esté abierto a las opciones. Como dice Peep Laja, instantáneamente mejoran la situación.

¿Entonces, dónde empezamos?

Lo que dicen los compradores B2B sobre las herramientas de compra: aquí es donde comienzan

Hicimos una encuesta en LinkedIn. Preguntamos a los compradores de software B2B: "¿Qué es lo primero que hace cuando compra un software que cuesta más de $ 5,000 al año?"

Ellos respondieron:

  • 57% hace una búsqueda en Google
  • 21% investiga marcas conocidas
  • 14% comienzan en G2 o TrustRadius, y
  • 7% pide referencias

Las opiniones adicionales incluyeron a aquellos que harán una combinación de los cuatro. Aunque no es una muestra significativa, es bastante representativa y nos da una idea del método preferido de los compradores para comenzar su búsqueda de herramientas.

Entonces, ¿la herramienta con el SEO más fuerte gana? No exactamente. Estamos tomando estos datos con pinzas. Ilustra que cuando no tenemos ni idea de algo, estamos conectados para recurrir primero a Google.

Si bien ese es un trampolín para su búsqueda, que le brinda una lista de herramientas de prueba A / B para considerar, necesita una estrategia más informada. Uno que viene de la parte inferior de esta encuesta: Pregunte a las personas adecuadas.

Lo que recomendamos

Consulte a las personas que han utilizado ampliamente las herramientas de prueba A/B, a su equipo y también vea qué utilizan los competidores u otros jugadores en su nicho.

Pregunte a las personas de su red que realizan pruebas con regularidad

Empezar con

  • LinkedIn: busque en grupos profesionales de optimización de la tasa de conversión. Algunos son más específicos para SaaS, profesionales de marketing y Shopify. O haga una publicación con los hashtags correctos (p. ej., #CRO, #abtesting, #experimentation y #optimization), etiquete a los probadores A/B frecuentes que conoce y solicite recomendaciones públicamente.
  • Comunidades de Slack: solicite recomendaciones sobre comunidades de Slack para especialistas en marketing, como CRO Growth Hacks, Marketers Chat, Growmance y Measure.

querrás evitar

  • Contactos de agencias: al menos en esta etapa porque la mayoría tiene vínculos con herramientas o sus favoritos que pueden o no implicar sobornos financieros y compensaciones. Esto no es ni bueno ni malo. Así es como está el espacio en este momento.
  • Resultados de Google: evite los resultados de búsqueda de Google para plataformas de pruebas A/B específicas o para tomar una decisión. Quieres una herramienta que se adapte a ti, no la herramienta con el mejor SEO.

Tú también puedes…

Use BuiltWith para buscar otras marcas en su espacio

Esto funciona muy bien si estás en una industria de nicho. Es posible que las plataformas recomendadas con frecuencia no tengan integraciones con su pila tecnológica. O es posible que no admitan la experimentación para mejorar los aspectos y las métricas que le interesan.

Por ejemplo, hay mucha optimización de la tasa de conversión en el espacio de Shopify, pero la mayoría de las marcas aceptan que luchar con el seguimiento de ingresos es parte integral de la configuración de una herramienta de prueba A/B.

¿Quiere luchar con algo que sea importante para su programa de experimentación?

Es por eso que la herramienta de prueba A/B que está considerando debe tener disposiciones específicas para adaptarse a sus necesidades de prueba. Como Convert ofrece una aplicación Shopify personalizada para deshacerse del problema de seguimiento de ingresos.

Es posible que esto no produzca la herramienta exacta que necesita, pero informará su conjunto de consideración.

Para encontrar qué marcas están usando en su espacio, todo lo que necesita es la dirección de su sitio web para realizar una búsqueda en BuiltWith.

verifique qué herramientas usan las empresas con BuiltWith
Fuente

O puede buscar las herramientas que está considerando y ver quién las está usando en su espacio. Hay límites cuando usas una cuenta gratuita.

Toque su equipo

Si tiene un equipo que realiza pruebas regularmente en su organización, es uno de los mejores para informar su conjunto de consideración. Ya están nadando en la piscina para que sepan la temperatura.

Obtén su opinión. Pregúnteles por qué desean ir con herramientas específicas. ¿Qué características no son negociables y cuáles son simplemente buenas?

¿Qué experiencias pasadas triunfan sobre los lanzamientos de características sofisticadas? El mejor voto de confianza es el que proviene de un probador que ha tenido éxito en el pasado con una plataforma en particular.

Reúna esta información y estructúrela. Si encuentra una recomendación, verifique rápidamente su problema para asegurarse de que la sugerencia sea válida.

Cree su conjunto de consideración

En esta etapa, ha reconocido 3 o 5 herramientas que le interesan seriamente. Ese es un punto de partida sólido. Pero en este momento, su decisión puede estar basada en factores intangibles, referencias y reconocimiento de marca.

Cuando construya su conjunto de consideración, creará una matriz de estas 3-5 herramientas de prueba A/B y las comparará con los componentes de un problema. Es decir, cómo están a la altura para resolver los principales problemas que busca solucionar con la herramienta de prueba A/B adecuada para usted.

Ilustremos:

PROBLEMA : Retrasos en el despliegue del experimento.

Herramienta Publica presupuesto para agregar 2 desarrolladores de pruebas A/B
La API permite el acceso programático completo
Soporte prioritario con asesores tecnológicos expertos en la zona horaria EST
A
B
C
D
mi

Si ha identificado más de un problema esencial, también querrá tener otra consideración establecida para ellos. Pero con las mismas herramientas, solo diferentes componentes del problema.

Lo que pasa con los problemas múltiples no es solo que se vuelve complejo de evaluar, sino que una alternativa sorprendente puede salir victoriosa. Así es como sabes que estás tomando decisiones objetivas. Bastante ordenado, ¿verdad?

Nota: dado que todos los problemas tienen diferentes niveles de prioridad, asegúrese de haberlos ponderado en consecuencia.

Entonces, ¿cómo sabe qué completar en un conjunto de consideraciones como en el ejemplo anterior?

Llenando los huecos

  • Reseñas

    Comience con sitios populares de revisión de software como G2, Capterra y TrustRadius. Recuerda: Es posible que los perfiles patrocinados se muestren más. Sin embargo, esto no tiene nada que ver con lo buena que es una herramienta para resolver sus problemas.
Software de prueba de abdominales de ejemplo de revisión G2
Fuente
  • Contras

    Apunta a esas reseñas de 2 a 4 estrellas. Los contras suelen estar bien pensados. Busque en ellos problemas que puedan ser devastadores para sus objetivos. ¿Ves algo que estás tratando de evitar? Ponga una "X" allí en el conjunto de consideración.
Ejemplo de revisión de Capterra Herramientas de prueba abdominales
Capterra (Fuente)
Herramientas de prueba de abdominales de ejemplo de revisión crítica G2
G2.com (Fuente)
Trust Radius revisión crítica ejemplo herramientas de prueba abdominales
Radio de confianza (fuente)

Sin embargo, tome las críticas con una pizca de sal. Lo que salió mal para otra persona no es seguro que también salga mal para ti. Pero si observa un denominador común en 3 o 4 revisiones, entonces hay un patrón al que vale la pena prestarle atención.

  • Tablas de comparación

    Parte del trabajo ya está hecho para ti. Mire las tablas de comparación, tanto de proveedores como de fuentes de terceros imparciales como HubSpot y CXL.
Tabla de comparación CXL herramientas de prueba ab
Comparación de herramientas de prueba A/B de CXL (Fuente)

Tenemos una herramienta para ayudarlo a comparar y contrastar Convert Experiences, Google Optimize, Optimizely, VWO, AB Tasty, Qubit y más.

Obtener tabla interactiva
Obtener tabla interactiva

¿Quiere leer cómo los expertos de CRO opinan sobre cómo compran herramientas de prueba A/B?

Esto es lo que Ruben De Boer tiene que decir acerca de elegir una herramienta de prueba A/B:

Primero, por supuesto, debe asegurarse de tener suficiente tráfico para las pruebas A/B, que al menos una parte de su empresa apoye las pruebas y que el desarrollo tenga suficientes recursos para implementar experimentos ganadores.

A continuación, tenga en cuenta sus necesidades actuales y futuras. Comience por evaluar la situación actual, como sus objetivos, necesidades y quién está involucrado. Por ejemplo, si TI está completamente involucrada, puede elegir una solución del lado del servidor. Mientras que si solo están involucrados los especialistas en marketing, lo más probable es que el lado del cliente sea el camino a seguir.

Luego, en lugar de solo mirar la situación actual, considere dónde quiere estar en unos años. ¿Qué necesidades tienes entonces? ¿Aumentará el número de experimentos? ¿Han utilizado más miembros del equipo la herramienta? ¿Ejecutar diferentes tipos de experimentos? Analice las posibilidades de aumento con los representantes de ventas de los distintos proveedores.

Finalmente, realice una prueba gratuita con las dos o tres herramientas que mejor se adapten a sus necesidades actuales y futuras. Durante la prueba gratuita, verifique la facilidad de uso de la herramienta, las opciones (de orientación) y otras cosas aplicables a su negocio (es decir, si funciona con su aplicación de una sola página).

Además, una conexión personal es importante, ya que es posible que necesite su atención al cliente. Por ejemplo, ¿hay ayuda con la incorporación? Si es así, ¿qué tan feliz estás con eso? Además, póngase en contacto con su atención al cliente. Además de verificar los canales disponibles (chat, correo, teléfono), vea qué tan rápido responden (¿están en la misma zona horaria?) y qué tan útiles son. Finalmente, verifique con TI el impacto de la herramienta en el rendimiento de su sitio .

Ruben De Boer, gerente principal de conversión en Online Dialogue

Y esta es la opinión de Max Whiteside. Max es el líder de contenido en Breaking Muscle:

Defina el alcance de la prueba, ya que hacerlo le permitirá restringir las capacidades de prueba de su herramienta de prueba A/B. ¿Tiene la intención de realizar solo pruebas A/B, o necesita una herramienta que también pueda manejar pruebas multivariadas y de varias páginas?

Cada herramienta funciona de manera única y ofrece distintos tipos de pruebas. Por lo tanto, busque uno que tenga todas las funciones que necesita, para que no tenga que cambiar de herramienta a medida que crece su capacidad de prueba.

En segundo lugar, la prueba A/B del presupuesto es un proceso iterativo, lo que hace que el presupuesto sea una consideración crucial al implementar un entorno de prueba. Es posible que deba repetir una prueba varias veces antes de lograr el resultado deseado, momento en el que puede continuar con la siguiente iteración. Requiere tiempo y recursos, y su presupuesto dictará sus límites superiores. Encuentre una herramienta que no haga mella significativa en su bolsillo.

Algunas herramientas de prueba pueden tener un impacto negativo en la velocidad de su sitio web mientras se ejecuta una prueba. Una página que se carga lentamente puede aumentar la tasa de rebote e irritar a los usuarios, lo que genera menos conversiones. En tal escenario, ni el control ni la variación se desempeñarían de manera óptima, lo que haría que los resultados de la prueba A/B no fueran confiables incluso si se alcanza el tamaño mínimo de la muestra.

Además, el efecto de parpadeo es mínimo. El efecto de parpadeo ocurre cuando un usuario ve brevemente la página web original antes de ser redirigido a la variante. El parpadeo puede dificultar la experiencia del usuario y sesgar los resultados de las pruebas. Para mantener la confiabilidad de sus pruebas A/B, es mejor seleccionar una herramienta que no produzca un efecto de parpadeo. Por lo tanto, es esencial determinar si la herramienta de prueba A/B ralentiza su sitio web.

Max Whiteside, líder de contenido en Breaking Muscle

Hacer contacto con la herramienta

Hasta este momento ha sido un admirador secreto de las herramientas que está considerando. Ahora es el momento de superar tu timidez y hacer contacto.

Y el mejor lugar para comenzar es una prueba o demostración gratuita.

Comience una prueba gratuita y reserve una demostración

Necesitas ver la herramienta en acción.

¿Cómo funciona en sus diversas aplicaciones de pruebas A/B? Como CRO para una tienda Shopify (o cualquier otra tienda de comercio electrónico), por ejemplo, querrá saber cómo funciona, desde probar la copia de CTA para ofertas emergentes hasta ubicaciones de imágenes de productos.

Una demostración le muestra cómo la herramienta resuelve su problema, mientras que una prueba gratuita revela si la plataforma respalda las afirmaciones con los productos (es decir, características, precios, servicio, hoja de ruta).

Ventana emergente de prueba gratuita de Convert Experiences

Nota: La mayoría de las herramientas de prueba A/B de nivel empresarial no realizarán una demostración contigo antes de que te hayan precalificado. Y no ofrecen pruebas gratuitas. Esto puede ser un punto ciego en su proceso de evaluación.

Medir la cultura

Podría preguntar: "¿Por qué la cultura importa en la herramienta que estoy comprando?"

Cuando utiliza una herramienta de prueba A/B, el proveedor se convierte en parte de su cultura de experimentación. Esa relación funciona mejor si son similares en prácticas y valores comerciales.

No se preocupe, esto no limitará su búsqueda a donde solo tiene 1 o 2 herramientas para considerar. Una buena cultura en realidad no es rara. Solo desea evitar la fricción que puede volverse demasiado incómoda y provocar un cambio de herramienta demasiado pronto.

Entonces, ¿cómo se mide la cultura de una herramienta de prueba A/B? Puedes mirar las reseñas de Glassdoor. Las personas que trabajan o han trabajado allí pueden brindar una visión bastante transparente (aunque anónima) de la cultura.

Cultura de las empresas de pruebas de abdominales de Glassdoor
Fuente

Otra forma de evaluar al proveedor de una herramienta de prueba A/B es su interacción con la industria. ¿Realmente educan el espacio?

centro de educación de proveedores de pruebas abdominales
Fuente

¿Qué tipo de contenido puedes encontrar en su blog y páginas de redes sociales? ¿Cómo interactúan con ellos otros actores de la industria?

vía GIPHY

¿Están mirando más allá de su herramienta para ayudarlo a mejorar sus procesos? Es más que simplemente publicar contenido de "nuestra herramienta es excelente". Puede detectar claramente una marca que invierte en el éxito de su audiencia. Es difícil ocultar una luz tan brillante.

Solicite la información que le falta

Sí, puede pedirle al proveedor de la herramienta de prueba A/B que rellene los vacíos con los documentos de solicitud de información.

Los documentos RFI son similares, por lo que una plantilla como esta funcionaría. Lo que va a ser único en el suyo, además de la información introductoria sobre su organización y los objetivos que desea lograr, son las preguntas que hace. querrás saber

  • El historial del proveedor
  • El caso de éxito de clientes similares a su organización
  • Precios
  • Referencias y más

Pero también es importante obtener el nombre y la información de contacto de la persona responsable de responder la RFI.

Equipo previo a la compra

Parte del esfuerzo para hacer una compra exitosa de una herramienta de prueba A/B está en el equipo previo a la compra: la transición de ninguna herramienta o herramienta actual a software nuevo en su pila de tecnología. ¿Qué necesita hacer para migrar sin problemas?

Primero, revele su elección a su equipo y obtenga la aceptación. Si no ha estado trabajando solo hasta ahora y usará la nueva herramienta en equipo, deben estar en sintonía con usted. Hágales saber el proveedor que ha elegido. Y muéstrales por qué.

Es por eso que tener un enfoque estructurado realmente ayuda. Ahora puede mostrar las consideraciones meticulosas por las que pasó para llegar a esta decisión para que tenga mucho sentido elegir esta herramienta. Con todo hecho bien hasta ahora, la aceptación es fácil en este punto.

Discutan su decisión como equipo. ¿Cómo se conecta con los problemas actuales en tu viaje de experimentación? ¿Cómo apoya sus objetivos de crecimiento? ¿Qué dicen otros usuarios sobre la herramienta? ¿Qué aprendiste de tu investigación? ¿Y cómo se mantuvo en su conjunto de consideración?

Además, concéntrese en el "por qué" detrás de la elección del proveedor. Más allá de las capacidades puras de la herramienta, ¿va a trabajar con un proveedor que respalde sus objetivos de prueba? ¿Proporcionan el respaldo educativo que su equipo necesita para aprovechar al máximo la nueva herramienta de prueba A/B? ¿Cuáles son los objetivos del proveedor para sus usuarios?

Luego, elabore un cronograma para la transición y prepárese para la implementación. La migración debe planificarse cuidadosamente para evitar contratiempos y retrasos costosos.

Es por eso que querrá trabajar con un proveedor que lo respalde. ¿El proveedor ayudará con la migración? ¿Puede transferir sus datos al nuevo proveedor? ¿Existe un proceso de incorporación robusto? Averigüe qué experiencia necesita para hacerlo y cuánto tiempo llevará cada etapa.

Finalmente, concéntrese en sus objetivos para el programa de optimización desglosado por 3-6-9 meses. De esa manera, tiene puntos de control trimestrales para evaluar la decisión que tomó. ¿La herramienta de prueba A/B y el proveedor elegidos se mantienen al día con las expectativas con las que comenzaste?

Cuidado aquí: las expectativas deben ser realistas. Asegúrese de no evaluar a su proveedor en resultados en los que no puede influir.

Hagamos de esta una lista de verificación procesable que pueda llevar con usted.

Una práctica lista de verificación de factores a tener en cuenta al migrar

Quiere migrar de bueno a mejor; inteligente al genio; asombroso a dichoso. Eso no sucede por casualidad.

Marque todas las casillas de verificación a continuación para estar seguro de que la herramienta de prueba A/B a la que está migrando funciona más allá de sus expectativas y lo ayuda a lograr sus objetivos de experimentación.

  • Costo : ¿el costo de la herramienta de prueba A/B justifica los resultados que espera? ¿Cómo se compara la inversión acumulada en la herramienta con el ROI esperado?
  • La curva de aprendizaje : no desea pasar valiosas horas de experimentación tratando de descubrir cómo realizar tareas básicas con la herramienta de prueba elegida debido a una interfaz de usuario repleta de toneladas de funciones que nunca usará. Lea las reseñas para conocer la curva de aprendizaje de la herramienta.
  • Parpadeo : el parpadeo ocurre cuando los usuarios ven la versión original de una página parpadear en su pantalla antes de que el software de prueba A/B les presente la variante. Esto puede estropear los resultados de su prueba.

    Algunas herramientas como Convert Experiences han desarrollado tecnología antiparpadeo, por lo que esto no sucede. Pero muchas herramientas de prueba A/B gratuitas y de código abierto aún no tienen esa capacidad.
  • Integraciones listas para usar: su herramienta de prueba A/B no es un lobo solitario. Tiene que asociarse con otras herramientas en su pila tecnológica para brindarle el máximo valor. Compruebe la cantidad de integraciones listas para usar con las que viene su herramienta CRO. ¿Se integra con los servicios vitales con los que necesita trabajar?
  • Google Analytics : asegúrese de que su herramienta tenga una integración fluida con Google Analytics. Al configurar, esta es una de las primeras tareas que deberá completar. Averigüe si es posible que necesite un desarrollador que lo ayude con esa herramienta.
  • Objetivos : el establecimiento de objetivos es una parte integral de sus pruebas A/B. Agrega contexto a sus pruebas e ilustra el impacto de los resultados de sus pruebas. ¿Cómo maneja esto su nueva herramienta? ¿Se pueden importar objetivos de Google Analytics?
  • Seguimiento de ingresos : al migrar, desea asegurarse de que su seguimiento de ingresos esté configurado correctamente para eventos únicos y de múltiples ingresos. Algunas herramientas requieren configuración manual. No quieres eso.

    Convert Experiences se conecta automáticamente a Google Analytics Universal y Classic para extraer valores de transacciones, ingresos y artículos pedidos para informar las pruebas.
  • Prueba A/A : ¿Pasa la nueva herramienta las pruebas A/A? Si tiene acceso de prueba gratuito a una plataforma de pruebas A/B, ejecute esta prueba. Así es como sabe que su herramienta está preparada para manejar pruebas A/B sin sesgos, o no.
  • Configuración del colaborador : especialmente importante si trabaja en equipo. ¿Puedes controlar el acceso a lo que tus colaboradores pueden ver y hacer cambios?

Y estas 2 consideraciones adicionales para recordar:

1. ¿Qué nivel de atención al cliente proporciona la herramienta de prueba A/B?

Otro punto a considerar en su evaluación es el nivel de soporte técnico disponible para usted como cliente.

Comprar una herramienta de prueba A/B puede ser un compromiso enorme. Debe asegurarse de que la herramienta brinde suficiente soporte técnico a su equipo en caso de dificultades.

El nivel de soporte que ofrecen las principales herramientas de prueba A/B del mercado varía. Con un poco de investigación, puede averiguar si las herramientas de prueba que está considerando ofrecen todo o una combinación de lo siguiente:

  • Soporte en vivo: ofrecido por teléfono o videollamada
  • Soporte por correo electrónico: ofrecido por una dirección de correo electrónico dedicada.
  • Chat en vivo: usando una aplicación de mensajería incorporada
  • Documentación: un repositorio en línea de artículos que brindan soluciones a problemas comunes.
  • Soporte automatizado: un conjunto de respuestas pregrabadas.

Una vez que haya confirmado el nivel de soporte disponible, debe averiguar si las personas estacionadas en los distintos canales de soporte son expertos en CRO. Es especialmente importante que elija una herramienta con expertos en CRO para el personal de soporte, ya que pueden brindarle mejor la ayuda en tiempo real que necesita si tiene problemas técnicos.

También vale la pena señalar que algunas herramientas de prueba A/B ofrecen atención al cliente dedicada como un complemento que debe pagar o actualizar a un plan superior para acceder de forma gratuita. Pagar por soporte técnico dedicado o actualizar a un plan que supere con creces sus necesidades de prueba para acceder a un mejor soporte aumentará el costo total de la herramienta de prueba A/B.

En Convert, nuestro equipo de desarrolladores y expertos en CRO brinda soporte técnico a nuestros clientes de forma gratuita. Nuestro soporte toma la forma de chat en vivo, documentación en línea, soporte por correo electrónico y soporte en vivo.

2. ¿La herramienta de prueba A/B afecta la velocidad de su sitio?

Otra consideración importante al comprar herramientas de prueba A/B es su impacto en la velocidad del sitio web. Algunas herramientas de prueba A/B pueden agregar segundos a la velocidad de su sitio web y aumentar el tiempo de carga. El tiempo de carga lento del sitio web afecta la experiencia del usuario y puede afectar su tráfico.

Analicemos el mecanismo de cómo algunas de las principales herramientas de prueba A/B del mercado pueden afectar la velocidad de su sitio web. Las herramientas de prueba A/B generalmente se dividen en dos categorías:

  1. Herramientas de prueba A/B del lado del cliente
  2. Herramientas de prueba A/B del lado del servidor

Las herramientas de prueba A/B del lado del cliente utilizan un fragmento de JavaScript almacenado en el navegador de un visitante para modificar el contenido que su servidor muestra al visitante en función de sus instrucciones de orientación. Las herramientas de prueba A/B del lado del servidor entregan el contenido exacto con alteraciones del servidor al usuario sin tener que tocar el navegador del usuario.

Las herramientas de prueba del lado del servidor parecen la mejor opción, pero pueden ser costosas y no relevantes para muchos casos de uso. Puede profundizar más en las diferencias en nuestro artículo de pruebas del lado del cliente y del lado del servidor.

Muchas de las principales herramientas de prueba A/B que existen son herramientas de prueba del lado del cliente. Las herramientas de prueba A/B del lado del cliente se cargan de dos maneras:

1. Sincrónicamente

This is when the JavaScript snippet of your A/B testing software loads fully before your web page loads. This way of loading the scripts prevents flickering. But may cause your page speed to slow down, as the code snippet from your A/B testing solution load time adds to your overall page speed.

2. Asynchronously

This is when the code snippet from your A/B testing platform of choice and web page loads simultaneously. Tools that use this method of loading may be fast but are prone to flickering.

As I mentioned earlier, flickering occurs when the visitor sees the original content before the variation loads.

Convert is one of the fastest A/B testing software on the market. This is thanks to its Smart Insert Technology TM which reduces its impact on your site speed.

Get a Taste of One of the Most Privacy Aware A/B Testing Tools Out There
Get a Taste of One of the Most Privacy Aware A/B Testing Tools Out There

5 A/B Testing Tools We Like

Where do you start in your search for the perfect A/B testing tool to buy? Right here with our top 5 favorites.

We've considered everything we talked about above and created a list based on what we know about our audience.

¡Vamos a sumergirnos!

1. Convert Experiences

Best A/B testing tools Convert Experiences
Fuente

Convert Experiences is for companies and teams looking to scale up their testing program with a mid-level testing platform that comes at a great price. You get fantastic support through your experimentation growth while staying ahead of privacy and data protection requirements.

Convert seamlessly integrates with over 100 tools in your MarTech stack and frees you from testing limitations you might've experienced with free tools and even some paid testing tools.

What we like about the tool: Everything! We built it

TrustRadius Rating: 9.4 out of 10 (18 reviews)

Pricing: Starts at $699/mo, then $199 for every 100k visitors after that

Free plan or trial? Yes, for 14 days with no credit card info needed to start

Cost per 100k visitors: $199

Ventajas:

  • Stable, flicker-free testing
  • 3rd-party cookie-free testing with no limits
  • Over 100 integrations with other marketing tools (Shopify, WordPress, HubSpot)

Contras:

  • Only basic post segmentation is enabled on the kickstart plan

Client-side or server-side tool? Both. You can use a client-side visual editor as well as set up to run custom JS on the server side.

Integration with Google Analytics? Sí.

Core Web Vitals ready? Sí. You get fast page loading, flicker-free, and minimal effect on CLS. So, your SEO isn't affected.

Frequentist or Bayesian stats? Frequentist two-tailed z tests.

Enterprise Support? Sí. We serve companies like Sony, Unicef, and Jabra.

Customer Support? Yes, including live chat and a support center. And there's more coming.

Consciousness Quotient (CQ): We're an outspoken campaigner for user privacy and have environmental consciousness deeply embedded in our DNA. We are fully GDPR compliant and don't use tools that aren't GDPR compliant. And we're proudly 15x carbon negative.

Fair TrustRadius review:

Convertir revisión de TrustRadius
Fuente

2. Camaleón

Software de pruebas A/B Kameleoon
Fuente

Kameleoon es una de las plataformas de pruebas A/B más populares del mundo en la actualidad y una de las favoritas de las empresas de salud y tecnología financiera. Trae ventajas adicionales a la mesa con una mejor funcionalidad que la mayoría de las herramientas. También viene con una excelente interfaz de usuario y excelentes configuraciones de personalización e integraciones.

Por qué nos gusta esta herramienta: segmentación de visitantes impulsada por IA con opciones de personalización de pila completa

Calificación de TrustRadius: 8.9 de 10 (70 Reseñas)

Precio: personalizado, que según hemos escuchado cuesta alrededor de $ 35,000 al año, dependiendo de su tráfico

¿Plan gratuito o prueba?

Costo por 100k visitantes: No aplica

Ventajas:

  • Tecnología avanzada antiparpadeo
  • Editor WYSIWYG fácil de usar
  • Se integra sin problemas con otras aplicaciones de marketing

Contras:

  • El editor WYSIWYG tarda un tiempo en cargarse
  • No se pueden archivar pruebas

¿Herramienta del lado del cliente o del lado del servidor? Ambas cosas

¿Integración con Google Analytics?

¿Está listo Core Web Vitals? Sí.

¿Estadísticas frecuentistas o bayesianas? No hay información fácilmente disponible sobre esto.

¿Soporte empresarial? Sí. Sus clientes empresariales incluyen Toyota, Rakuten y Lexus.

¿Atención al cliente? Sí. También puede obtener un administrador de cuenta.

Cociente de conciencia (CQ): cumplen con HIPAA, GDPR y CCPA y también tienen una función de gestión de consentimiento flexible para cada prueba A/B que ejecuta.

Revisión justa de TrustRadius:

Revisión de Kameleoon TrustRadius
Fuente

3. AB Sabroso

Software de pruebas A/B AB Tasty
Fuente

Al enumerar las mejores herramientas de prueba A/B a considerar, definitivamente querrá tener AB Tasty en esa lista. Es una herramienta de nivel medio, ideal para empresas que buscan ir más allá de los experimentos web básicos y ejecutar un programa de prueba respetable.

A pesar de lo sólido que es, tiene una interfaz de usuario relativamente simple que incluye funcionalidades como funciones de aprendizaje automático, por lo que su sitio puede ejecutar una personalización más sofisticada y un seguimiento de datos en un gran tráfico.

Por qué nos gusta esta herramienta: interfaz de usuario limpia y simple, excelente para pruebas enfocadas

Calificación de TrustRadius: 8.7 de 10 (78 reseñas)

Precios: Desde $1,900/mes para 400k visitantes

¿Plan gratuito o prueba? No, pero puede solicitar una demostración.

Costo por 100k visitantes: ~$475

Ventajas:

  • Widgets dinámicos
  • Precios de gama media para equipos no empresariales
  • Amplios informes analíticos

Contras:

  • La calculadora de significancia estadística es básica

¿Herramienta del lado del cliente o del lado del servidor? Ambas cosas

¿Integración con Google Analytics? Sí.

¿Está listo Core Web Vitals? Sí, es una herramienta rápida.

¿Estadísticas frecuentistas o bayesianas? bayesiano.

¿Soporte empresarial? Sí, brindan una experiencia de cliente empresarial. Empresas como Disney, L'Oreal y Klaviyo utilizan AB Tasty.

¿Atención al cliente? Sí, con un chat en vivo y una base de conocimientos.

Cociente de conciencia (CQ): AB Tasty es una marca consciente de la privacidad que también tiene un impacto social positivo al donar directamente a ONG, reciclar y patrocinar colmenas.

Revisión justa de TrustRadius:

Revisión de AB Tasty TrustRadius
Fuente

4. Optimizado

Software de pruebas A/B Optimizely
Fuente

Optimizely es una de las plataformas pioneras de experimentación web y se ha ganado una gran reputación como una herramienta sólida en la que confiar. Sin embargo, su precio puede ser bastante prohibitivo para el equipo de CRO promedio, ya que están muy enfocados en la empresa.

Además de eso, hacen un gran trabajo al permitir que los equipos de CRO ejecuten programas de experimentación avanzados y experiencias web personalizadas.

Por qué nos gusta esta herramienta: herramienta potente para la experimentación combinada con personalización impulsada por IA

Calificación de TrustRadius: 8.7 de 10 (3 Reseñas)

Precios: ocultos, según se informa, alrededor de $ 36,000 al año.

¿Plan gratuito o prueba? No, no desde 2018

Costo por 100k visitantes: No aplica con esta herramienta

Ventajas:

  • Amplia gama de opciones de orientación disponibles
  • Función de widget fácil de usar
  • Interfaz de usuario ordenada

Contras:

  • La integración con Google Analytics puede ser compleja para quienes no son desarrolladores
  • muy caro

¿Herramienta del lado del cliente o del lado del servidor? Ambas cosas. La experimentación del lado del cliente funciona con un fragmento de JS y el lado del servidor se realiza con los SDK del desarrollador.

¿Integración con Google Analytics? Sí.

¿Está listo Core Web Vitals? Sí.

¿Estadísticas frecuentistas o bayesianas? Optimizely utiliza la experimentación secuencial, no los experimentos de horizonte fijo que vería en otras plataformas.

¿Soporte empresarial? Atiende en gran medida a los clientes empresariales debido a los precios. Los clientes incluyen HP, IBM y Microsoft.

¿Atención al cliente? Sí, incluidos los números de teléfono disponibles las 24 horas, los 7 días de la semana y los recursos de ayuda.

Cociente de conciencia (CQ): son conscientes de la privacidad y tienen la tradición de involucrar a sus nuevos empleados en el voluntariado comunitario en su segundo día.

Revisión justa de TrustRadius:

Revisión optimizada de TrustRadius
Fuente

5. Google Optimize (y Optimize 360)

Software de pruebas A/B Google Optimize
Fuente

Google Optimize (GO) es una herramienta gratuita de optimización y experimentación de sitios web. Solía ​​ser Experimentos de contenido dentro de Google Analytics, pero ahora es un servicio independiente para ejecutar pruebas A/B, de redireccionamiento, de personalización, multivariadas y de banner.

La versión premium de Google Optimize es Optimize 360. Es una versión de GO más poderosa y sin límites. GO es excelente para comenzar con las pruebas A/B. Será fácil deslizarse hacia una herramienta de rango medio con la experiencia que obtiene al usar GO.

Por qué nos gusta esta herramienta: la mejor herramienta de prueba A/B gratuita, excelente para iniciar su viaje de CRO

Calificación de TrustRadius: 7.9 de 10 (43 Reseñas)

Precios: Google Optimize es gratuito, pero su versión premium, Optimize 360, tiene precios personalizados, se rumorea que rondan los $150 000 al año.

¿Plan gratuito o prueba? Sí, para Optimize.

Costo por 100k visitantes: No aplicable con GO

Ventajas:

  • La herramienta más fácil para comenzar: interfaz de usuario amigable para principiantes
  • La integración más fluida con Google Analytics
  • Segmentación detallada de la audiencia, gracias a los enormes recursos de datos de Google

Contras:

  • Limitado a 5 pruebas a la vez
  • Parpadea a veces
  • No se puede probar una aplicación móvil

¿Herramienta del lado del cliente o del lado del servidor? Ambas cosas

¿Integración con Google Analytics? Por supuesto que sí.

¿Está listo Core Web Vitals? Puede que tenga problemas con el parpadeo y el impacto de CLS, pero es manejable.

¿Estadísticas frecuentistas o bayesianas? Método de prueba bayesiano.

¿Soporte empresarial? Esto está disponible solo en Optimize 360

¿Atención al cliente? Hay una comunidad y otros recursos de ayuda disponibles para la herramienta gratuita. Los clientes de Optimize 360 ​​obtienen la gama completa de atención al cliente.

Cociente de conciencia (CQ): Optimize es uno de los muchos productos de Google y cae bajo la neutralidad de carbono de Google y la filantropía de miles de millones de dólares.

Revisión justa de TrustRadius:

Revisión de Google Optimize TrustRadius
Fuente

Conclusiones clave

Encontrar el software de pruebas A/B adecuado para sus necesidades no es tan fácil como parece. Deben tenerse en cuenta factores complejos como sus necesidades de prueba, precios, integraciones, conjunto de habilidades disponibles, configuración, capacitación y más.

Cuando comience con el problema, pregunte a las personas adecuadas, cree su lista de consideraciones y cree un conjunto de consideraciones basado en un análisis cuidadoso de los factores cruciales que pueden hacer o deshacer su experiencia con su herramienta de prueba A/B, ya está a mitad de camino.

Puede elegir comenzar su prueba con las 5 herramientas que hemos enumerado anteriormente. Pero si esa no es su taza de té, entonces le brindamos todo lo que necesita para salir, investigar más de 50 herramientas de prueba A / B y encontrar la adecuada para sus necesidades únicas.

Porque la decisión final es tuya.