Prueba de la serie de mapas mentales: cómo pensar como un CRO Pro (Parte 14)

Entrevista con 'Positive' John Ostrowski (Experimentos positivos)

El buen juicio y las habilidades para tomar decisiones son esenciales para el éxito en CRO. Para John Ostrowski, la optimización tiene que ver con comprender el problema, conocer a su audiencia y hacer que el crecimiento sea un esfuerzo de equipo.

Él cree que cualquier métrica de resultado se puede mejorar hasta cierto punto a través de la experimentación, pero no siempre vale la pena el esfuerzo. No puede simplemente mirar los números en el vacío: debe considerar los costos de oportunidad, los riesgos y otros factores. Saber cuándo "vale la pena exprimir el jugo" (también conocido como priorización) es uno de los mayores desafíos que enfrentan los experimentadores. Aquí es donde se deben utilizar los datos cualitativos y cuantitativos para aumentar la confianza en la decisión.

John ofrece un nuevo enfoque de CRO que no se parece a nada que haya leído antes.

Sumerjámonos en…

Juan, cuéntanos sobre ti. ¿Qué te inspiró a dedicarte a las pruebas y la optimización?

Desde Brasil a EE. UU., Hungría y Polonia. De ingeniero mecánico a analista de datos, experimentador y mentor de crecimiento.

He sido un optimizador sin importar dónde o qué estaba haciendo.

Las herramientas evolucionaron.

Lean Manufacturing se convirtió en Lean Startup.

Six Sigma se convirtió en marcos de crecimiento de productos.

La mejora continua, Kaizen, se mantuvo como denominador común.

El punto de inflexión para volverme completamente digital fue una visión que tuve en Hungría: "Imagine un mundo en el que trabajo frente a una computadora portátil, desde cualquier lugar, sin tener que ir a la fábrica..."

¿Cuántos años has estado optimizando? ¿Cuál es el único recurso que recomienda a los aspirantes a probadores y optimizadores?

Con los días de la industria, unos nueve años optimizando algo. Ejecutando esfuerzos de optimización en línea, específicamente, durante aproximadamente 5 años.

El primer experimento que recuerdo fue entre dos máquinas de estampación en frío con diferentes configuraciones para conocer las diferentes tolerancias entre las líneas de producción. Tiempos divertidos.

En cuanto a los recursos, recomendaré un curso, un libro, un podcast y un boletín informativo.

Curso por Internet:

Experimentation Deep Dive de Reforge lleva el juego de optimización a un nivel estratégico.

Libro:

No puedo recomendar lo suficiente los Experimentos confiables en línea de Ronny Kohavi. Te da superpoderes con solo leerlo.

Pódcast:

Innumerables pepitas de oro en el café CRO de Guido.

Boletin informativo:

Complemento desvergonzado para el boletín de Positive Experiments, mi rincón de Internet donde comparto mis pensamientos sobre experimentos de crecimiento, libertad financiera y positividad.

Responda en 5 palabras o menos: ¿Qué es para usted la disciplina de la optimización?

Extraer jugo vale la pena exprimirlo.

— Tenga en cuenta que definir lo que vale la pena para su negocio es un ejercicio en sí mismo.

¿Cuáles son las 3 cosas principales que las personas DEBEN entender antes de comenzar a optimizar?

“Si tuviera una hora para resolver un problema, dedicaría 55 minutos a pensar en el problema y 5 a pensar en soluciones”.

1. Comprende el problema. ¿Qué estás tratando de resolver y por qué es importante? ¿Cómo ayuda al crecimiento del negocio? ¿Cuál es la historia que estás contando?
2. Conoce a tu audiencia . Las dinámicas de poder son la fuerza invisible en las organizaciones a las que no está expuesto durante la incorporación. ¿Cómo responden las partes interesadas a los datos y qué tipos de datos prefieren? ¿Qué los hace funcionar? Conozca a su audiencia. Ser un campeón.
3. El crecimiento es un esfuerzo de equipo y un juego a largo plazo . Para mí, los "trucos de crecimiento" viven en la misma categoría que "hacerse rico rápidamente". Escuchas historias sobre los exitosos, y todos los otros millones que fracasaron son suprimidos. Sesgo de supervivencia. Las plataformas WYSIWYG permiten que los contribuyentes individuales hagan mucho. Sepa qué está bajo su control y qué no. Aprenda a encontrar apalancamiento, ya sea trabajo o capital.

¿Cómo trata los datos cualitativos y cuantitativos para que cuenten una historia imparcial?

Mi enfoque de investigación basado en la decisión es una mezcla de Behzod Sirjani y Douglas Hubbard.

Para mí, la vida, los negocios y las inversiones tienen que ver con el buen juicio y la toma de decisiones.

Por lo tanto, qual y quant se convierten en piezas de evidencia para alguna decisión que conlleva un riesgo.

Pienso en los cinco pasos de la Economía de la Información Aplicada (DDCMM):

1. Definir la decisión.
2. Determina lo que sabes ahora.
3. Calcule el valor de la información adicional contra el costo de no decidir. (Si no hay ninguno, vaya al paso 5).
4. Mida dónde el valor de la información es alto. (Regrese a los pasos 2 y 3 hasta que no sea necesario realizar más mediciones).
5. Toma una decisión y actúa en consecuencia.

Seleccionar el método de investigación (paso 4) es un paso de priorización en sí mismo.

Conozca a su audiencia y qué evidencia aumentará la confianza para tomar la decisión, luego defina el mejor método.

Evite usar por defecto “ejecutemos el método de investigación X” sin definir primero qué tipo de evidencia será más útil para su decisión.

Tenga en cuenta a su audiencia: a veces, una parte interesada responderá mejor a las entrevistas o anécdotas de los clientes.

Vale la pena mencionar que mis experimentos más impactantes fueron hipótesis que se originaron a partir de investigaciones cualitativas, más específicamente entrevistas a usuarios satisfechos.

¿Qué tipo de programa de aprendizaje ha configurado para su equipo de optimización? ¿Y por qué tomó este enfoque específico?

Nuestro capítulo de experimentación es un grupo de 10 personas con mentalidad de crecimiento, estudiantes de toda la vida a quienes les encanta que los datos demuestren que están equivocados.

Setenta años de experiencia en optimización combinados, todos de múltiples orígenes.

Además de lo que puede esperar de las ceremonias del capítulo y la revisión por pares, tenemos Reforge para nuestro equipo.

Les pedimos a todos que pasen por la Experimentación Profunda y la Serie de Crecimiento.

Tener un idioma común es un superpoder subestimado para los equipos de alto rendimiento.

¿Cuál es el mito de optimización más molesto que desearía que desapareciera?

¿Experimentación? Err... te refieres a CRO, ¿verdad?

Así es como lo pienso, en cuatro pasos:

1. Hay bloques de construcción fundamentales (estrategia, herramientas y tecnología, proceso, personas)
2. Que ayudan a dar forma a la estructura de gobierno (híbrida, centralizada, descentralizada)
3. Eso debe estar en su lugar para que florezca una cultura de experimentación (volante de prueba AB)
4. Y dependiendo de la estructura de su organización (por ejemplo, dirigida por productos), se establecen diferentes flujos de trabajo: para iTech Media, iniciativas OKR, CRO y Safety Net, lea más aquí.

Como industria, es mejor que nos alejemos de esta falsa dicotomía.

Podemos hacerlo mejor.

¡Con suerte, nuestra entrevista con John ayudará a guiar su estrategia de experimentación en la dirección correcta!

¿Qué consejo resonó más contigo?

¡Asegúrese de estar atento a nuestra próxima entrevista con un experto en CRO que nos lleva a través de estrategias aún más avanzadas! Y si aún no lo ha hecho, consulte nuestras entrevistas con Gursimran Gujral , Haley Carpenter , Rishi Rawat , Sina Fak , Eden Bidani , Jakub Linowski , Shiva Manjunath , Andra Baragan , Rich Page , Ruben de Boer , Abi Hough y nuestras últimas con Alex Birkett .