Cuándo buscar el máximo local y global con sus pruebas A / B

Imagina que estás escalando el Monte Everest en una espesa niebla con amnesia. Solo puedes ver hasta donde tienes la mano extendida. No sabes dónde estás ni en qué dirección dirigirte, solo que necesitas llegar a la cima. ¿Cuáles son las probabilidades que tienes?

Probablemente tan bajo como alto es la montaña.

Tan dramática como es esta analogía, se ha hecho en referencia a la base de un método de prueba A / B popular. Ese pico es la mejor versión de su página de destino posterior al clic, y está confundido, casi ciego y perdido en la ladera de la montaña de su página actual.

Lo que es peor, es probable que sus bloggers de marketing favoritos le hayan entregado un mapa incorrecto. Puede pensar que está realizando las pruebas A / B de la manera correcta, que se dirige en la dirección de ese pico. Sin embargo, lo más probable es que pronto llegue a un callejón sin salida y nunca encontrará la variación de mayor rendimiento de su página de destino posterior al clic.

El mito de las pruebas A / B que confunde a los principiantes

Algunos de los blogs de marketing más populares de Internet continúan perpetuando el mito de las pruebas A / B que condena a los principiantes desde el principio. También me victimizó cuando comencé.

“No cambie más de un elemento de página por prueba A / B” Seguí leyendo una y otra vez. No lo cuestioné porque las fuentes eran confiables y porque sobre todo, bueno, simplemente tenía sentido.

El objetivo de las pruebas A / B es recopilar datos que puede utilizar para optimizar una página, correo electrónico, publicidad o lo que sea que esté probando. ¿Cómo se suponía que iba a saber qué causó el cambio en la tasa de conversión al final de la prueba si hice más de un ajuste entre las versiones "A" y "B"? ¿Qué tipo de datos serían esos?

Entonces, probé los elementos uno a la vez: título de la página de destino posterior al clic "A" frente al título de la página de destino posterior al clic "B". A continuación, fue el botón azul en la página de destino posterior al clic "A" frente al botón verde en la página de destino posterior al clic "B". Así lo hicieron los profesionales, Amazon y Google. Si fue lo suficientemente bueno para empresas multimillonarias, fue lo suficientemente bueno para mí.

El problema que pasé por alto, del que me di cuenta dolorosamente meses después, es que no era Amazon o Google. Sus sitios web generan mucho tráfico, lo que significa que los pequeños aumentos obtenidos por estas frívolas pruebas de color de botones pueden traducirse en millones de dólares en ingresos.

Para la mayoría de las personas, sin embargo, son una pérdida de tiempo y recursos. Para la mayoría de las personas, usar este método de prueba A / B es como escalar el Monte Everest en una espesa niebla con amnesia.

La heurística de la escalada

En nuestra vida cotidiana, hay problemas que encontramos para los que la solución es clara. Pero, ¿qué sucede cuando te enfrentas a un obstáculo desconocido y en gran medida único? Tome este laberinto, por ejemplo:

No hay publicaciones de blog escritas sobre la mejor manera de navegar por este laberinto en particular. Tu amigo (lo más probable) no puede guiarte a través de él. No tienes mapa. Entonces, ¿cómo se llega de A a B?

La respuesta se puede encontrar en un programa de computadora llamado “The General Problem Solver”, construido en 1963 por Newell, Simon y Shaw para estudiar la inteligencia artificial. Su investigación también se ha aplicado a la resolución de problemas humanos. El Dr. Russ Dewey explica:

Newell y Simon definieron cada problema como un espacio. En un extremo del espacio está el punto de partida, en el otro lado está la meta. El procedimiento de resolución de problemas en sí mismo se concibe como un conjunto de operaciones para cruzar ese espacio, para llegar desde el punto de partida al estado objetivo, un paso a la vez.

En General Problem Solver, el programa prueba varias acciones (que Newell y Simon llamaron operadores) para ver cuál lo acercará más al estado objetivo. Un operador es cualquier actividad que cambia el estado del sistema. El solucionador de problemas generales siempre elige la operación que parece acercarlo a su objetivo. Esta táctica se llama escalar una colina, porque se asemeja a la táctica de dar siempre un paso hacia la cima de una colina o montaña.

En el laberinto de arriba, cada callejón sin salida es un "espacio", un problema que debes superar con "operaciones", que son acciones que te acercan a tu objetivo (pasar de "A" a "B").

Entonces, comience en "A" y siga el camino que cree que lo llevará a "B" más rápido. Cuando llega a un callejón sin salida, regresa y prueba una ruta alternativa. Repites el proceso hasta que alcanzas tu objetivo.

Esto es lo que está haciendo cuando está probando A / B elementos pequeños. Identifica un problema, como un botón imperceptible, por ejemplo. Luego, te acercas más a tu objetivo de crear la mejor versión de tu página de destino post-clic (o eso crees) probando lo que tu hipótesis es mejor. Si eso no funciona, prueba con otro.

Sin embargo, en algún momento, llegará a un punto de rendimientos decrecientes llamado "máximo local".

El máximo local y el máximo global

La razón por la que el método anterior se denomina heurística de "escalada de colinas" es porque tiene una limitación importante que puede dejarlo rascándose la cabeza en una colina mirando hacia la cima de la montaña, donde está su mejor página de destino post-clic. El Dr. Dewey explica:

La escalada es una estrategia simple, pero no siempre funciona. Una trampa potencial es el "problema de las colinas". Si está seleccionando cualquier paso que lo lleve cuesta arriba (o en una dirección particular), podría terminar subiendo una colina que se encuentra entre usted y la montaña, ignorando el procedimiento mucho más eficiente de rodearla. En otras palabras, si avanza directamente hacia una meta sin flexibilidad, puede pagar un precio elevado, desperdiciar mucha energía o causar más trabajo sin contribuir a la meta.

En términos de optimización, este "pie de montaña" se denomina "máximo local". Es la mejor versión de su página actual, que cuando A / B se pruebe más, producirá rendimientos decrecientes. El pico de la montaña se llama el "máximo global". Esa es la mejor versión de su página de destino posterior al clic. Aquí hay un gráfico útil para ilustrar:

Al comenzar con una única página de destino posterior al clic y realizar pruebas A / B de pequeños elementos uno a la vez para mejorarla, se está acercando a ese máximo local, pero este método nunca lo llevará a la cima de esa montaña. Entonces, ¿cómo navegas hasta allí?

Pruebas A / B para alcanzar el máximo global

En una publicación de blog titulada "No caigas en la trampa de las minucias de las pruebas A / B", Rand Fishkin de Moz explica un escenario frustrante que podría llegar demasiado cerca de casa:

Digamos que encuentra una página / concepto con el que está relativamente satisfecho y comienza a probar las pequeñas cosas, optimizando alrededor del mínimo local. Puede realizar pruebas durante 4-6 meses, obtener una mejora del 5% en su tasa de conversión general y sentirse bastante bien. Hasta que...

Ejecuta otra gran idea nueva en una prueba y mejora aún más. Ahora sabe que ha estado perdiendo el tiempo optimizando y perfeccionando una página cuyo concepto general no es tan bueno como la página nueva, aproximada y no optimizada que acaba de probar por primera vez.

En su lugar, Fishkin, al igual que otros influencers de marketing, recomienda primero las "revisiones" y las "grandes ideas" de las pruebas A / B o, en otras palabras, probar páginas radicalmente diferentes. De esas páginas radicalmente diferentes, la que tiene el mejor desempeño es la más cercana al máximo global. Ese es el que debe ajustar con las pruebas multivariadas: botón contra botón, título contra título, etc. Varios estudios de casos apoyan este método.

Pruebas A / B para el máximo global

1. Facebook

En 2008, Facebook probó un diseño de navegación completamente nuevo. Su equipo lo movió de la izquierda de la página a un menú desplegable a la derecha. Sin embargo, al hacerlo, hicieron que las aplicaciones dentro de la navegación fueran menos visibles para los usuarios, lo que resultó en mucho menos tráfico hacia esas aplicaciones. Dado que eran una valiosa fuente de ingresos para Facebook, eso era un problema.

Después de intentar salvar el nuevo diseño con algunos trucos de interacción, el equipo de optimización se dio cuenta de que habían alcanzado el máximo local y lo descartaron por completo. Del desarrollador de productos de Facebook, Adam Mosseri:

Lo que estábamos haciendo aquí es que estábamos optimizando para un máximo local. Dentro de este marco, había una cantidad limitada de tráfico que podíamos canalizar hacia las aplicaciones. Y lo que necesitábamos era un cambio estructural. Nuestra premisa estaba fuera de lugar. Nuestros intereses nos llevaban por el camino equivocado. No nos dimos cuenta […] estábamos optimizando para algo localmente, y necesitábamos ser algo disruptivos para salir de eso.

2. Moz

Esta página de variación, creada por expertos en tasa de conversión para Moz, era seis veces más larga que la original. Presentaba más infografías, un título diferente y un video, entre otros elementos que no estaban en la página original. Superó al control en un 52%.

Si el equipo solo hubiera trabajado en mejorar los elementos de la página original, nunca hubieran agregado el contenido que impulsó las conversiones a la mitad. De los probadores:

En nuestro análisis de la eficaz presentación cara a cara de Rand, notamos que necesitaba al menos cinco minutos para defender el producto pago de Moz. La página existente era más como un resumen de un minuto. Una vez que agregamos los elementos clave de la presentación de Rand, la página se hizo mucho más larga.

3. Densidad del servidor

La mayoría de los estudios de casos de pruebas A / B que encontrará en línea tienen que ver con la apariencia de las páginas web. Son el color del botón frente al color del botón o la imagen frente a la imagen, y la cantidad de ellos aumenta cada día. Como resultado, la mayoría de las personas que se sumergen en las pruebas A / B asumen que solo se pueden utilizar para el diseño web.

Sin embargo, el concepto de prueba A / B se puede aplicar a cualquier cosa, incluido el diseño del producto o incluso la estructura de precios, como verá con este ejemplo de Sever Density.

La empresa, un servicio de monitoreo de servidores y sitios web, permitió a sus clientes pagar en función de la cantidad de servidores y sitios web que necesitaban monitorear:

La estructura tenía la intención de ampliar la base de clientes, lo que hizo, pero ahora la mira del equipo estaba en mayores ingresos. Entonces, A / B probaron una revisión completa de sus precios, con un modelo empaquetado:

La nueva estructura en realidad produjo menos conversiones, pero el valor de cada una se disparó. Aquí estaban los resultados:

El valor medio del pedido superaba los 55 dólares en comparación con el anterior: 19,70 dólares. Las conclusiones recuerdan a los evaluadores dos cosas cruciales:

Las pruebas A / B se pueden utilizar para más que cambios de diseño superficiales.
Las conversiones no son el fin de todo. A veces, menos conversiones le brindan mejores resultados.

¿Cómo encuentras el máximo global y local?

Recuerde: la fuerza de las pruebas A / B es acercarse lo más posible al máximo global con grandes cambios. Para encontrar el máximo local, es mejor usar pruebas multivariadas.

¿Ha caído en la trampa de probar estrictamente un elemento de página a la vez? ¿Realiza varios cambios por prueba para encontrar el máximo global?

Aprenda a proporcionar personalización de anuncios 1: 1 para cada audiencia que tenga con una demostración empresarial de Instapage hoy.