9 errores al hacer A/B testing en eCommerce (y cómo evitarlos)
·
Mateo Costa
El A/B testing es comparar dos versiones de una página para ver cuál genera más ventas. Hecho con rigor es la forma más confiable de mejorar la conversión; hecho mal, desperdicia tráfico y produce conclusiones falsas. Estos son los 9 errores más comunes, basados en el trabajo de Dylan Ander, y cómo evitarlos.
Los 9 errores más comunes
Llamar “perdedor” a un test sin lift: no perdió, te dio información valiosa sobre tu cliente.
Creer que los tests pequeños no valen: cambiar dos palabras puede mover ingresos de forma enorme.
Buscar “quick wins” o fruta al alcance de la mano: rara vez existen, el lift viene de investigación.
Usar el test como excusa de que “daña la marca”: aplica la regla de no hacer daño y testea igual.
QA insuficiente: revisa la variante en distintos navegadores, dispositivos y tamaños de pantalla.
Usar editores visuales (WYSIWYG): prefiere cambios por código para evitar parpadeos y errores.
Cortar el test antes de dos semanas: necesitas capturar la variación de días laborales y fin de semana.
Correr más de dos tests a la vez en el mismo recorrido: se contaminan entre sí.
Elegir el KPI equivocado o muy pocos datos: mide ingreso por sesión y exige 95% de significancia.
Mide RPS, no solo la tasa de conversión
Un test puede subir la tasa de conversión y bajar tus ingresos si baja el valor de orden. Por eso el KPI correcto es el ingreso por sesión (RPS), que combina conversión y AOV. Optimizar solo la tasa de conversión es optimizar a ciegas.
Investiga antes de testear
Los mejores tests no nacen de corazonadas, nacen de investigación. El libro Making Websites Win, de Karl Blanks y Ben Jesson (Conversion Rate Experts), insiste en este punto, y Dylan Ander lo sistematiza en su embudo de datos: encuestas a clientes, datos crudos, análisis de competencia, mapas de calor, pruebas de usuario y revisión experta. Si tu hipótesis no viene de ahí, es una opinión disfrazada de test.
Prioriza con ICE
No puedes testear todo a la vez. Ordena tus hipótesis con ICE: Impacto, Confianza y Facilidad, del 1 al 5 cada uno. Corre primero el test con mayor puntaje. Y cuidado con la Confianza: si la idea viene de una corazonada, su máximo es 2; solo es alta si está respaldada por datos reales.
Entiende primero qué medir en qué es la tasa de conversión y cómo se calcula.
¿Quieres un programa de testing con rigor? Agenda una asesoría CRO gratuita.
Por qué elegir a ConvertMate
No rediseñamos tiendas para que se vean bonitas. Hacemos que tu tráfico deje de ser un gasto y se convierta en ventas, con decisiones basadas en datos y validadas con pruebas A/B, nunca por intuición, y ejecutadas por un equipo senior. Hemos desbloqueado más de 40 millones de dólares en ventas para más de 100 marcas, a lo largo de 137 proyectos en LATAM, Estados Unidos y Europa, y respaldamos cada programa con una garantía: mejor tasa de conversión que la que tienes hoy.
Preguntas frecuentes
¿Cuáles son los errores más comunes al hacer A/B testing?
Detener la prueba antes de alcanzar significancia, no calcular el tamaño de muestra, probar cambios sin hipótesis y mirar resultados a cada rato. Estos errores llevan a conclusiones falsas y a aplicar cambios que no mejoran la conversión.
¿Cuánto debe durar una prueba A/B?
El tiempo necesario para alcanzar el tamaño de muestra calculado y cubrir al menos uno o dos ciclos completos de negocio, normalmente de dos a cuatro semanas. Detenerla antes por ver un ganador temprano invalida el resultado.
¿Qué es la significancia estadística en un test?
Es la confianza de que la diferencia entre variantes no se debe al azar. Se suele buscar un 95 por ciento antes de declarar un ganador. Sin significancia ni muestra suficiente, el resultado no es confiable.
Sigue leyendo
Sobre el autor
Este artículo fue escrito por el equipo de ConvertMate, agencia de optimización de la tasa de conversión (CRO) especializada en eCommerce sobre Shopify en LATAM, liderada por su fundador Mateo Costa. Ayudamos a marcas a vender más con el tráfico que ya tienen, combinando investigación, diseño basado en datos y pruebas A/B.
Agenda tu asesoría CRO gratuita