Cuánto esperar antes de confiar en un cambio web

La mayoría de negocios que prueban cambios en su web cometen el mismo error, y no tiene nada que ver con el cambio en sí. Tiene que ver con la prisa por creérselo.

Miras el resultado a los pocos días, ves una mejora que ilusiona, y decides que ya está: funciona, se aplica a toda la web. El problema es que esa primera mejora casi nunca es la mejora real. Es ruido disfrazado de buena noticia. Y actuar sobre ella (es decir, implementarla o descartarla si sale mal) es de las decisiones más caras que puedes tomar cuando no tienes margen para equivocarte dos veces.

Por qué las primeras semanas de un cambio no siempre dicen la verdad

Piensa en lanzar una moneda al aire. Si la lanzas 10 veces y sale cara 7, podrías pensar que está trucada. Si la lanzas 1.000 veces, el resultado se acerca mucho más al 50-50 real. Esas primeras 10 tiradas no mentían exactamente, pero tampoco contaban la historia completa, solo contaban lo que había pasado, por azar, en ese puñado de intentos.

Con las ventas de tu web ocurre lo mismo. Al principio de un cambio tienes pocas ventas acumuladas, así que un par de compras seguidas (buena suerte, un cliente que ya iba a comprar antes de ver el cambio siquiera) puede inflar o hundir el resultado sin que tenga nada que ver con si el cambio realmente funciona. Cuantas más ventas se acumulan, más se acerca el número a la realidad.

El caso que lo demuestra: de un 13% a un 5%

En uno de nuestros clientes de hostelería probamos sustituir un bloque de texto por unas tarjetas visuales con cada destino y su oferta bien clara, en una página de ofertas puntuales.

A los 11 días, mirando solo a los visitantes nuevos, la mejora en ventas era del 13%. Un resultado como para descorchar champán y aplicar el cambio ya mismo.

Seguimos esperando. Cuando se acumularon suficientes visitas, ese 13% había bajado al 5,4% y ni siquiera esa cifra era ya lo bastante sólida como para confiar en ella del todo. En otros grupos de usuarios, la mejora ni se notaba. El resultado real era mucho más modesto que la foto de los primeros días.

Cuánto hay que esperar, en la práctica

No existe un número mágico de días válido para cualquier negocio. Todo depende de cuánto tráfico tengas y cuántas ventas hagas al día. Pero hay señales sencillas para saber si todavía es pronto, según qué estés mirando.

Si te fijas en el número de ventas

Con menos de 100-200 ventas acumuladas desde que activaste el cambio, el resultado puede cambiar mucho de un día para otro. No es lo mismo pasar de 3 a 4 ventas en un grupo pequeño (un salto del 33%, que suena enorme pero es solo una venta de diferencia) que pasar de 300 a 400 en un grupo grande.

Cuantas menos ventas manejes, más exagerado puede parecer cualquier movimiento. Como referencia: por debajo de ese volumen, trata cualquier porcentaje que veas como provisional, no como un resultado sobre el que actuar.

Si te fijas en el tiempo transcurrido

Con menos de una o dos semanas de tráfico activo, probablemente no has capturado ni un ciclo completo de comportamiento. Si vendes de forma distinta entre semana y en fin de semana —algo muy habitual en hostelería, restauración o ecommerce de consumo— un test de solo 5 días puede estar reflejando únicamente cómo compran tus clientes de lunes a viernes, dejando fuera el patrón del fin de semana por completo. Espera, como mínimo, a completar un ciclo semanal entero antes de mirar el resultado como definitivo.

Si tu negocio tiene además estacionalidad marcada (rebajas, campañas, temporada alta), ten en cuenta que el test debería evitar cruzarse con esos periodos o, si no es posible, interpretarse con más cautela todavía.

Si comparas distintos tipos de clientes

Comparar cómo reaccionan los clientes que ya te conocían frente a los que llegan por primera vez es útil, pero divide tu ya limitada muestra de ventas en grupos todavía más pequeños. Si con 150 ventas totales ya hace falta cautela, con 150 ventas repartidas entre "nuevos" y "recurrentes" cada grupo se queda con la mitad o menos, y necesitas todavía más tiempo para que cualquiera de esos dos números sea fiable.

La pregunta que te ahorra el chasco en los resultados

Antes de decidir si un cambio funciona o no, hay cuatro preguntas que conviene hacerse y no vale con responderlas "por encima", porque de las cuatro depende si estás mirando un resultado real o una foto a medio revelar.

Sobre el volumen de datos

¿Cuántas ventas llevo acumuladas desde el cambio? Si son pocas decenas, cualquier conclusión que saques hoy puede ser la contraria dentro de una semana. Esto es válido tanto si el resultado te ilusiona como si te preocupa: un mal resultado con pocas ventas tampoco es motivo para descartar un cambio todavía.

Sobre la estabilidad del resultado

¿El número se mantiene parecido en los últimos días, o todavía sube y baja bastante? Un buen truco casero: mira el resultado acumulado de hace tres días y compáralo con el de hoy. Si apenas se ha movido, es una buena señal de que se está asentando. Si ha dado un salto grande, todavía está en movimiento y es pronto para fiarse.

Sobre el tiempo y los ciclos de tu negocio

¿He dejado pasar al menos una semana o dos de actividad normal, incluyendo fines de semana si tu negocio vende distinto entre semana? Y si tienes algún evento fuera de lo normal en ese periodo (una campaña de email, una promoción puntual, una caída de tu web) ese test probablemente esté contaminado y convenga alargarlo o repetirlo.

Sobre el tamaño del grupo que analizas

¿Estoy mirando mi web entera, o un grupo pequeño dentro de ella (solo mobile, solo clientes nuevos)? Cuanto más pequeño el grupo, más tiempo hace falta para fiarse del número. Si necesitas una decisión rápida, apóyate primero en el resultado global de la web, y deja el análisis por grupos pequeños para cuando el test ya lleve más recorrido.

Si la respuesta a alguna es "todavía no", la recomendación es simple: espera. Es la única parte de este proceso que no cuesta dinero, y te ahorra aplicar (o tirar a la basura) un cambio por una señal que iba a desaparecer sola.

Cómo te ayuda Boost a que esta espera merezca la pena

En Boost no nos limitamos a decirte cuánto esperar. Diseñamos la hipótesis, calculamos cuánto tráfico necesitas antes de lanzar el test —para que sepas desde el primer día si tienes volumen suficiente para sacar una conclusión fiable en un plazo razonable— y leemos el resultado contigo cuando llega el momento, sin prisas ni atajos que luego salgan caros.

Si no sabes por dónde empezar, no hace falta que te comprometas a un proceso largo ni a una inversión que no puedes permitirte todavía. Con nuestro servicios de CRO partimos de una auditoría, te proponemos algunos tests concretos con mejoras específicas para tu web (sin rediseños ni cambios en tus sistemas) y medimos los resultados en pocas semanas.

Si prefieres primero hacerte una idea rápida de dónde está fallando tu conversión, prueba Scan&Boost: en menos de 5 minutos recibes un análisis con las fricciones y oportunidades más claras de tu web, totalmente gratis.