La distribución del tráfico entre variantes en un test A/B es una decisión que se debe tener muy en cuenta ya que puede afectar la validez y la interpretación de los resultados.
Como se reparte el tráfico depende de varios factores, incluyendo los objetivos del test, la tolerancia al riesgo, y el volumen de tráfico que disponemos.
▶ Objetivos del Test.
Si el objetivo es probar una nueva función que podría mejorar significativamente el rendimiento, podrías estar más inclinado a asignar más tráfico a la variante que vamos a testar.
▶ Tolerancia al Riesgo.
Para test donde se propongan cambios más radicales, se tendrá que limitar la exposición asignando menos tráfico a la variante de prueba para minimizar el riesgo.
▶ Volumen de Tráfico.
Si el volumen de tráfico con el que contamos es alto, pueden asignar una menor cantidad del tráfico a la variante de prueba y aun así obtener resultados significativos rápidamente.
Ejemplos de Distribución del Tráfico.
▶ Ejemplo 1: Test de una Nueva Función Importante.
– Supongamos que quieres probar una nuevo recomendador de productos en tu ecommerce.
– Objetivo: Evaluar si la nueva función aumenta la tasa de conversión.
– Distribución del Tráfico: Si crees que puede dar una buen resultado pero no te fias, podrías optar por una distribución conservadora, como 70% variante (A) y 30% variante (B).
– Razón: Esto permite evaluar la efectividad de la nueva función mientras se minimiza el riesgo de impactar negativamente la experiencia del usuario.
▶ Ejemplo 2: Optimización proceso de Checkout.
– Quieres probar una versión simplificada de tu página de checkout para reducir la tasa de abandono del carrito.
– Objetivo: Hacer el proceso de pago más rápido y fácil.
– Distribución del Tráfico: Podrías optar por una división 50/50.
– Razón: Si la página de checkout actual tiene una tasa de abandono alta y la nueva versión ha sido rediseñada basándonos en datos cuantitativos y cualitativos, un test equitativo puede proporcionar resultados rápidos y claros.
▶ Ejemplo 3: Rediseño de la Home
– Estás considerando un rediseño radical en la home de tu web.
– Objetivo: Modernizar el sitio y mejorar la navegación.
-Distribución del Tráfico: Dada la importancia de la página principal y el potencial impacto del cambio, podrías comenzar con una distribución conservadora como 80% a la versión actual (A) y 20% a la nueva versión (B).
-Razón: Esto te permite probar el impacto del nuevo diseño con un riesgo menor, y luego ajustar la distribución del tráfico basado en los resultados iniciales.
▶ También es importante.
-Asegúrate de que el test se ejecute el tiempo suficiente para recoger datos significativos, especialmente si una variante recibe menos tráfico.
–Realizas análisis con segmentación adecuada.
-Revisa para ajustar la distribución del tráfico durante el test si fuera necesario.
Una buena planificación y análisis son esenciales para obtener resultados que nos ayuden a tomar decisiones.