¿Cómo funciona un grupo de holdout?
Antes de lanzar una campaña o un journey, una parte aleatoria de la audiencia elegible se asigna al holdout. Esos usuarios son iguales a los destinatarios en todo salvo en una cosa: nunca reciben el mensaje. Cuando la campaña termina, comparas las tasas de conversión de los dos grupos, y la diferencia es el lift incremental: las conversiones que la campaña causó de verdad. Las tasas de apertura y de clics hacen quedar bien a cualquier envío; solo un holdout separa las conversiones que causaste de las que ya iban a llegar.
¿Cuál es la diferencia entre un holdout global y uno por campaña?
Un holdout por campaña se excluye de un mensaje concreto, así que mide el lift de ese mensaje: útil para envíos caros como una secuencia de recuperación. Un holdout global se excluye de todo el marketing durante un periodo más largo, a menudo un trimestre, y mide cuánto vale todo tu programa. El grupo de control global de Braze, por ejemplo, te permite reservar entre el 1 % y el 15 % de tu base de usuarios y te informa del uplift en sesiones y conversiones frente a él. Los holdouts por campaña responden a preguntas tácticas; un holdout global te dice si tus mensajes mueven siquiera tu métrica North Star.
Por qué importa para un equipo de dos personas
Los equipos pequeños no pueden permitirse seguir lanzando campañas a ciegas. Un holdout es un seguro barato contra eso: la mayoría de los editores de journeys pueden crear uno con un nodo de división A/B en el que una rama simplemente sale sin enviar nada; la guía de orquestación de journeys explica cómo funciona el nodo ab_split. Leer el lift al final es el tipo de decisión que toma un CRO Specialist: mantener la campaña, reescribirla o eliminarla y recuperar el presupuesto de envío.
¿Qué tamaño debería tener un grupo de holdout?
Lo bastante grande para detectar el lift que te importa, lo bastante pequeño para que el costo de oportunidad siga siendo aceptable. Con audiencias pequeñas, los porcentajes se vuelven ruidosos enseguida: un holdout del 5 % sobre 500 usuarios son 25 personas, y una sola conversión cambia el resultado. Lo habitual entre las plataformas de mensajería son porcentajes de un dígito para los holdouts globales (Braze limita su grupo de control global al 15 %) y partes algo mayores para tests puntuales de campaña. Ante la duda, mejor un holdout global leído a lo largo de meses que muchos holdouts diminutos por campaña leídos una sola vez.