Saltar al contenido

Cómo crear una hoja de ruta de experimentación

Una hoja de ruta de experimentación es un backlog priorizado de los próximos tests, puntuado para que un equipo pequeño dedique sus pocos huecos de experimentación a las ideas con mayor valor esperado. Convierte un montón de corazonadas sueltas en una cola ordenada, fija un ritmo de revisión y obliga a tomar la decisión más difícil: qué eliminar.

Actualizado el 6 min de lecturaPor fromHello

Lo esencial

  1. La priorización importa más cuando solo puedes lanzar unos pocos tests: cada hueco gastado en una idea débil es una idea más fuerte que te saltas.

  2. Puntúa las ideas con ICE (Impacto x Confianza x Facilidad) para ordenar un backlog rápido; recurre a RICE cuando el alcance varía mucho. Ambos son estimaciones, no la verdad.

  3. Crea el backlog a partir de dónde pierde usuarios tu embudo y de tu momento aha de activación, no de una lista de deseos.

  4. Revisa con un ritmo fijo y elimina los perdedores según el calendario: cuenta con que la mayoría de los tests salgan neutros.

Por qué la priorización lo es todo

Un equipo pequeño lanza quizá dos o tres experimentos a la semana; solo los equipos de alta velocidad llegan a diez o veinte, e incluso eso es mucho cuando el tráfico es escaso. Con tan pocos huecos, el costo real de un test mediocre no es el test en sí, sino la idea más fuerte que te saltaste para lanzarlo. Una hoja de ruta existe para que cada hueco vaya a la idea con mayor valor esperado, no a la voz más alta de la reunión diaria. Ser responsable de esa cola ordenada es una gran parte de lo que hace un Growth PM.

Crea el backlog a partir de tu embudo y tu momento aha

No empieces por una lista de deseos. Empieza por donde el embudo pierde usuarios. Recorre cada paso —visita, registro, activación, retención, ingresos— y anota las mayores caídas; cada una es una hipótesis que se puede testear. Da mucho peso a los pasos más cercanos a tu momento aha de activación, porque un usuario que nunca se activa rara vez se queda. Trata cualquier momento aha que definas como una correlación que validar, no como una causa demostrada: una señal de activación predice la retención, no demuestra que tú la causaste. Cada fuga se convierte en una fila del backlog: la hipótesis, la métrica que debería mover y una estimación aproximada de cuánto.

Puntúa las ideas con ICE

ICE, popularizado por Sean Ellis, puntúa cada idea en tres ejes del 1 al 10: Impacto (Impact), cuánto podría mover la métrica; Confianza (Confidence), qué seguridad tienes de que funcionará; y Facilidad (Ease), qué poco esfuerzo requiere. Multiplica los tres, ordena de mayor a menor y trabaja de arriba abajo. Es rápido porque son tres estimaciones honestas. Esa rapidez también es la trampa: la puntuación es una estimación, no un hecho. Lee un 512 y un 480 como prácticamente iguales, no como un veredicto. El número ordena la lista; no decide por ti.

Sitúa cada idea según su impacto y su esfuerzo. Las victorias rápidas —mucho impacto, poco esfuerzo— se quedan primero con tus escasos huecos; los pozos de tiempo rara vez se ganan un sitio.

Cuando el alcance varía, usa RICE

ICE falla cuando dos ideas difieren muchísimo en cuántos usuarios alcanzan. RICE, de Intercom, lo resuelve añadiendo el alcance (Reach) y dividiendo por el esfuerzo (Effort): (Alcance x Impacto x Confianza) / Esfuerzo. Un tooltip que ve cada visitante y un ajuste escondido en una página de configuración se puntúan en igualdad de condiciones. A cambio pierdes rapidez y necesitas una estimación de alcance que tienes que sacar de algún sitio. Se aplica la misma advertencia: multiplicar cuatro números inventados puede producir una precisión falsa, así que mantén las entradas aproximadas y revísalas a medida que aprendes.

FactorICERICE
FórmulaImpacto x Confianza x Facilidad(Alcance x Impacto x Confianza) / Esfuerzo
RapidezRápido: tres estimaciones del 1 al 10Más lento: necesita una cifra de alcance
Ideal paraFiltrar rápido un backlog grandeIdeas cuyo alcance difiere mucho
Trampa principalLa facilidad oculta el esfuerzo realPrecisión falsa a partir de entradas blandas

Revisa con un ritmo fijo y elimina los perdedores

Fija un ritmo —una revisión semanal o quincenal en la que lees los resultados, adoptas los ganadores y retiras el resto—. Eliminar según el calendario es la disciplina que mantiene la cola en movimiento; un test que sigue en marcha es un hueco que sigue ocupado. Sé honesto: la mayoría de los tests salen neutros y, con poco tráfico, muchos carecen de potencia antes de empezar. A menudo lo correcto no es hacer un test A/B, sino lanzar y vigilar, como explica hacer tests con poco tráfico. Cuando sí mides, una lectura limpia suele necesitar un grupo de control (holdout), que una plataforma como Customer.io o un stack de engagement autoalojado puede reservar por ti.

FAQ

Preguntas frecuentes

  • ¿Cuántos experimentos debería planificar un equipo pequeño?

    Menos de los que crees. Dos o tres tests bien hechos a la semana son un techo realista para la mayoría de los equipos pequeños, e incluso los equipos de growth más fuertes rara vez superan los diez o veinte. Planifica la hoja de ruta según tu número real de huecos, no según uno ideal.

  • ¿Qué es mejor, ICE o RICE?

    Ninguno es “mejor”: responden a preguntas distintas. Usa ICE para filtrar rápido un backlog grande cuando las ideas alcanzan a un número parecido de usuarios. Pasa a RICE cuando el alcance varía lo bastante como para cambiar el orden. Ambos son estimaciones; trata la puntuación como un criterio de orden, no como un veredicto.

  • ¿Cada cuánto debería volver a priorizar el backlog?

    Con el mismo ritmo con el que revisas los resultados: semanal o quincenal en la mayoría de los equipos. Vuelve a puntuar cuando termina un test, cambia una métrica o aparece una fuga nueva. Las puntuaciones cambian a medida que aprendes, así que una hoja de ruta que nunca se reordena ya está desfasada.

  • ¿Qué hago si un test no alcanza significación?

    Es lo habitual con poco tráfico. No lo dejes en marcha para siempre esperando que la línea se mueva: decide de antemano cuánto vas a esperar, lanza la versión que lanzarías de todos modos y vigila las métricas de salvaguarda. Reserva los tests A/B formales para cambios lo bastante grandes, o páginas con suficiente tráfico, como para dar un resultado de verdad.

fromHello es software de automatización de marketing de código abierto: mensajes activados por lo que hace la gente.

fromHello Cloud está en acceso anticipado a través de la lista de espera.

Acceso anticipado

fromHello Cloud

Nadie emprende para quedarse pequeño.

El acceso anticipado a fromHello Cloud se abre por etapas. El onboarding es personalizado: te ayudamos a configurarlo y a traer tus contactos.

Te escribiremos cuando se abra tu plaza. Sin spam.

¿Aún no quieres unirte? Ver en GitHub