Vai al contenuto

Come costruire una roadmap di sperimentazione

Una roadmap di sperimentazione è un backlog di test da fare, ordinato per priorità e con un punteggio, perché un piccolo team spenda i suoi pochi slot di sperimentazione sulle idee con il valore atteso più alto. Trasforma un mucchio di intuizioni sparse in una coda ordinata, fissa una cadenza di revisione e impone la decisione più difficile: cosa chiudere.

Aggiornato: 6 min di letturaDi fromHello

Punti chiave

  1. La prioritizzazione conta di più quando puoi fare pochi test: ogni slot speso su un’idea debole è un’idea più forte saltata.

  2. Dai un punteggio alle idee con ICE (Impact × Confidence × Ease) per ordinare in fretta un backlog; passa a RICE quando la reach varia molto. Entrambi sono stime, non verità.

  3. Costruisci il backlog dai punti in cui il funnel perde utenti e dall’aha moment di attivazione, non da una lista dei desideri.

  4. Rivedi i risultati a una cadenza fissa e chiudi i test perdenti come da programma: aspettati che la maggior parte dei test si chiuda senza differenze nette.

Perché la prioritizzazione è tutto

Un piccolo team fa forse due o tre esperimenti a settimana; solo i team ad alta velocità arrivano a dieci-venti, e anche così è uno sforzo quando il traffico è scarso. Con così pochi slot, il costo reale di un test mediocre non è il test in sé: è l’idea più forte che hai saltato per farlo. Una roadmap esiste perché ogni slot vada all’idea con il valore atteso più alto, non alla voce più forte nello stand-up. Gestire quella coda ordinata è una parte importante di cosa fa un Growth PM.

Costruisci il backlog dal funnel e dall’aha moment

Non partire da una lista dei desideri. Parti dai punti in cui il funnel perde. Ripercorri ogni passaggio (visita, registrazione, attivazione, retention, ricavi) e annota i cali più grandi: ognuno è un’ipotesi da testare. Dai molto peso ai passaggi più vicini al tuo aha moment di attivazione, perché un utente che non si attiva raramente resta. Tratta qualsiasi aha moment che individui come una correlazione da convalidare, non come una causa dimostrata: un segnale di attivazione predice la retention, non dimostra che l’hai causata tu. Ogni perdita diventa una riga del backlog: l’ipotesi, la metrica che dovrebbe muovere e una stima approssimativa di quanto.

Dai un punteggio alle idee con ICE

ICE, reso popolare da Sean Ellis, valuta ogni idea su tre assi da 1 a 10: Impact, quanto potrebbe muovere la metrica; Confidence, quanta fiducia hai che funzioni; Ease, quanto poco sforzo richiede. Moltiplica i tre valori, ordina dal più alto e procedi dall’alto verso il basso. È rapido perché sono tre stime oneste. Quella rapidità è anche il limite: il punteggio è una stima, non un fatto. Leggi un 512 e un 480 come più o meno equivalenti, non come un verdetto. Il numero ordina la lista; non decide al posto tuo.

Posiziona ogni idea per impatto e sforzo. Le vittorie rapide, alto impatto e poco sforzo, ottengono per prime i tuoi pochi slot; le perdite di tempo raramente si guadagnano un posto.

Quando la reach varia, usa RICE

ICE non regge quando due idee differiscono molto per numero di utenti raggiunti. RICE, nato in Intercom, risolve il problema aggiungendo la Reach e dividendo per l’Effort: (Reach × Impact × Confidence) / Effort. Un suggerimento a comparsa visto da tutti i visitatori e un ritocco nascosto in una pagina di impostazioni vengono valutati sullo stesso piano. In cambio perdi rapidità e devi procurarti una stima della reach. Vale lo stesso avvertimento: moltiplicare quattro numeri inventati può produrre una falsa precisione, quindi tieni gli input approssimativi e rivedili man mano che impari.

FattoreICERICE
FormulaImpact × Confidence × Ease(Reach × Impact × Confidence) / Effort
RapiditàRapido: tre stime da 1 a 10Più lento: serve un numero per la reach
Ideale perSmistare in fretta un backlog ampioIdee con reach molto diverse
Trappola principaleL’Ease nasconde lo sforzo realeFalsa precisione da input deboli

Rivedi a cadenza fissa e chiudi i test perdenti

Fissa un ritmo: una revisione settimanale o quindicinale in cui leggi i risultati, promuovi i vincitori e chiudi il resto. Chiudere come da programma è la disciplina che fa scorrere la coda; un test lasciato attivo è uno slot lasciato occupato. Ammetti con onestà che la maggior parte dei test si chiude senza differenze nette e che, con poco traffico, molti hanno una potenza insufficiente prima ancora di partire: spesso la scelta giusta non è un test A/B ma rilasciare e monitorare, come spiega la guida ai test con poco traffico. Quando misuri, una lettura pulita di solito richiede un holdout group, che una piattaforma come customer.io o uno stack di engagement self-hosted può tenere da parte per te.

FAQ

Domande frequenti

  • Quanti esperimenti dovrebbe pianificare un piccolo team?

    Meno di quanti pensi. Due o tre test ben condotti a settimana sono un tetto realistico per la maggior parte dei piccoli team, e anche i growth team più forti raramente superano i dieci-venti. Costruisci la roadmap sul numero reale di slot che hai, non su quello a cui aspiri.

  • È meglio ICE o RICE?

    Nessuno dei due è “migliore”: rispondono a domande diverse. Usa ICE per smistare in fretta un backlog ampio quando le idee raggiungono un numero simile di utenti. Passa a RICE quando la reach varia abbastanza da cambiare la classifica. Entrambi sono stime; tratta il punteggio come un criterio di ordinamento, non come un verdetto.

  • Ogni quanto devo rivedere le priorità del backlog?

    Alla stessa cadenza con cui rivedi i risultati: ogni settimana o ogni due settimane per la maggior parte dei team. Ricalcola i punteggi quando un test finisce, una metrica si sposta o emerge una nuova perdita nel funnel. I punteggi cambiano man mano che impari, quindi una roadmap che non viene mai riordinata è già superata.

  • E se un test non raggiunge la significatività?

    Con poco traffico è il caso più comune. Non lasciarlo attivo per sempre sperando che la linea si muova: decidi in anticipo quanto aspetterai, poi rilascia la versione che rilasceresti comunque e monitora le metriche di salvaguardia. Riserva i test A/B formali alle modifiche abbastanza grandi, o alle pagine abbastanza trafficate, da arrivare davvero a una conclusione.

fromHello è un software di marketing automation open source: messaggi attivati da ciò che fanno le persone.

fromHello Cloud è in accesso anticipato tramite la lista d’attesa.

Accesso anticipato

fromHello Cloud

Non si parte per restare piccoli.

L’accesso anticipato a fromHello Cloud si apre a scaglioni. L’onboarding è guidato: ti aiutiamo a configurare tutto e a portare i tuoi contatti.

Ti scriveremo quando il tuo accesso sarà pronto. Niente spam.

Vuoi aspettare ancora un po’? Vedi su GitHub