Come si imposta
Si parte da un'ipotesi scritta: «se il titolo dice il risultato invece del servizio, più persone compilano il form». Si sceglie la metrica che decide, di solito il tasso di conversione. Si divide il traffico a metà, a caso, e si lascia correre.
Una sola variabile per test. Se cambi titolo, immagine e pulsante insieme, anche quando vinci non sai perché.
Quando un risultato è affidabile
Una differenza può uscire per caso, soprattutto con pochi dati. La significatività statistica dice quanto sarebbe improbabile una differenza così se le due versioni rendessero uguale. La soglia più usata è il 95%, cioè un p-value sotto 0,05.
Il calcolo avviene nel tuo browser: non salviamo e non inviamo niente.
Il calcolatore usa un test z su due proporzioni, il metodo classico per confrontare due tassi di conversione.
Gli errori che falsano il test
Fermarsi appena una versione passa avanti: guardando i dati ogni giorno, prima o poi una differenza «significativa» esce per caso. Conviene decidere prima quanti visitatori servono.
Durare meno di una settimana intera. Il lunedì e il sabato hanno pubblici diversi, e un test di tre giorni li confonde.
Testare dettagli con poco traffico. Con poche visite al mese si testano le cose grosse: offerta, titolo, struttura della pagina. Il colore del pulsante può aspettare. Ne parliamo nella guida alla landing page che converte.
Domande frequenti
Quanto deve durare un A/B test?
Almeno una o due settimane intere, e comunque finché non arriva al numero di visitatori deciso all'inizio. La durata dipende dal traffico e dalla differenza che vuoi riuscire a vedere.
Che differenza c'è tra A/B test e test multivariato?
L'A/B test confronta due versioni che differiscono per una cosa. Il multivariato prova più elementi e le loro combinazioni insieme, ma richiede molto più traffico.
Si può fare un A/B test sulle campagne Meta?
Sì. Meta ha uno strumento apposito che divide il pubblico tra le versioni, così le stesse persone non vedono entrambi gli annunci.
Voci collegate
Vuoi capire quali numeri contano nel tuo business?
Sette domande, circa 30 secondi. I founder rispondono entro 48 ore.
Fai la diagnosi