Calcolatore AB test online di significatività statistica

Q: Che cos’è un test di significatività statistica, a volte indicato come test A/B?

In un test di significatività statistica si testano due varianti, la variante A contro la variante B (da qui il nome “test A/B”). A è l’originale (nota anche come “controllo”), mentre B è un duplicato di A che include una piccola modifica. È possibile testare anche più varianti (C, D, E… quante ne vuoi), ma per ottenere risultati statisticamente significativi, consigliamo di testare solo A contro B.

Q: Come si esegue un test di significatività statistica?

Per realizzare un test di significatività statistica, partirai da una pagina originale o “controllo”, ossia la variante A. Una volta pronta la variante A, sarà necessario duplicarla e poi modificare un piccolo elemento della pagina, ottenendo così la variante B. Può trattarsi di una piccola porzione di testo, di un titolo, un pulsante, una CTA o anche il colore o lo stile di carattere utilizzato. Dovrai poi mostrare queste due varianti a un pubblico di dimensioni simili durante un periodo non inferiore a una settimana. Dai dati raccolti durante tale settimana o più, potrai determinare quale variante generi maggiore conversione: quella sarà quindi la variante vincente.

Q: Durante quanto tempo dovrei eseguire un test di significatività statistica?

Dovrai eseguire il tuo test di significatività statistica per tutto il tempo necessario ad ottenere risultati statisticamente significativi. Il numero di sessioni utente è la chiave. Se una pagina web ha 1 milione di visitatori al giorno, il test di significatività statistica potrebbe restituirti risultati chiari in questione di ore. Una pagina web che riceve 2 visitatori al giorno, invece, potrebbe richiedere fino a un anno di test per mostrare risultati statisticamente significativi. Il comportamento degli utenti tende a variare durante l’arco di una settimana, quindi consigliamo di eseguire i test di significatività statistica per almeno una settimana completa.

Q: Che cosa si intende per significatività statistica?

La significatività statistica è la probabilità del fatto che una variante sia più forte di un’altra per una ragione specifica, invece che dipendere dal caso. Questo implica che puoi assumere con una certa affidabilità che la variante vincente è migliore proprio grazie alle modifiche che hai apportato.

Come eseguire un test di significatività statistica in 4 passi

Un test di significatività statistica è un esperimento in cui si confrontano due versioni (A e B) di una stessa pagina. Le due pagine da confrontare devono essere identiche, ad eccezione di una singola variazione di un elemento che potrebbe influenzare il comportamento degli utenti. L’obiettivo del test è quello di determinare quale pagina offra performance migliori.

Passo 1

Inserisci il numero di visitatori e le conversioni complessive per la variante A

Passo 2

Inserisci il numero di visitatori e le conversioni complessive per la variante B (e per le varianti C e D, se necessario)

Passo 3

Seleziona Calcola per confrontare le varianti

Passo 4

Nel riquadro dei risultati visualizzerai qual è la variante vincente

Come eseguire un test di significatività statistica

Per realizzare un test di significatività statistica è necessario confrontare due pagine (pagina A e pagina B), ognuna con un singolo elemento differente. La pagina A è quella originale, che si definisce come “controllo”. La pagina B dovrebbe essere identica alla pagina A, ma con una piccola modifica.

I migliori elementi da modificare sono quelli che stimolano le conversioni e invitano all’azione i visitatori. Dovresti cambiare soltanto un elemento per volta nella pagina, in modo da ottenere un risultato del test che sia statisticamente significativo. Se cambi più elementi, non saprai quale modifica avrà funzionato e quale invece no.

Fra gli elementi che è più comune modificare troviamo:

Headline
Pulsante di Call to Action (CTA)
Testo dell’annuncio
Testo del prodotto
Immagine

Oltre agli elementi in sé, potresti anche considerare di cambiare caratteristiche come:

Colore
Tipo di font/caratteri
Design

La pagina che restituisce il valore di conversione più alto è la variante migliore. Più ottimizzi la tua pagina, più elevato sarà il tuo tasso di conversione.

Una volta che le tue pagine saranno pronte, metà del tuo traffico dovrebbe essere deviato verso la pagina di controllo (pagina A), indirizzando l’altra metà verso la pagina modificata (pagina B).

Che cos’è un intervallo di confidenza della significatività statistica?

L’intervallo di confidenza è una misura dell’affidabilità di una stima. Se l’intervallo di confidenza è alto, significa che i risultati sono statisticamente significativi, quindi puoi essere sicuro che sono conseguenza delle modifiche che hai apportato, invece di essere solo frutto del caso.

95-100%	Congratulazioni, il tuo test è statisticamente significativo! Dovresti implementare la variante vincente.
90-95%	È improbabile che il tuo test sia statisticamente significativo. Potresti, con cautela, implementare la variante vincente, ma prima sarebbe più sicuro provare con un altro test di significatività statistica.
<90%	Il tuo test non è statisticamente significativo. Non implementare la variante vincente.

FAQ

Che cos’è un test di significatività statistica, a volte indicato come test A/B?

In un test di significatività statistica si testano due varianti, la variante A contro la variante B (da qui il nome “test A/B”). A è l’originale (nota anche come “controllo”), mentre B è un duplicato di A che include una piccola modifica. È possibile testare anche più varianti (C, D, E… quante ne vuoi), ma per ottenere risultati statisticamente significativi, consigliamo di testare solo A contro B.

Come si esegue un test di significatività statistica?

Per realizzare un test di significatività statistica, partirai da una pagina originale o “controllo”, ossia la variante A. Una volta pronta la variante A, sarà necessario duplicarla e poi modificare un piccolo elemento della pagina, ottenendo così la variante B. Può trattarsi di una piccola porzione di testo, di un titolo, un pulsante, una CTA o anche il colore o lo stile di carattere utilizzato. Dovrai poi mostrare queste due varianti a un pubblico di dimensioni simili durante un periodo non inferiore a una settimana. Dai dati raccolti durante tale settimana o più, potrai determinare quale variante generi maggiore conversione: quella sarà quindi la variante vincente.

Durante quanto tempo dovrei eseguire un test di significatività statistica?

Dovrai eseguire il tuo test di significatività statistica per tutto il tempo necessario ad ottenere risultati statisticamente significativi. Il numero di sessioni utente è la chiave. Se una pagina web ha 1 milione di visitatori al giorno, il test di significatività statistica potrebbe restituirti risultati chiari in questione di ore. Una pagina web che riceve 2 visitatori al giorno, invece, potrebbe richiedere fino a un anno di test per mostrare risultati statisticamente significativi. Il comportamento degli utenti tende a variare durante l’arco di una settimana, quindi consigliamo di eseguire i test di significatività statistica per almeno una settimana completa.

Che cosa si intende per significatività statistica?

La significatività statistica è la probabilità del fatto che una variante sia più forte di un’altra per una ragione specifica, invece che dipendere dal caso. Questo implica che puoi assumere con una certa affidabilità che la variante vincente è migliore proprio grazie alle modifiche che hai apportato.

Prova subito il nostro Test online di significatività statistica gratuito