Spiegazione del calcolatore di significatività statistica
Il calcolatore di significatività statistica aiuta a determinare se la differenza nei tassi di conversione tra due gruppi (controllo e variante) è statisticamente significativa. Ciò significa che controlla se la differenza osservata è probabilmente dovuta a un effetto reale piuttosto che a una casualità. Abbiamo anche un Calcolatrice della significatività statistica bayesiana che calcola la probabilità.
Ecco come funziona:
- Dati di input: È necessario fornire il numero di sessioni e conversioni sia per il gruppo di controllo che per il gruppo variante.
- Gruppo di controllo: Il gruppo originale o predefinito.
- Gruppo Variante: Il gruppo con le nuove modifiche che vuoi testare.
- Calcola i tassi di conversione:
- Tasso di conversione: La percentuale di sessioni che si traducono in conversioni.
- Per ciascun gruppo, il tasso di conversione viene calcolato come:
Tasso di conversione = Conversioni / Sessioni
- Calcola gli errori standard:
- L'errore standard misura l'accuratezza del tasso di conversione. Dipende dal tasso di conversione e dal numero di sessioni.
- La formula per l'errore standard è:
Errore standard = sqrt((Tasso di conversione * (1 - Tasso di conversione)) / Sessioni)
- Calcola lo Z-Score:
- Lo z-score misura la differenza tra i due tassi di conversione rispetto all'errore standard combinato.
- La formula per lo z-score è:
z = (Tasso di conversione variante - Tasso di conversione controllo) / sqrt(Errore standard controllo 2 + Errore standard variante 2 )
- Determinare il valore P:
- Il valore p indica la probabilità che la differenza osservata sia dovuta al caso.
- Un valore p basso (in genere < 0,05) suggerisce che la differenza è statisticamente significativa.
- Il valore p viene calcolato a partire dal punteggio z utilizzando la funzione di distribuzione cumulativa della distribuzione normale.
- Visualizza il risultato:
- La calcolatrice mostra i tassi di conversione per entrambi i gruppi, il punteggio z, il valore p e se la differenza è statisticamente significativa.
Riepilogo
Utilizzando questa calcolatrice, puoi determinare con sicurezza se le modifiche apportate al gruppo di varianti hanno portato a un miglioramento significativo nelle conversioni rispetto al gruppo di controllo. Ciò aiuta a prendere decisioni basate sui dati negli esperimenti e nei test A/B.