Explication du calculateur de signification statistique
Le calculateur de signification statistique permet de déterminer si la différence des taux de conversion entre deux groupes (contrôle et variante) est statistiquement significative. Cela signifie qu’il vérifie si la différence observée est probablement due à un effet réel plutôt qu’à un hasard. Nous avons également un Calculateur de signification statistique bayésienne qui calcule la probabilité.
Voici comment cela fonctionne:
- Des données d'entrée: Vous fournissez le nombre de sessions et de conversions pour le groupe de contrôle et le groupe de variantes.
- Groupe de contrôle: Le groupe d'origine ou par défaut.
- Groupe de variantes : Le groupe avec les nouvelles modifications que vous souhaitez tester.
- Calculer les taux de conversion :
- Taux de conversion: Proportion de sessions qui aboutissent à des conversions.
- Pour chaque groupe, le taux de conversion est calculé comme suit :
Taux de conversion = Conversions / Sessions
- Calculer les erreurs standard :
- L'erreur standard mesure la précision du taux de conversion. Cela dépend du taux de conversion et du nombre de sessions.
- La formule de l'erreur type est la suivante :
Erreur standard = sqrt((Taux de conversion * (1 - Taux de conversion)) / Sessions)
- Calculez le score Z :
- Le score z mesure la différence entre les deux taux de conversion par rapport à l'erreur type combinée.
- La formule du z-score est la suivante :
z = (Taux de conversion de variante - Taux de conversion de contrôle) / sqrt ( Contrôle d'erreur standard 2 + Variante d'erreur standard 2 )
- Déterminez la valeur P :
- La valeur p indique la probabilité que la différence observée soit due au hasard.
- Une valeur p faible (généralement < 0,05) suggère que la différence est statistiquement significative.
- La valeur p est calculée à partir du score z en utilisant la fonction de distribution cumulative de la distribution normale.
- Afficher le résultat :
- La calculatrice affiche les taux de conversion pour les deux groupes, le score z, la valeur p et si la différence est statistiquement significative.
Résumé
En utilisant ce calculateur, vous pouvez déterminer en toute confiance si les modifications que vous avez apportées au groupe de variantes ont entraîné une amélioration significative des conversions par rapport au groupe témoin. Cela aide à prendre des décisions basées sur les données lors des expériences et des tests A/B.