Frequentistischer Rechner für statistische Signifikanz

< Weitere Tools

Kontrollsitzungen:

Kontrollkonvertierungen:

Variantensitzungen:

Variantenkonvertierungen:

Berechnung

Erklärung des statistischen Signifikanzrechners

Der statistische Signifikanzrechner hilft dabei festzustellen, ob der Unterschied in den Konversionsraten zwischen zwei Gruppen (Kontrolle und Variante) statistisch signifikant ist. Das heißt, er prüft, ob der beobachtete Unterschied wahrscheinlich auf einen realen Effekt und nicht auf Zufall zurückzuführen ist. Wir haben auch einen Bayes'scher Rechner für statistische Signifikanz das die Wahrscheinlichkeit berechnet.

So funktioniert das:

1. Eingabedaten: Sie geben die Anzahl der Sitzungen und Konvertierungen sowohl für die Kontrollgruppe als auch für die Variantengruppe an.
   • Kontrollgruppe: Die ursprüngliche oder Standardgruppe.
   • Variantengruppe: Die Gruppe mit den neuen Änderungen, die Sie testen möchten.
2. Conversion-Raten berechnen:
   • Wechselkurs: Der Anteil der Sitzungen, die zu Conversions führen.
   • Für jede Gruppe wird der Umrechnungskurs wie folgt berechnet:
     Conversion-Rate = Conversions / Sitzungen
3. Standardfehler berechnen:
   • Der Standardfehler misst die Genauigkeit der Conversion-Rate. Er hängt von der Conversion-Rate und der Anzahl der Sitzungen ab.
   • Die Formel für den Standardfehler lautet:
     Standardfehler = sqrt((Konvertierungsrate * (1 - Konvertierungsrate)) / Sitzungen)
4. Berechnen Sie den Z-Score:
   • Der Z-Score misst die Differenz zwischen den beiden Konvertierungsraten im Verhältnis zum kombinierten Standardfehler.
   • Die Formel für den Z-Score lautet:
     z = (Varianten-Konvertierungsrate – Kontroll-Konvertierungsrate) / sqrt(Standardfehler Kontrolle 2 + Standardfehler Variante 2 )
5. Bestimmen Sie den P-Wert:
   • Der p-Wert gibt die Wahrscheinlichkeit an, dass der beobachtete Unterschied auf Zufall beruht.
   • Ein niedriger p-Wert (normalerweise < 0,05) deutet darauf hin, dass der Unterschied statistisch signifikant ist.
   • Der p-Wert wird aus dem Z-Score mithilfe der kumulativen Verteilungsfunktion der Normalverteilung berechnet.
6. Ergebnis ausgeben:
   • Der Rechner zeigt die Konversionsraten für beide Gruppen, den Z-Score, den P-Wert und an, ob der Unterschied statistisch signifikant ist.

Zusammenfassung

Mithilfe dieses Rechners können Sie sicher feststellen, ob die Änderungen, die Sie in der Variantengruppe vorgenommen haben, zu einer signifikanten Verbesserung der Conversions im Vergleich zur Kontrollgruppe geführt haben. Dies hilft bei der datengesteuerten Entscheidungsfindung bei Experimenten und A/B-Tests.