Signifikanz zwischen zwei Varianten

Produkt- und Marketingteams können nach einem A/B-Test beurteilen, ob der Abstand zwischen den Varianten eine Entscheidung tragen sollte.

Prüfen Sie, ob der gemessene Unterschied zwischen zwei Varianten statistisch signifikant ist, und stützen Sie die Entscheidung auf eine Messung.

Bedienung

Gib die Anzahl der Besucher für Variante A ein, danach die Anzahl der Konversionen, jeden Wert in einer eigenen Zeile.
Verfahre mit Variante B ebenso und behalte die Reihenfolge bei: zuerst Besucher, danach Konversionen.
Starte die Analyse, um beide Zahlenreihen zu vergleichen und den beobachteten Unterschied einzuordnen.
Prüfe das Ergebnis und berücksichtige dabei deine Stichprobengröße und die tatsächliche Testdauer.
Lösche die Werte, wenn du nicht möchtest, dass sie im Browser verbleiben.

Beispiel

Das Beispiel enthält vier Zeilen: Besucher und Konversionen für A, danach Besucher und Konversionen für B. Sieh nach dem Ausführen nach, wie der Vergleich dargestellt wird, und bedenke, dass jeder Unterschied sorgfältig interpretiert werden muss, bevor er eine Entscheidung leitet.

Eingabe

Grenzen und Formate

Das Werkzeug entscheidet nicht, welche Variante ausgeliefert wird; es hilft nur beim Lesen der von dir angegebenen Zahlen.
Falsch gezählte Besucher oder Konversionen verzerren das Ergebnis, besonders wenn beide Varianten nicht auf dieselbe Weise gemessen wurden.
Ein nicht signifikanter Unterschied beweist nicht, dass die Varianten gleich sind; er bedeutet, dass die Daten die Frage nicht klären können.
Die Berechnung ersetzt keinen vor dem Test festgelegten Plan mit Dauer, Ziel und vorab gewählten Kriterien.

Wo die Verarbeitung stattfindet

Die gesamte Berechnung läuft in deinem Browser. Die von dir eingegebenen Zahlen bleiben auf deinem Gerät und werden an keinen externen Dienst gesendet. Du kannst die Analyse erneut ausführen oder die Felder leeren, ohne ein Konto anzulegen oder eine Kopie beim Werkzeug zu hinterlassen.

Häufige Fragen

Kann ich Prozentsätze statt Rohzahlen eingeben?

Besser sind echte Besucher- und Konversionszahlen. Ein Prozentsatz allein zeigt nicht, wie viele Fälle hinter dem Wert stehen, und das Werkzeug vergleicht zuerst die Zahlen.

Was soll ich tun, wenn mein Test mehrere Wochen lief?

Verwende die zusammengefassten Gesamtwerte aus dem geplanten Zeitraum und höre nicht auf, wenn die Zahlen am besten aussehen. Das Werkzeug berücksichtigt weder die Dauer noch Verkehrsänderungen im Zeitverlauf.

Reicht das Ergebnis für eine Marketingentscheidung?

Nein. Es unterstützt deine Einschätzung des Unterschieds, aber andere Faktoren zählen: Kosten, Qualität, Saisonalität oder Auswirkungen auf andere Kennzahlen. Prüfe außerdem, ob der Test ohne technische Probleme lief.