A/B-Test Signifikanzrechner
Nur Impressionen und Conversions eingeben – und sofort erfahren, welche Variante statistisch wirklich gewinnt
Dieser Rechner beantwortet die entscheidende Frage jedes A/B-Tests: Ist eine Variante tatsächlich besser, oder ist der Unterschied reiner Zufall? Geben Sie für Variante A und Variante B jeweils die Zahl der Impressionen und Conversions ein, und Sie erhalten über einen z-Test für zwei Anteilswerte umgehend den p-Wert sowie die Aussage, ob das Ergebnis signifikant ist. Sämtliche Berechnungen laufen ausschließlich in Ihrem Browser – es werden keine Daten an einen Server übertragen. Besonders praktisch für Marketing-Teams, Growth-Verantwortliche und Produktmanager, die Testergebnisse schnell einordnen möchten.
🔒 Alles läuft zu 100 % in Ihrem Browser. Ihre Dateien und Eingaben werden niemals auf einen Server hochgeladen.
Anleitung
- Wählen Sie das gewünschte Konfidenzniveau: 90 %, 95 % oder 99 %.
- Tragen Sie für Variante A (Control) die Impressionen und Conversions ein.
- Tragen Sie für Variante B (Variation) die Impressionen und Conversions ein.
- Im oberen Bereich sehen Sie sofort, ob das Ergebnis signifikant ist, dazu den p-Wert, die Conversion-Rate beider Varianten und die relative Verbesserung.
FAQ
- Bedeutet ein niedriger p-Wert automatisch, dass Variante B gewonnen hat?
- Nein. Das Tool spricht nur dann von einem signifikanten Gewinn, wenn die Conversion-Rate von B über der von A liegt und der p-Wert zugleich unter dem Schwellenwert des gewählten Konfidenzniveaus bleibt. Liegt B unter A, wird selbst bei kleinem p-Wert kein Sieg ausgewiesen.
- Was tun, wenn das Ergebnis „nicht signifikant“ lautet?
- Meist bedeutet das, dass die Stichprobe (die Zahl der Impressionen) noch zu klein ist oder der tatsächliche Unterschied schlicht gering ausfällt. Lassen Sie den Test weiterlaufen, sammeln Sie mehr Daten und berechnen Sie das Ergebnis anschließend erneut.
- Werden meine Eingaben auf einem Server gespeichert?
- Nein. Alle Berechnungen erfolgen unmittelbar in Ihrem Browser. Nichts wird gespeichert oder übertragen.