A/B-Testing Mastery
Verstehen, messen und skalieren, ohne Statistik-Studium.
A/B-Testing ist die ehrlichste Methode, um herauszufinden, was in deinem Shop wirklich funktioniert. Dieser Kurs macht dich testfähig, ohne dass du ein Statistik-Studium brauchst. Du startest mit den Grundlagen: Was unterscheidet einen echten A/B-Test von einem simplen Vorher-Nachher-Vergleich, und warum liefert Letzterer so oft falsche Schlüsse?
Danach geht es an die Zahlen. Du lernst, was p-Wert, Konfidenzintervall und Stichprobengröße bedeuten und wie du ein Testergebnis kritisch liest, statt es blind zu glauben. Ein eigenes Modul behandelt Test-Dauer und Traffic: Du rechnest aus Baseline-Conversion, gewünschtem Effekt und Besucherzahlen aus, wie lange ein Test laufen muss. Auch die vier möglichen Endzustände eines Tests werden durchgespielt, denn Winner, Loser, kein Ergebnis und vorzeitiger Abbruch verlangen jeweils andere Reaktionen.
Mit dem A/B-Testing-Audit prüfst du anhand einer 21-Punkte-Checkliste, ob dein Shop überhaupt bereit zum Testen ist. Zwei technische Module erklären, wie client-side, server-side und hybrides Testing funktionieren und welche Tool-Kategorien es am Markt gibt. Den Abschluss bildet ein Modul über ethische CRO: Du erkennst Dark Patterns wie Confirmshaming oder versteckte Kosten und verstehst, warum sie langfristig Umsatz kosten.
Acht Module mit Quiz, danach die Abschlussprüfung mit Zertifikat.
Was Sie in diesem Kurs lernen
- Nach diesem Modul können Sie einen echten A/B-Test von einem Vorher-Nachher-Vergleich unterscheiden, erklären, warum nur paralleles, randomisiertes Testen externe Störfaktoren ausschließt, und eine falsifizierbare Hypothese mit Variable, Wirkung und Primärmetrik formulieren.
- Nach diesem Modul können Sie p-Wert, Konfidenzintervall und Stichprobengröße eines Testergebnisses korrekt deuten, statistische von praktischer Signifikanz trennen und am MDE entscheiden, ob ein signifikanter Winner überhaupt einen Rollout rechtfertigt.
- Nach diesem Modul können Sie aus Baseline-Conversion, MDE, Traffic und Geschäftszyklus die nötige Stichprobengröße und Mindestlaufzeit eines Tests abschätzen und begründen, warum ein vorzeitiger oder verfrühter Stopp das Ergebnis wertlos macht.
- Nach diesem Modul können Sie für jeden der vier Endzustände — Winner, Loser, kein Ergebnis, vorzeitig gestoppt — die richtige Konsequenz ableiten: Winner sicher ausrollen und nachüberwachen, Loser und inconclusive Ergebnisse segmentiert auswerten und dokumentieren und jedes Ergebnis in einem Satz an die Geschäftsführung kommunizieren.
- Nach diesem Modul können Sie Ihre Test-Readiness mit der einundzwanzig-Punkte-Checkliste über Technik, Organisation, Kultur und Tool-Stack ehrlich bewerten, Ihren Score berechnen und aus den größten Lücken einen priorisierten Handlungsplan ableiten.
Weiterführende Artikel auf jdk.de
Module im Überblick
A/B-Testing für Nicht-Statistiker
Nach diesem Modul können Sie einen echten A/B-Test von einem Vorher-Nachher-Vergleich unterscheiden, erklären, warum nur paralleles, randomisiertes Testen externe Störfaktoren ausschließt, und eine falsifizierbare Hypothese mit Variable, Wirkung und Primärmetrik formulieren.
Signifikanz verstehen
Nach diesem Modul können Sie p-Wert, Konfidenzintervall und Stichprobengröße eines Testergebnisses korrekt deuten, statistische von praktischer Signifikanz trennen und am MDE entscheiden, ob ein signifikanter Winner überhaupt einen Rollout rechtfertigt.
Test-Dauer & Traffic
Nach diesem Modul können Sie aus Baseline-Conversion, MDE, Traffic und Geschäftszyklus die nötige Stichprobengröße und Mindestlaufzeit eines Tests abschätzen und begründen, warum ein vorzeitiger oder verfrühter Stopp das Ergebnis wertlos macht.
Winner, Loser, Kein Ergebnis
Nach diesem Modul können Sie für jeden der vier Endzustände — Winner, Loser, kein Ergebnis, vorzeitig gestoppt — die richtige Konsequenz ableiten: Winner sicher ausrollen und nachüberwachen, Loser und inconclusive Ergebnisse segmentiert auswerten und dokumentieren und jedes Ergebnis in einem Satz an die Geschäftsführung kommunizieren.
Das A/B-Testing Audit
Nach diesem Modul können Sie Ihre Test-Readiness mit der einundzwanzig-Punkte-Checkliste über Technik, Organisation, Kultur und Tool-Stack ehrlich bewerten, Ihren Score berechnen und aus den größten Lücken einen priorisierten Handlungsplan ableiten.
A/B-Testing: Technische Funktionsweise
Nach diesem Modul können Sie einschätzen, ob Ihr Shop client-side, server-side oder hybrid testen sollte, und mit Entwicklern über Flicker, Caching, Hydration in SPAs und den Data Layer auf Augenhöhe sprechen — ohne selbst Code zu schreiben.
A/B-Testing Tools im Überblick
Nach diesem Modul können Sie A/B-Testing-Plattformen in WYSIWYG-Editoren, Feature-Flag-Systeme, Full-Stack- und Open-Source-Lösungen einordnen, sie anhand der sechs Auswahlkriterien (Traffic, Komplexität, Datenschutz, Teamgröße, Integration, Gesamtkosten über drei Jahre) bewerten und rote Flaggen vor Vertragsabschluss erkennen.
Ethische CRO & Dark Patterns vermeiden
Nach diesem Modul können Sie Dark Patterns wie Roach Motel, Confirmshaming, Hidden Costs und False Urgency in Ihrem Shop erkennen, jede Testhypothese mit dem Ethik-Check bewerten und langfristigen Markenwert bewusst über kurzfristige Conversion-Gewinne stellen.
Zertifikat bei Abschluss
Bestehen Sie alle Modul-Quizze und den Abschlusstest, erhalten Sie das Zertifikat „A/B-Testing Mastery“ als PDF.
Noch 8 Module bis zur Prüfung.