A/B-Testing Mastery
Verstehen, messen und skalieren, ohne Statistik-Studium.
Was Sie in diesem Track lernen
Sie lernen, was A/B-Testing wirklich ist, wann ein Ergebnis valide ist, wie lange Tests laufen müssen und wie Sie Ihren Shop auf Test-Readiness prüfen.
- Nach diesem Modul können Sie einen echten A/B-Test von einem Vorher-Nachher-Vergleich unterscheiden, erklären, warum nur paralleles, randomisiertes Testen externe Störfaktoren ausschließt, und eine falsifizierbare Hypothese mit Variable, Wirkung und Primärmetrik formulieren.
- Nach diesem Modul können Sie p-Wert, Konfidenzintervall und Stichprobengröße eines Testergebnisses korrekt deuten, statistische von praktischer Signifikanz trennen und am MDE entscheiden, ob ein signifikanter Winner überhaupt einen Rollout rechtfertigt.
- Nach diesem Modul können Sie aus Baseline-Conversion, MDE, Traffic und Geschäftszyklus die nötige Stichprobengröße und Mindestlaufzeit eines Tests abschätzen und begründen, warum ein vorzeitiger oder verfrühter Stopp das Ergebnis wertlos macht.
- Nach diesem Modul können Sie für jeden der vier Endzustände — Winner, Loser, kein Ergebnis, vorzeitig gestoppt — die richtige Konsequenz ableiten: Winner sicher ausrollen und nachüberwachen, Loser und inconclusive Ergebnisse segmentiert auswerten und dokumentieren und jedes Ergebnis in einem Satz an die Geschäftsführung kommunizieren.
- Nach diesem Modul können Sie Ihre Test-Readiness mit der einundzwanzig-Punkte-Checkliste über Technik, Organisation, Kultur und Tool-Stack ehrlich bewerten, Ihren Score berechnen und aus den größten Lücken einen priorisierten Handlungsplan ableiten.
Module im Überblick
A/B-Testing für Nicht-Statistiker
Nach diesem Modul können Sie einen echten A/B-Test von einem Vorher-Nachher-Vergleich unterscheiden, erklären, warum nur paralleles, randomisiertes Testen externe Störfaktoren ausschließt, und eine falsifizierbare Hypothese mit Variable, Wirkung und Primärmetrik formulieren.
Signifikanz verstehen
Nach diesem Modul können Sie p-Wert, Konfidenzintervall und Stichprobengröße eines Testergebnisses korrekt deuten, statistische von praktischer Signifikanz trennen und am MDE entscheiden, ob ein signifikanter Winner überhaupt einen Rollout rechtfertigt.
Test-Dauer & Traffic
Nach diesem Modul können Sie aus Baseline-Conversion, MDE, Traffic und Geschäftszyklus die nötige Stichprobengröße und Mindestlaufzeit eines Tests abschätzen und begründen, warum ein vorzeitiger oder verfrühter Stopp das Ergebnis wertlos macht.
Winner, Loser, Kein Ergebnis
Nach diesem Modul können Sie für jeden der vier Endzustände — Winner, Loser, kein Ergebnis, vorzeitig gestoppt — die richtige Konsequenz ableiten: Winner sicher ausrollen und nachüberwachen, Loser und inconclusive Ergebnisse segmentiert auswerten und dokumentieren und jedes Ergebnis in einem Satz an die Geschäftsführung kommunizieren.
Das A/B-Testing Audit
Nach diesem Modul können Sie Ihre Test-Readiness mit der einundzwanzig-Punkte-Checkliste über Technik, Organisation, Kultur und Tool-Stack ehrlich bewerten, Ihren Score berechnen und aus den größten Lücken einen priorisierten Handlungsplan ableiten.
A/B-Testing: Technische Funktionsweise
Nach diesem Modul können Sie einschätzen, ob Ihr Shop client-side, server-side oder hybrid testen sollte, und mit Entwicklern über Flicker, Caching, Hydration in SPAs und den Data Layer auf Augenhöhe sprechen — ohne selbst Code zu schreiben.
A/B-Testing Tools im Überblick
Nach diesem Modul können Sie A/B-Testing-Plattformen in WYSIWYG-Editoren, Feature-Flag-Systeme, Full-Stack- und Open-Source-Lösungen einordnen, sie anhand der sechs Auswahlkriterien (Traffic, Komplexität, Datenschutz, Teamgröße, Integration, Gesamtkosten über drei Jahre) bewerten und rote Flaggen vor Vertragsabschluss erkennen.
Ethische CRO & Dark Patterns vermeiden
Nach diesem Modul können Sie Dark Patterns wie Roach Motel, Confirmshaming, Hidden Costs und False Urgency in Ihrem Shop erkennen, jede Testhypothese mit dem Ethik-Check bewerten und langfristigen Markenwert bewusst über kurzfristige Conversion-Gewinne stellen.
Zertifikat bei Abschluss
Bestehen Sie alle Modul-Quizze und den Abschlusstest, erhalten Sie das Zertifikat „A/B-Testing Mastery“ als PDF.
Noch 8 Module bis zur Prüfung.