Tabelle 2Aus „Was ist ein A/B-Test? Randomisierte Experimente, statistische Power und Governance“
Die Kennzahlen-Hierarchie kontrollierter Experimente
Tabelle 2Die Kennzahlen-Hierarchie kontrollierter Experimente
| Kennzahlen-Kategorie | Operativer Zweck | Typische Beispiele | Entscheidungsregel im Test |
|---|---|---|---|
| 1. Übergeordnetes Kriterium (OEC) | Die maßgebliche strategische Zielfunktion des Unternehmens | Zusammengesetzter Index aus 30-Tage-Kundenbindung und Deckungsbeitrag | Hauptkriterium für die Ausrollung der Variante in den Produktivbetrieb |
| 2. Direkte Treibermetriken | Lokale Leistungswerte zur unmittelbaren Verhaltensmessung | Klickrate auf Call-to-Action, Formular-Startquote, Registrierungsabschluss | Diagnosewerte zur Erklärung, warum das OEC beeinflusst wurde |
| 3. Leitplanken-Metriken (Guardrails) | Unverrückbare Stabilitäts- und Qualitätsgrenzen | Server-Latenz (p95), Fehlerrate beim Bezahlen, Support-Ticketaufkommen | Festes Vetorecht: Verschlechtert sich eine Leitplanke, wird der Test abgebrochen |
| 4. Langfristige Nordstern-Metriken | Makro-Kennzahlen für nachhaltigen Unternehmenswert | Customer Lifetime Value (LTV), Net Revenue Retention (NRR), Kundentreue | Nachträgliche Überprüfung an langfristigen Holdout-Gruppen |
Bei breiten Tabellen horizontal wischen oder scrollen.
Quelle: Tabelle aus diesem Essay. Quellen und Einordnung stehen im Beitrag.

Aus dem Beitrag
Aus der Forschung
Was ist ein A/B-Test? Randomisierte Experimente, statistische Power und Governance
Ein A/B-Test ist ein randomisiertes Experiment zweier Varianten, um die kausale Wirkung einer Änderung auf geschäftliche Kennzahlen valide zu messen.
Den Beitrag lesenDiese Abbildung gehört zu einem Essay: Die Zahlen stehen hier, das Argument dort.
Zitieren oder einbetten
Verwandte Abbildungen

Abbildung 1Grafik
Die experimentelle Architektur des A/B-Tests
Was ist ein A/B-Test? Randomisierte Experimente, statistische Power und Governance

Tabelle 1Tabelle
Statistische Fehlentscheidungen und Teststärke (Power)
Was ist ein A/B-Test? Randomisierte Experimente, statistische Power und Governance

Abbildung 2Grafik
Taxonomie der Experimentier-Architekturen
Was ist ein A/B-Test? Randomisierte Experimente, statistische Power und Governance
Kontakt
Schicken Sie die Frage, an der Sie arbeiten.
Forschung, ein Gastvortrag oder eine Frage aus der Praxis.