← Alle Abbildungen
Die Kennzahlen-Hierarchie kontrollierter Experimente
| Kennzahlen-Kategorie | Operativer Zweck | Typische Beispiele | Entscheidungsregel im Test |
|---|---|---|---|
| 1. Übergeordnetes Kriterium (OEC) | Die maßgebliche strategische Zielfunktion des Unternehmens | Zusammengesetzter Index aus 30-Tage-Kundenbindung und Deckungsbeitrag | Hauptkriterium für die Ausrollung der Variante in den Produktivbetrieb |
| 2. Direkte Treibermetriken | Lokale Leistungswerte zur unmittelbaren Verhaltensmessung | Klickrate auf Call-to-Action, Formular-Startquote, Registrierungsabschluss | Diagnosewerte zur Erklärung, warum das OEC beeinflusst wurde |
| 3. Leitplanken-Metriken (Guardrails) | Unverrückbare Stabilitäts- und Qualitätsgrenzen | Server-Latenz (p95), Fehlerrate beim Bezahlen, Support-Ticketaufkommen | Festes Vetorecht: Verschlechtert sich eine Leitplanke, wird der Test abgebrochen |
| 4. Langfristige Nordstern-Metriken | Makro-Kennzahlen für nachhaltigen Unternehmenswert | Customer Lifetime Value (LTV), Net Revenue Retention (NRR), Kundentreue | Nachträgliche Überprüfung an langfristigen Holdout-Gruppen |
Bei breiten Tabellen horizontal wischen oder scrollen.
Referenz & Evidenz
Quelle: Tabelle aus diesem Essay. Quellen und Einordnung stehen im Beitrag.
Verwandte Abbildungen
-
Die experimentelle Architektur des A/B-Tests
Aus dem Beitrag Was ist ein A/B-Test? Randomisierte Experimente, statistische Power und Governance
-
Statistische Fehlentscheidungen und Teststärke (Power)
Aus dem Beitrag Was ist ein A/B-Test? Randomisierte Experimente, statistische Power und Governance
-
Taxonomie der Experimentier-Architekturen
Aus dem Beitrag Was ist ein A/B-Test? Randomisierte Experimente, statistische Power und Governance