Aus der Forschung

Was ist Reproduzierbarkeit? Kann eine andere Person das Ergebnis rekonstruieren?

Reproduzierbarkeit fragt, ob ein Ergebnis aus Eingaben, Code, Umgebung und Vorgehen neu aufgebaut werden kann. Das ist keine Replikation.

973 Wörter 5 Min. Lesezeit 2 Quellen  Leser

Management Summary

Reproduzierbarkeit fragt, ob eine andere Person ein Ergebnis aus den angegebenen Eingaben, dem Vorgehen, Code, Rechenumgebung und den erwarteten Ausgaben rekonstruieren kann. Sie unterscheidet sich von einer Replikation mit neuen Daten. Banzi u. a. liefern eine Konsenssicht auf zentrale Reproduzierbarkeitselemente in Planung, Methoden, Datenerhebung, Datenmanagement, Analyse und Verbreitung. Die Open Science Collaboration zeigt, warum eine Replikation ein erklärtes Erfolgskriterium und keine universelle Prozentzahl braucht. Dieser Beitrag baut ein synthetisches Rekonstruktions-Arbeitsblatt mit den Zuständen erneut ausgeführt, Abweichung, nicht verfügbar und bestätigt. Arbeitsblatt und kommerzielle Übersetzung sind eigene Synthese. Ein erfolgreicher Lauf beweist weder inhaltliche Wahrheit noch Kausalität, Messvalidität oder Übertragbarkeit auf ein neues Ziel.

Schlagwörter: Reproduzierbarkeit · Reproduzierbare Forschung · Replikation · Rechenumgebung · Prüfpfad · Forschungsdesign

Auf dieser Seite

Ein Ergebnis kann verständlich zu lesen und trotzdem unmöglich neu aufzubauen sein. Die Datendatei fehlt. Ein manueller Ausschluss wurde in einer Tabelle vorgenommen. Die Analyse nutzte eine Bibliotheksversion, die niemand notiert hat. Das veröffentlichte Diagramm enthält keine Regel dafür, welche Zeilen eingegangen sind.

Reproduzierbarkeit fragt, ob eine andere Person ein Ergebnis aus den dafür erklärten Materialien und dem beschriebenen Vorgehen rekonstruieren kann. Das Objekt ist der Weg von der Frage zur Ausgabe, nicht die Sicherheit oder Bedeutung des Ergebnisses.

Der Beitrag zur Stoppregel im Evidenzreview fragt, wann eine Aussage Entscheidungsgewicht verdient. Der Beitrag zur Messinvarianz fragt, ob ein Ergebnis auf ein benanntes Ziel übertragen werden kann. Diese Seite fragt früher: Kann eine andere Person das Ergebnis überhaupt erneut ausführen?

Was bedeutet Reproduzierbarkeit?

Der praktische Vertrag benennt:

BestandteilErforderliche FrageBeispiel für einen Fehler
Frage oder EstimandWas sollte berechnet oder verglichen werden?Das Diagramm hat keine Zielgröße
EingabenWelche Dateien, Versionen, Filter und Zugänge wurden verwendet?Aktuelle Tabelle ersetzt den historischen Snapshot
VorgehenWelche Transformationen, Ausschlüsse und Entscheidungen kamen in welcher Reihenfolge?Manueller Schritt ist nur erinnert, nicht dokumentiert
CodeWelches Analyseskript und welche Parameter erzeugten die Ausgabe?Notebook-Zelle oder Formel fehlt
UmgebungWelche Laufzeit, Bibliotheken, Konfigurationen und Zufallszustände sind relevant?Paket-Update verändert das Ergebnis
AusgabeWelche Tabelle, Schätzung, Grafik oder Datei soll entstehen?„Dasselbe Ergebnis“ hat keine Toleranzregel

Tabelle 1Was bedeutet Reproduzierbarkeit?

Quelle: Tabelle aus diesem Essay. Quellen und Einordnung stehen im Beitrag.

Zur Abbildungsseite

Banzi u. a. (2026) legen eine Konsensliste zentraler Reproduzierbarkeitselemente in Planung, Methoden, Datenerhebung, Datenmanagement und Analyse sowie Verbreitung vor. Das ist eine wissenschaftliche Konsenssicht und keine geprüfte Scorecard für Unternehmen. Ihr Wert hier liegt in der Breite des Rekonstruktionsvertrags: Reproduzierbarkeit beginnt vor der letzten Berechnung.

Ist Reproduzierbarkeit dasselbe wie Replikation?

Nein. Halten Sie die Prüfungen getrennt:

PrüfungDaten und VorgehenBeantwortete FrageWas sie nicht beantwortet
ReproduzierbarkeitDieselben erklärten Materialien und SchritteKann das Ergebnis rekonstruiert werden?Ob das Ergebnis wahr oder allgemein ist
ReplikationNeue Beobachtung oder neue Daten bei möglichst ähnlichem DesignWiederholt sich ein Ergebnis?Ob der ursprüngliche Workflow vollständig rekonstruierbar war
Externe ValiditätAusgangsergebnis und benanntes ZielIst die Aussage übertragbar?Ob die Ausgangsanalyse erneut laufen kann

Tabelle 2Ist Reproduzierbarkeit dasselbe wie Replikation?

Quelle: Tabelle aus diesem Essay. Quellen und Einordnung stehen im Beitrag.

Zur Abbildungsseite

Die Open Science Collaboration führte 100 psychologische Studien erneut durch und berichtete mehr als ein Maß für Replikationserfolg. Die Lehre für einen kommerziellen Review ist keine zu übernehmende Prozentzahl. Die Frage „Hat es repliziert?“ braucht ein erklärtes Kriterium, eine Population, ein Ergebnis und einen Vergleich.

Wie sieht ein Rekonstruktions-Arbeitsblatt aus?

Die sechs Zeilen sind synthetisch. Sie zeigen Bereitschaftszustände, keine Reproduzierbarkeitsquote für ein Unternehmen, eine Disziplin oder einen Datensatz.

IDFrage oder AusgabeEingaben und DatenpaketCode und UmgebungErwartete AusgabeLaufstatus und Entscheidung
R-01Kohortenquote an Tag 14Snapshot V3 und Zulässigkeitsregel gehaltenSkript S-12; Laufzeit erfasst50,0 %Innerhalb der Toleranz bestätigt
R-02Umsatzbrücke je PositionRechnungsdatei gehalten; Produktzuordnung unklarSkript S-18; Paket-Lock fehltFünf-Effekt-BrückeAbweichungsrisiko; Freigabe halten
R-03Survey-Mittel je SpracheDatenpaket und Codebuch gehaltenSkript gehalten; manueller AusschlussMittelwerte und AnzahlenLauf offen bis Ausschlusslog vorliegt
R-04Prognosefehler je HorizontBasisprognose und Istwerte gehaltenNotebook und Bibliotheksversionen gehaltenFehler-Tabelle und GrafikBestätigt; keine Kausalitätsaussage
R-05Kunden-SegmentmodellZugang eingeschränkt; nur abgeleitete DateiSkript verfügbar; Zufallsstart fehltModellkennzahlenEingabe nicht verfügbar; Rekonstruktion nicht möglich
R-06BehandlungsvergleichPräregistrierte Daten und Regel gehaltenSkript und Umgebung gehaltenEffektschätzung und IntervallRekonstruiert; Replikation bleibt offen

Abbildung 1Das synthetische Rekonstruktions-Arbeitsblatt

Die Zeilen sind illustrativ. Bestätigte Rekonstruktion, Replikation und Kausalvalidität bleiben getrennte Zustände.

Quelle: Synthetisches Arbeitsblatt des Autors auf Grundlage von Banzi u. a. (2026) und der Open Science Collaboration (2015); alle Zeilen und Zustände sind illustrativ.

Zur Abbildungsseite

R-02 ist nicht „fast reproduzierbar“, nur weil die fertige Grafik plausibel aussieht. Eine fehlende Produktzuordnung kann die Positionen verändern. R-05 ist nicht gelöst, wenn Modellkennzahlen veröffentlicht werden, die Eingabe aber nicht rekonstruiert werden kann. R-06 ist als Workflow reproduzierbar, während die Replikationsfrage wegen der neuen Beobachtung offen bleibt.

Welche Entscheidungen gehören in den Workflow-Datensatz?

Halten Sie diese Entscheidungen sichtbar, statt sie in Prosa zu verstecken:

  • Einheit, Zielgröße und Analysefenster;
  • Quelldatei, Snapshot, Version und Zugangsbedingung;
  • jeder Filter, Ausschluss, Join, jede Transformation und manuelle Änderung;
  • Analyseskript, Parameterdatei, Laufzeit, Bibliotheksversionen und Zufallsstart, soweit relevant;
  • erwartete Ausgabe, Vergleichstoleranz und bekannte Nichtdeterministik;
  • Person oder Prozess, die eine Änderung freigegeben haben, mit Datum;
  • Ergebnis des erneuten Laufs einschließlich Abweichung und Nichtverfügbarkeit.

Eine Präregistrierung kann ausgewählte Fragen oder Analyseentscheidungen vor der Beobachtung festhalten. Sie macht eine Analyse nicht unveränderbar. Eine Änderung kann legitim sein, wenn sie datiert, begründet und von der ursprünglichen Planung getrennt wird.

Was kann ein erfolgreicher erneuter Lauf beweisen?

Er kann zeigen, dass der erklärte Pfad unter der erklärten Umgebung die erklärte Ausgabe erzeugt. Er beweist damit allein nicht, dass die Eingabe korrekt, das Konstrukt valide, das Modell richtig spezifiziert, der Vergleich kausal oder das Ergebnis auf ein neues Ziel übertragbar ist.

Darum sollte ein Rekonstruktions-Arbeitsblatt sowohl Status als auch Entscheidung enthalten. Ein bestätigter Lauf kann die Methode für die Prüfung freigeben. Eine Abweichung kann eine Fehlersuche öffnen. Eine nicht verfügbare Eingabe kann eine stärkere Aussage blockieren. Kein Status ist selbst ein inhaltliches Ergebnis.

Wie prüft ein Team Reproduzierbarkeit?

  1. Frage, Einheit, Ergebnis und Beobachtungsfenster einfrieren.
  2. Exakte Eingabeversionen und Datenpaket zusammenstellen.
  3. Jede Transformation, jeden Ausschluss und manuellen Schritt wiederholen.
  4. Erklärtes Skript in der erklärten Umgebung ausführen.
  5. Ausgabe mit Toleranz oder Exaktvergleich gegen das berichtete Ergebnis prüfen.
  6. Abweichung, fehlende Eingabe, Umgebungsdrift oder erfolgreiche Rekonstruktion protokollieren.
  7. Neue Daten als Replikation und ein verändertes Ziel als externe Validität behandeln.

Reproduzierbarkeit ist Evidenz über den Rekonstruktionspfad. Sie ist kein universeller Score, keine Wahrheitsgarantie und kein Ersatz für eine neue Studie.

Referenzen

  1. Banzi, R., Varga, M., Gelsleichter, Y. A., Vinatier, C., Moher, D., & Naudet, F. (2026). An international consensus on core reproducibility items in research. PLoS Biology, 24(4), e3003726. https://doi.org/10.1371/journal.pbio.3003726
  2. Open Science Collaboration. (2015). Estimating the reproducibility of psychological science. Science, 349(6251), aac4716. https://doi.org/10.1126/science.aac4716

Weitergeben

Diesen Beitrag teilen

Wenn er Ihnen etwas gebracht hat, bringt er jemandem in Ihrem Team vermutlich auch etwas.

Als PDF herunterladen

Ein vollständiges Dokument – Titelseite, Inhalt, Quellen, und die Zitierweise auf der letzten Seite.

Sinan Isoglu

Über den Autor

Sinan Isoglu, MBA (Quantic)

Führungskraft für Umsatzwachstum, Dozent und Doktorand

Sinan Isoglu ist Führungskraft für Umsatzwachstum, Dozent und Doktorand. Seine Arbeit verbindet Go-to-Market, Pricing und Revenue Operations; seine Promotion an der EM Normandie untersucht die Integration von Vertrieb und Marketing nach grenzüberschreitenden M&A. An der IU Internationalen Hochschule lehrt er Marketing und Wachstum.

Qualifikationen

  • Doktorand, EM Normandie Business School
  • MBA, Quantic School of Business and Technology
  • Dozent, IU Internationale Hochschule

Schreibt über

  • Go-to-Market
  • Pricing
  • Revenue Operations
  • KI im Handel
  • Grenzüberschreitendes Wachstum

Die Spur

Der Test hinter dieser Frage.

Dieser Beitrag gehört zur Forschung: der strengere Maßstab für die Muster, die aus der Praxis entstehen.

Kommentare

Mitdenken.

Kommentieren Sie den Text oder markieren Sie oben eine Passage, um sie direkt zu zitieren.

Kommentar schreiben

Kommentare werden vor der Veröffentlichung persönlich geprüft. Name und Kommentar werden für die Veröffentlichung gespeichert. Siehe den Datenschutzhinweis.