Abbildung 1Aus „Was ist statistische Schlussfolgerungsvalidität? Ein signifikanter Befund kann falsch sein“
Der synthetische statistische Inferenz-Review
Signifikanz ist ein Feld im Inferenzdatensatz. Effekt, Unsicherheit, Testfamilie, Modell und zulässige Formulierung müssen gemeinsam sichtbar bleiben.
Abbildung 1Der synthetische statistische Inferenz-Review
| ID | Gemeldetes Ergebnis | Unsicherheit und Information | Test- oder Modellkontext | Zulässige Schlussfolgerung | Noch nicht festgestellt |
|---|---|---|---|---|---|
| T-01 | Schätzung +2,0 Punkte, p = 0,01 | 95-%-Intervall +0,5 bis +3,5; geplante Teststärke ausreichend | Ein erklärtes Ergebnis und Modell | Evidenz für positiven Zusammenhang in der Stichprobe | Praktische Bedeutung oder Kausalität |
| T-02 | Schätzung +0,2 Punkte, p < 0,001 | Enges Intervall +0,15 bis +0,25 | Große Stichprobe; Skala ist klein | Präzise geschätzter kleiner Unterschied | Wesentlicher Geschäftswert |
| T-03 | Schätzung +8 Punkte, p = 0,08 | Breites Intervall -1 bis +17 | Ein Ergebnis; begrenzte Information | Daten reichen für oder gegen Effekt nicht aus | Aussage „kein Effekt“ |
| T-04 | Schätzung +5 Punkte, p = 0,03 | Intervall +0,4 bis +9,6 | Zwölf Ergebnisse getestet; keine Testfamilienregel | Allenfalls markierter Befund bis zur Mehrfachtestprüfung | Bestätigte Entdeckung |
| T-05 | Schätzung +10 Punkte, p = 0,02 | Intervall +2 bis +18 | Modell nach Sichtung des Ergebnisses geändert | Bedingter nachträglicher Befund | Vorabinterpretation |
| T-06 | Schätzung +6 Punkte, p = 0,01 | Intervall +2 bis +10 | Eine Segment- und 14-Tage-Analyse | Positiver Befund in Segment und Zeitraum | Transfer auf alle Kunden oder 90-Tage-Verlängerung |
Bei breiten Tabellen horizontal wischen oder scrollen.
Quelle: Synthetischer Inferenz-Review des Autors auf Grundlage von Cohen (1994) und Ioannidis (2005). Schätzungen, Intervalle, Testverläufe und zulässige Schlussfolgerungen sind illustrativ.
Quelle und Evidenz
Jede Zeile nennt eine Aussage zu dieser Abbildung, ihre Quelle und die Art ihrer Prüfung.
- A COH94-C1 "the ritual of null hypothesis significance testing mechanical dichotomous decisions around a sacred 05 criterion still persists", and the article reviews the problems with itCohen (1994), article
- A COH94-C2 What he recommends instead: "an emphasis on estimating effect sizes using confidence intervals and the informed use of available statistical methods", with graphic methods and better measurementCohen (1994), article
- A IOANNIDIS05P-C1 "the probability that a research claim is true may depend on study power and bias the number of other studies on the same question" and the ratio of true to no relationships in the fieldIoannidis (2005), PLoS Medicine article
- A IOANNIDIS05P-C2 Bias is the lever: "with increasing bias the chances that a research finding is true diminish considerably this is shown for different levels of power and for different pre study odds"Ioannidis (2005), PLoS Medicine article
- B R08-OWN-C1 Statistical conclusion validity asks whether the inference from data and model to the stated statistical conclusion is warranted under its assumptions and error controlsAuthor framework grounded in COH94-C1 to COH94-C3
- B R08-OWN-C2 A review should report effect estimate, uncertainty interval, sample or information basis, testing family, model specification, and conclusion wording togetherAuthor framework
- B R08-OWN-C7 The six-row inference table contains illustrative estimates and labels only; it is not an observed study result or benchmarkAuthor synthetic object
- B R08-OWN-C9 A significant result should be bounded by the population, outcome, model, testing family, and observation window that produced itAuthor operating rule
Prüfgrade: A, gegen die gedruckte Seite der Primärquelle geprüft · B, Primärquelle, nur Textebene · C, belastbare Sekundärquelle · D, berichtet.
Aus dem Beitrag
Aus der Forschung
Was ist statistische Schlussfolgerungsvalidität? Ein signifikanter Befund kann falsch sein
Statistische Schlussfolgerungsvalidität fragt, ob Daten und Modell den Befund tragen. Prüfen Sie Effekt, Unsicherheit, Teststärke und Mehrfachtests.
Den Beitrag lesenDiese Abbildung gehört zu einem Essay: Die Zahlen stehen hier, das Argument dort.
Zitieren oder einbetten
Verwandte Abbildungen
Tabelle 1Tabelle
Was bedeutet statistische Schlussfolgerungsvalidität?
Was ist statistische Schlussfolgerungsvalidität? Ein signifikanter Befund kann falsch sein
Abbildung 1Grafik
Die synthetische Tabelle zur Lineage-Rekonstruktion
Was ist Data Lineage? Die Transformationen hinter einem Ergebnis
Abbildung 1Grafik
Das synthetische Provenienzregister
Was ist Datenprovenienz? Der Kontext hinter einer Zahl
Kontakt
Schicken Sie die Frage, an der Sie arbeiten.
Forschung, ein Gastvortrag oder eine Frage aus der Praxis.