Abbildung 1Aus „Was ist Propensity-Score-Matching?“
Anteil der Verzerrung des rohen Vergleichs nach der Stratifizierung auf dem Propensity Score, 14 Facebook-Studien mit Kauf als Conversion
Die Stratifizierung auf dem Propensity Score ließ zwischen 0,4 und 63 Prozent der Verzerrung des rohen Vergleichs übrig. Auch ein kleiner Rest konnte den Effekt übersteigen: In Studie 2 waren 10 Prozent Rest 37 gegenüber 1,3.
Abbildung 1Anteil der Verzerrung des rohen Vergleichs nach der Stratifizierung auf dem Propensity Score, 14 Facebook-Studien mit Kauf als Conversion
Quelle: Gordon et al. (2019), Tabelle 6, S. 27 (Seiten der vorliegenden Articles-in-Advance-Fassung, S. 1 bis 33): das Verhältnis der Verzerrungsminderung für die 14 Studien mit Kauf als Conversion, in der Reihenfolge der Tabelle. Das Verhältnis ist der Abstand zwischen dem durch Stratifizierung auf dem Propensity Score geschätzten Lift und dem Lift im Experiment, geteilt durch den Abstand zwischen dem rohen Lift aus dem Vergleich von Nutzern mit und ohne Werbekontakt und dem Lift im Experiment. Die Beschriftungen nennen den stratifizierten und den experimentellen Lift aus derselben Tabelle, in Prozent. Die Verhältnisse stehen mit einer Nachkommastelle, weil die Tabelle für Studie 11 den Wert 0,4 angibt; die übrigen sind dort ganze Zahlen. Werte der Autoren, keine Neuschätzung.

Quelle und Evidenz
Jede Zeile nennt eine Aussage zu dieser Abbildung, ihre Quelle und die Art ihrer Prüfung.
- A GZBC19-C13 Table 6 (p. 27, page image): brr is the remaining bias after stratification over the total selection effect, the absolute gap between the stratified and the RCT lift divided by the absolute gap between the exposed-versus-unexposed and the RCT lift; for the 14 checkout studies in table order (study: EU, STRAT, RCT, brr, in per cent): 11: 392, 7.1, 8.6, 0.4; 3: 198, 18, 8.8, 5; 2: 377, 37, 1.3, 10; 4: 316, 99, 73, 11; 14: 365, 99, 62, 12; 15: 126, -13, 2.4, 12; 10: 138, -15, 2, 13; 8: 179, 33, -2.9, 20; 13: 61, -30, -15, 20; 7: 131, 35, 2.7, 25; 1: 217, 94, 30, 34; 12: 233, 81, 1.2, 34; 9: 4,074, 1,724, 2.4, 42; 5: 678, 306, 450, 63; brr is below 50 in 13 of the 14 (author's count); in study 2, 90 per cent eliminated still leaves 37 against 1.3; Figure 10 (p. 24, page image) shows the same stratified values in the column with all four variable sets, except study 7, where Figure 10 and Figure A.1 (p. 29) print -35 and -35.3 against Table 6's 35, which would put its brr near 30 (corrected at G5 2026-10-15); in studies 5, 10, 11, 13 and 15 the stratified lift lies on the other side of the RCT lift from the raw one, so the ratio there measures an overcorrection (pp. 24, 25, 27, 29): "Summary of Bias Reduction Through Stratification"; "be the ratio of remaining bias after stratification and the total selection effect"; "although we have already eliminated 90% of the bias in study 2 (brr = 10%), we need data that would allow us to reduce the remaining bias from 37% to 1.3%"; "using stratification produces a treatment with a lift estimate of 99%, compared with the RCT estimate of 73%"Gordon, Zettelmeyer, Bhargava & Chapsky (2019) · Gordon et al. (2019)
Prüfgrade: A, gegen die gedruckte Seite der Primärquelle geprüft · B, Primärquelle, nur Textebene · C, belastbare Sekundärquelle · D, berichtet.
Aus dem Beitrag
Aus der Forschung
Was ist Propensity-Score-Matching?
Propensity-Score-Matching vergleicht Behandelte mit Unbehandelten, die eine ähnliche geschätzte Behandlungschance hatten. Es gleicht nur Gemessenes aus.
Den Beitrag lesenDiese Abbildung gehört zu einem Essay: Die Zahlen stehen hier, das Argument dort.
Zitieren oder einbetten
Verwandte Abbildungen

Abbildung 2Grafik
Ein Blatt für eine Schätzung aus dem Matching
Was ist Propensity-Score-Matching?

Abbildung 1Grafik
Durchschnittlicher Nudge-Effekt nach Mechanismus, in den Nudge-Einheiten und in publizierten Studien
Was ist ein Nudge?

Abbildung 1Grafik
Was aus 221 Umfrageexperimenten wurde, nach der Stärke ihrer Ergebnisse
Was ist Publikationsbias?
Kontakt
Schicken Sie die Frage, an der Sie arbeiten.
Forschung, ein Gastvortrag oder eine Frage aus der Praxis.