STATISTIK-FORUM.de

[apstockmann]

Hallo Zusammen,

Ich habe eine Frage bezüglich der Signifikanz bei Effekstärken.
Ich schreibe zur Zeit ein systemic review über die Wirksamkeit von Online-Therapie und bin ein wenig verwirrt, wie ich in den Studien erkennen kann, ob die Effektstärke signifikant ist.

Bedeutet eine signifikante Differenz der Mittelwerte, dass die dementsprechend hohe Effektstärke auch signifikant ist?

Vielen Dank schon einmal im Voraus für eure Hilfe,

Pauline

[PonderStibbons]

Das sind 2 unterschiedliche Paar Schuhe.

Statistische Signifikanz ist eine Aussage darüber, ob das Datenmuster in einer Stichprobe mit der Nullhypothese (in der Regel sowas wie: "Der Korrelationskoeffizient in der Grundgesamtheit beträgt r=0,00000000"; oder: "der Mittelwertunterschied in der Grundgesamtheit ist = 0,0000000) vereinbar ist.

Effektstärken sind keine Aussagen zu Stichproben, sondern über die Verhältnisse in Grundgesamtheiten.

Zur Verwirrung mag es führen, dass man ein Effektstärkemaß auch in einer Stichprobe berechnen kann (z.B. einen standardisierten Mittelwertunterschied wie Cohens d). Aber das ist nicht die tatsächliche, sondern eine verzerrte Effektstärke, weil in einer Stichprobe der tatsächliche Effekt aufgrund des Stichproben-Zufalls stets mehr oder minder stark vom "wahren" Effekt abweicht.

Wenn man mehrere Studien hat, kann man sich ansehen, welches Muster die aus den Stichproben berechneten Effektstärkemaße über die Studien hinweg ergeben. Z.B. ob die Stichproben-Effektstärkemaße um Null schwanken. Oder ob sie alle über 0 liegen. Oder auch andere Muster (wobei größere Stichproben zuverlässigere Schätzungen ergeben). Das kann dabei helfen, die tatsächliche Effektstärke (in der Grundgesamtheit) abzuschätzen.

Mit freundlichen Grüßen

PonderStibbons

[apstockmann]

@PonderStibbons
Vielen Dank erstmal für deine schnelle Antwort. Und wie kann ich diese Signifikanz von einer Stichproben Effektstärke (wie cohen's d) erkennen? Ist dies eine weitere Rechnung, die in Untersuchungen manchmal berechnet werden oder kann diese von den Signifikanzen der anderen Ergebnisse abgeleitet werden?


Vielen Dank schon einmal im Voraus für die Hilfe!

Liebe Grüße,

Pauline

[PonderStibbons]

Und wie kann ich diese Signifikanz von einer Stichproben Effektstärke (wie cohen's d) erkennen?

Was meint Du konkret mit Signifikanz? Statistische Signifikanz? Die berechnet man nicht anhand von Effekstärkemaßen wie Cohens d, sondern mithilfe von Teststatistiken (wie F-Test, t-Test etc.).

Mit freundlichen Grüßen

PonderStibbons

[apstockmann]

Was meint Du konkret mit Signifikanz?

Ja genau, ich meine die statistische Signifikanz im Gruppenvergleich (e.g. Intervention vs Warteliste) - die entnehme ich also der Teststatistiken und berichte dazu die Effektstärke?

Vielen, vielen Dank für deine Hilfe!

[PonderStibbons]

Wie bist Du dazu gekommen, ein "systemic [systemisch oder systematisch?] review über die Wirksamkeit von Online-Therapie" zu schreiben? Wofür oder wozu ist das?

Mit freundlichen Grüßen

PonderStibbons

[apstockmann]

Ja genau. Es ist das Thema meiner Masterarbeit

Liebe Grüße,

Pauline

[PonderStibbons]

die entnehme ich also der Teststatistiken und berichte dazu die Effektstärke?

Ich würde mich an Deiner Stelle an dem orientieren, was in anderen, handwerklich ordentlich
erscheinenden Reviews der Standard bei der Auswertung und Darstellung ist, und/oder würde meinen
Betreuer fragen. Im Zweifel berichtest Du sowohl das eine als auch das andere.

Mit freundlichen Grüßen

PonderStibbons

[apstockmann]

Ja genau, meine Betreuerin hat mich darum gebeten die statistische Signifikanz im Gruppenvergleich mit den Effektstärken zu berichten.