Direkte Vergleichbarkeit von Effektstärkemaßen

Fragen, die sich auf kein spezielles Verfahren beziehen.

Direkte Vergleichbarkeit von Effektstärkemaßen

Beitragvon JohannaSch » Mi 17. Jan 2018, 17:21

Hallo! Lassen sich Effektstärkemaße (wie z.B. Cohens d) ohne Bedenken zwischen verschiedenen Studien (mit verschiedenen Stichprobengrößen, Varianzen etc.) bedenkenlos vergleichen? - Beispielsweise die Schlussfolgerung, eine Intervention X wirkt bei Personen mit Depression (Studie 1) besser als bei Personen mit Angststörungen (Studie 2), weil das d in Studie 1 größer ist..? Oder gibt es studientypische Bedingungen, die Effektstärken beeinflussen und dieses Schluss unzulässig machen?
JohannaSch
User
User
 
Beiträge: 34
Registriert: Fr 31. Jan 2014, 12:08
Danke gegeben: 14
Danke bekommen: 0 mal in 0 Post

Re: Direkte Vergleichbarkeit von Effektstärkemaßen

Beitragvon PonderStibbons » Fr 19. Jan 2018, 10:25

Beispielsweise die Schlussfolgerung, eine Intervention X wirkt bei Personen mit Depression (Studie 1) besser als bei Personen mit Angststörungen (Studie 2), weil das d in Studie 1 größer ist..?

Nein.
Oder gibt es studientypische Bedingungen, die Effektstärken beeinflussen und dieses Schluss unzulässig machen?

Effektstärken gibt es in Grundgesamtheiten. In Stichproben kann man zwar die Effektstärkemaße berechnen, aber sie sind nicht die tatsächlichen Effektstärken, da durch den Stichprobenzufall größer oder kleiner als die tatsächliche Effektstärke. Das ist ja auch der Grund für Signifikanztests.

Je kleiner die Stichprobe, desto mehr wird im Schnitt das Effektstärkemaß durch Zufall on dem tatsächlichen Effekt abweichen. Deswegen ist die Angabe einer Effektstärke für eine Einzelstudie streng genommen oft ein Hinweis auf ein Verständnisproblem. Sinnvoll sind sie, wenn man aus mehreren Studien einen Gesamt-Effekt schätzen will (Meta-Analysen).

Daneben kann es auch andere Faktoren geben, die den Vergleich schwierig machen, z.B. unterschiedliche Streuungen, unterschiedliche Variablen/Messungen.

Mit freundliche Grüßen

PonderStibbons
PonderStibbons
Foren-Unterstützer
Foren-Unterstützer
 
Beiträge: 11228
Registriert: Sa 4. Jun 2011, 15:04
Wohnort: Ruhrgebiet
Danke gegeben: 49
Danke bekommen: 2467 mal in 2451 Posts

folgende User möchten sich bei PonderStibbons bedanken:
JohannaSch

Re: Direkte Vergleichbarkeit von Effektstärkemaßen

Beitragvon bele » Fr 19. Jan 2018, 14:57

Wenn man anstelle zweier Effektstärkeschätzer deren 95%-Konfidenzintervalle hätte, dann könnte man auf deren Überlappung prüfen. Üblicherweise wird aber die Ungenauigkeit bei der Schätzung der Effektstärke nicht angegeben.

LG,
Bernhard
----
`Oh, you can't help that,' said the Cat: `we're all mad here. I'm mad. You're mad.'
`How do you know I'm mad?' said Alice.
`You must be,' said the Cat, `or you wouldn't have come here.'
(Lewis Carol, Alice in Wonderland)
bele
Schlaflos in Seattle
Schlaflos in Seattle
 
Beiträge: 5748
Registriert: Do 2. Jun 2011, 23:16
Danke gegeben: 15
Danke bekommen: 1342 mal in 1329 Posts

folgende User möchten sich bei bele bedanken:
JohannaSch


Zurück zu Allgemeine Fragen

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 2 Gäste