Beurteilerübereinstimmung - Cohens kappa oder doch anders?

Beurteilerübereinstimmung - Cohens kappa oder doch anders?

Beitragvon Estefania » Mo 6. Aug 2012, 13:05

Hallo allerseits,

ich habe folgendes Problem:

Es wurden 84 Videos von verschiedenen Personen zweimal angesehen. Verschiedene Personen sind einzuteilen in Testleiter (14Personen) und Überprüfer (2Personen) (also jedes Video wurde von einem Testleiter und einem Überprüfer gesichtet). Während der Videosichtung sollten die Beobachter auf 36Items pro Video achten und diese mit erfüllt oder nicht erfüllt bewerten. Nun soll ich ausrechnen, wie die Beurteilerübereinstimmung ist.

Bisher ist für jedes einzelne Video ein Cohens kappa ausgerechnet worden, wobei dies sehr unübersichtlich ist und so wenig weiter verwendet werden kann. Jedoch stehe ich gerade auf dem Schlauch, wie ich es anders bzw. besser machen könnte und bin daher über jeden Tipp sehr dankbar!

Das einfachste was ich machen könnte, wäre einen Mittelwert von allen Cohens kappa zu bilden, bin mir jedoch nicht sicher, ob das machbar ist und habe in der Literatur dazu auch nichts gefunden.

Würde mich über viele und leicht umsetzbare Ideen (SPSS oder STATA) sehr freuen.

Viele Grüße

Estefania
Estefania
Einmal-Poster
Einmal-Poster
 
Beiträge: 1
Registriert: Mo 6. Aug 2012, 12:55
Danke gegeben: 0
Danke bekommen: 0 mal in 0 Post

Zurück zu Kreuztabellen & Chi²

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 3 Gäste