Absolute Übereinstimmung

Absolute Übereinstimmung

Beitragvon mejorixxx » Fr 7. Feb 2025, 08:53

Hallo zusammen

Ich hätte eine Frage darüber, wie man "von Hand" die exackte prozentuale Übereinstimmung wie auch das "adjacent agreement" (Übereinstimmung wenn Skailenwerte gleich oder +/-1 sind)berechnet.

Szenario:
100 Rater haben ein einziges Item auf einer 5er-Skala beurteilt. Gänige Verfahren zur Bestimmung der Interrater-Reliabilität funktionieren nicht, weil ich nur 1 Item habe. Deshalb möchte ich einfach "von Hand" die prozentuale Übereinstimmung messen.

Fiktive Resultate:
Antwort 1 = 20 Nennungen
Antwort 2 = 20 Nennungen
Antwort 3 = 50 Nennungen
Antwort 4 = 10 Nennungne
Antwort 5 = 0 Nennungen

Könnte mir da jemand helfen, mit welcher Formel man das macht, insbesondere, wenn man so viele Rater hat.
mejorixxx
Grünschnabel
Grünschnabel
 
Beiträge: 4
Registriert: Mi 12. Jun 2024, 07:24
Danke gegeben: 0
Danke bekommen: 0 mal in 0 Post

Re: Absolute Übereinstimmung

Beitragvon PonderStibbons » Mi 11. Feb 2026, 19:17

Die Zahl der Paare ist n*(n-1) / 2 = 100*99/2 .
Die Zahl der übereinstimmenden Paare ist (20*19/2)+ (20*19/2) + (50*49/2) + (10*9/2).
PonderStibbons
Foren-Unterstützer
Foren-Unterstützer
 
Beiträge: 11395
Registriert: Sa 4. Jun 2011, 15:04
Wohnort: Ruhrgebiet
Danke gegeben: 51
Danke bekommen: 2511 mal in 2495 Posts


Zurück zu Reliabilitätsanalyse

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 2 Gäste