Interrater-Reliabilität

[Lascolinho]

Hallo!

Ich habe folgendes Problem:
Ich habe mehrere Testinterviews, die von Supervisoren bewertet werden sollen anhand von verschiedenen Kriterien (1:Hartnäckigkeit,2:Freundlichkeit... bis 15)

Jetzt bräuchte ich für jedes Interview eine Reliabilitätsstatistik für die Interviewer und die Kriterien
Muss ich dann die Kriterien als Fälle und die Interviewer als Variablen definieren?
Welche Statistik muss ich anwenden?
(Ich besitze im Moment lediglich eine Datei in der Interviews (1 bis 3), Supervisoren (mit Namen) und die einzelnen Kriterien als eigene Variablen)

Vielen Dank schoneinmal für Euere Mühe!

Gruß

Thomas

[drfg2008]

Welche Statistik muss ich anwenden?

http://www.stattutorials.com/SPSS/TUTOR ... -Kappa.htm

Bortz schlägt Kappa-Koeffizient von Fleiss vor bei m Beurteiler von N Objekten. Kap. 6.1.2 S.270

Frage ist, wie die Daten skaliert sind, sonst käme auch weighted Kappa oder Konkordanz-Koeffizient von Kendall in Frage (Kap. 6.2.2).

Gruß