Interrater Reliabilität - Übereinstimmungsmaße

[cap]

Hallo!

Folgendes Problem:

Wenn ich die Interraterreliabilität
überprüfen will, nutze ich normalerweise Cohens Kappa.
Und berechne unter zu Hilfenahme einer Kreuztabelle,
den Übereinstimmungswert zwischen verschiedenen Ratern.
(In Spss durch Fälle gewichten, und Häfigkeiten auszählen)

Wenn ich nun jedoch keinen festen Kategorien (gebundenes Antwortformat) habe, an Hand derer ich Übereinstimmungen berechnen kann,

wie
Rater A sagt: xmal Psychologische Störung, xmal Neurologische, xmal Organische
Rater B sagt:xmal Psychologische Störung, xmal Neurologische, xmal Organische

(dann lässt sich das als Kreuztabelle ja leicht berechnen)

sondern nur z.B unterschiedliche Datumsangaben oder Störungen habe, die ich zur Berechnung nicht alle in einer Kreuzatbelle auflisten kann), wie gehe ich dann vor?

Beispielsweise:

In Punkt A (oder Frage A) 10 Übereinstimmungen, 5 Nichtübereinstimmungen
in der Bewertung der Probanden zwischen Rater A und B.

Wie berechne ich dann einen Übereinstimmungswert. Denn eine richtige Kreuztabelle habe ich dann nicht, da es nur Übereinstimmung und Nichtübereinstimmung gibt.

Ist es dann trotzdem möglich einen Kappa-Wert zu berechnen?
Oder gibt es eine andere Berechnungsöglichkeit.

Hoffe, die Frage ist einigermaßen verständlich!

Probiere es noch einmal anders zu formulieren.

Habe 1000 Bögen auf auf denen zwei Rater, Personendaten beurteilt haben.
Möchte wissen, wie hoch ist zwischen den zwei Ratern die Übereinstimmung.

Als Info dafür habe ich nur:

In 1 Punkt 900 mal bei beiden Ratern gleiche Einschätzung, 100 mal nicht.
In 2 Punkt 800 mal gleiche Einschätzung 200 mal nicht.
usw.

Kann ich damit eine Interraterreliabilität berechnen? Wenn ja, wie?

Danke für Antworten, Hilfen und Nachfragen!

Cap

[drfg2008]

Bortz und Lienert (Kurzgefasste Statistik ...[1]) beschreiben in Kap. 6.1.1 den Kappa-Koeffizienten von Cohen für zwei Beurteiler.

Das Problem scheint die zusätzliche Differenzierung nach "1 Punkt", "2 Punkt" zu sein ? Die Darstellung der Frage ist mir nicht verständlich.

[1]
http://www.amazon.de/Kurzgefasste-Statistik-klinische-Forschung-Springer-Lehrbuch/dp/3540757376/ref=sr_1_1?ie=UTF8&qid=1323788249&sr=8-1