Der Kappa-Koeffizient, oft als Kappa (κ) bezeichnet, ist ein statistisches Maß, das den Grad der Übereinstimmung zwischen zwei oder mehr Beurteilern oder Beobachtern bei der Kategorisierung von Elementen bewertet. Im Gegensatz zur einfachen Prozentübereinstimmung, die irreführend sein kann, berücksichtigt Kappa die Möglichkeit, dass die Übereinstimmung zufällig auftritt.
Der Wert von Kappa liegt zwischen -1 und 1, wobei:
- Ein Wert von 1 perfekte Übereinstimmung zwischen den Beurteilern anzeigt.
- Ein Wert von 0 keine Übereinstimmung über das hinaus bedeutet, was zufällig zu erwarten wäre.
- Negative Werte deuten auf eine geringere Übereinstimmung hin als zufällig zu erwarten wäre, was auf systematische Meinungsverschiedenheiten hinweist.
Kappa ist besonders nützlich in Bereichen wie medicine, psychology, and Sozialwissenschaften where subjective judgments are common. For instance, if two doctors are diagnosing a patient based on the same set of symptoms, Kappa can help quantify how similarly they agree on the diagnosis.
Um Kappa zu berechnen, wird die beobachtete Übereinstimmung (der Anteil der Male, bei denen die Beurteiler übereinstimmen) mit der erwarteten Übereinstimmung (der Anteil der Male, bei denen sie zufällig übereinstimmen würden) verglichen. Die Formel für Kappa lautet:
κ = (P_o – P_e) / (1 – P_e)
Wo:
- P_o = beobachtete Übereinstimmung
- P_e = erwartete Übereinstimmung
Zusammenfassend ist der Kappa-Koeffizient ein wertvolles Werkzeug für Forscher und Praktiker, um die Inter-Rater-Reliabilität zu quantifizieren und Einblicke in die Konsistenz kategorialer Urteile zu gewinnen.