So berechnen sie cohens kappa in excel
Cohens Kappa wird verwendet, um den Grad der Übereinstimmung zwischen zwei Bewertern oder Juroren zu messen, die jedes Element in sich gegenseitig ausschließende Kategorien einteilen.
Die Kappa-Formel von Cohen wird wie folgt berechnet:
k = (p o – p e ) / (1 – p e )
Gold:
- p o : Relative Übereinstimmung zwischen den Bewertern beobachtet
- p e : Hypothetische Wahrscheinlichkeit einer zufälligen Übereinstimmung
Anstatt einfach den Prozentsatz der Punkte zu berechnen, bei denen sich die Bewerter einig sind, versucht Cohens Kappa die Tatsache zu berücksichtigen, dass sich die Bewerter bei einigen Punkten zufällig einig sein können.
Der Wert von Cohens Kappa liegt immer zwischen 0 und 1, wobei 0 auf keine Übereinstimmung zwischen den beiden Bewertern hinweist und 1 auf eine vollständige Übereinstimmung zwischen den beiden Bewertern hinweist.
Die folgende Tabelle fasst zusammen, wie die verschiedenen Werte von Cohens Kappa zu interpretieren sind:
Das folgende Beispiel zeigt, wie Cohens Kappa in Excel berechnet wird.
Beispiel: Berechnen Sie Cohens Kappa in Excel
Angenommen, zwei Kuratoren eines Kunstmuseums werden gebeten, 70 Gemälde zu bewerten, um festzustellen, ob sie gut genug sind, um in einer neuen Ausstellung gezeigt zu werden.
Die folgende 2×2-Tabelle zeigt die Ergebnisse der Auswertungen:
Der folgende Screenshot zeigt, wie Cohens Kappa für Bewerter berechnet wird, einschließlich der verwendeten Formeln:
Der p-Wert 0 stellt die relative Übereinstimmung zwischen den Bewertern dar. Dies ist der Anteil der Gesamtpunktzahl, für den beide Bewerter mit „Ja“ oder „Nein“ geantwortet haben.
Es ergibt sich ein Wert von 0,6429 .
Der Wert p e stellt die Wahrscheinlichkeit dar, dass die Bewerter rein zufällig eine Einigung erzielen konnten.
Es ergibt sich ein Wert von 0,5 .
Der k- Wert stellt Cohens Kappa dar, der wie folgt berechnet wird:
- k = (p o – p e ) / (1 – p e )
- k = (0,6429 – 0,5) / (1 – 0,5)
- k = 0,2857
Es stellt sich heraus, dass Cohens Kappa 0,2857 beträgt.
Basierend auf der vorherigen Tabelle würden wir sagen, dass die beiden Bewerter nur eine „ziemlich“ große Übereinstimmung hatten.
Zusätzliche Ressourcen
Die folgenden Tutorials bieten zusätzliche Ressourcen zu Cohens Kappa:
Einführung in Cohens Kappa
Cohens Kappa-Rechner