Cara menghitung kappa cohen di excel

Kappa Cohen digunakan untuk mengukur tingkat kesepakatan antara dua penilai atau hakim yang mengklasifikasikan setiap item ke dalam kategori yang saling eksklusif.

Rumus kappa Cohen dihitung sebagai berikut:

k = ( _po – _pe ) / (1 – _pe )

Emas:

• p _o : Kesepakatan relatif yang diamati di antara para evaluator
• _pe : Probabilitas hipotetis dari kesepakatan kebetulan

Daripada hanya menghitung persentase item yang disetujui oleh penilai, Kappa Cohen mencoba menjelaskan fakta bahwa penilai mungkin menyetujui beberapa item hanya secara kebetulan.

Nilai Kappa Cohen selalu antara 0 dan 1, 0 menunjukkan tidak adanya kesepakatan antara kedua penilai dan 1 menunjukkan kesepakatan sempurna antara kedua penilai.

Tabel berikut merangkum cara menafsirkan nilai-nilai Kappa Cohen yang berbeda:

Contoh berikut menunjukkan cara menghitung Kappa Cohen di Excel.

Contoh: Hitung Kappa Cohen di Excel

Misalkan dua kurator di sebuah museum seni diminta mengevaluasi 70 lukisan untuk melihat apakah lukisan tersebut cukup bagus untuk dipajang di pameran baru.

Berikut tabel 2×2 hasil evaluasinya:

Tangkapan layar berikut menunjukkan cara menghitung Kappa Cohen untuk penilai, termasuk rumus yang digunakan:

Nilai p ₀ mewakili kesepakatan relatif antar penilai. Ini adalah proporsi skor total dimana kedua penilai menjawab “Ya” atau “Tidak”.

Ini ternyata menjadi 0,6429 .

Nilai p _e mewakili probabilitas bahwa evaluator dapat mencapai kesepakatan hanya karena kebetulan saja.

Ini ternyata 0,5 .

Nilai k mewakili Kappa Cohen, yang dihitung sebagai berikut:

• k = ( _po – _pe ) / (1 – _pe )
• k = (0,6429 – 0,5) / (1 – 0,5)
• k = 0,2857

Kappa Cohen ternyata 0,2857 .

Berdasarkan tabel sebelumnya, kita dapat mengatakan bahwa kedua penilai hanya memiliki tingkat kesepakatan yang “cukup”.

Sumber daya tambahan

Tutorial berikut menyediakan sumber tambahan tentang Cohen’s Kappa:

Pengantar Kappa Cohen
Kalkulator Kappa Cohen