Як розрахувати каппу коена в r

У статистиці Каппа Коена використовується для вимірювання рівня згоди між двома оцінювачами або суддями, які класифікують кожен пункт у взаємовиключні категорії.

Формула каппа Коена розраховується наступним чином:

k = (p _o – p _e ) / (1 – p _e )

золото:

• p _o : Відносна згода між оцінювачами
• p _e : Гіпотетична ймовірність випадкової згоди

Замість того, щоб просто обчислювати відсоток пунктів, з якими погоджуються оцінювачі, Каппа Коена намагається пояснити той факт, що оцінювачі можуть погоджуватися щодо деяких пунктів просто випадково.

Значення каппа Коена завжди між 0 і 1, де:

• 0 означає відсутність згоди між двома рецензентами
• 1 означає повну згоду між двома оцінювачами

У наступній таблиці підсумовано, як інтерпретувати різні значення Каппа Коена:

Найпростіший спосіб обчислити каппу Коена в R — це використовувати функцію cohen.kappa() із пакета psych .

У наступному прикладі показано, як використовувати цю функцію на практиці.

Приклад: обчисліть каппу Коена в R

Припустімо, що двох кураторів художнього музею просять оцінити 15 картин, щоб перевірити, чи достатньо вони хороші для експонування на новій виставці.

Наступний код показує, як використовувати функцію cohen.kappa() пакета psych для обчислення Каппа Коена для двох оцінювачів:

 library (psych)

#define vector of ratings for both raters
miss1 = [0, 1, 1, 1, 0, 0, 1, 0, 1, 0, 1, 1, 0, 1, 0]
miss2 = [0, 0, 1, 1, 0, 1, 0, 0, 1, 1, 0, 1, 0, 1, 0]

#calculate Cohen's Kappa
Cohen. kappa (x=cbind(miss1,miss2))

Cohen Kappa and Weighted Kappa correlation coefficients and confidence boundaries 
                 lower estimate upper
unweighted kappa -0.14 0.34 0.81
weighted kappa -0.14 0.34 0.81

 Number of subjects = 15 

Стовпець оцінки відображає значення Каппа Коена.

З результату ми бачимо, що Каппа Коена дорівнює 0,34 .

Виходячи з попередньої таблиці, ми б сказали, що обидва оцінювачі мали лише «достатньо» рівень згоди.

Якщо ви бажаєте обчислити рівень узгодженості між трьома чи більше оцінювачами, замість цього рекомендується використовувати Каппу Фляйса.

Додаткові ресурси

Наступні навчальні посібники містять додаткові ресурси щодо каппи Коена:

Вступ до каппи Коена
Онлайн-калькулятор Каппа Коена
Як розрахувати каппу Коена в Excel
Як обчислити каппу Коена в Python