Как рассчитать каппу флейса в excel

Каппа Флейса — это способ измерения степени согласия между тремя или более оценщиками, когда оценщики присваивают категориальные рейтинги набору пунктов.

Каппа Флейса изменяется от 0 до 1, где:

• 0 означает отсутствие согласия между рецензентами.
• 1 указывает на полное согласие между оценщиками.

В этом руководстве представлен пример расчета каппы Флейса в Excel.

Пример: Фляйсс Каппа в Excel

Допустим, 14 человек оценивают 10 различных товаров по шкале от плохого до отличного.

На следующем снимке экрана показано общее количество оценок, полученных каждым продуктом:

На следующем снимке экрана показано, как рассчитать каппу Флейса для этих данных в Excel:

Самые сложные расчеты на этом снимке экрана показаны в столбце J. Формула, используемая для этих расчетов, отображается в текстовом поле в верхней части экрана.

Обратите внимание, что каппа Фляйсса в этом примере оказывается равной 0,2099 . Фактическая формула, используемая для расчета этого значения в ячейке C18:

Каппа Флейса = (0,37802 – 0,2128) / (1 – 0,2128) = 0,2099.

Хотя формального способа интерпретации каппы Флейса не существует, следующие значения показывают, как интерпретировать каппу Коэна, которая используется для оценки уровня межэкспертного согласия между всего двумя оценщиками:

• <0,20 | Бедный
• .21 – .40 | Справедливый
• 0,41 – 0,60 | Умеренный
• 0,61 – 0,80 | ХОРОШИЙ
• .81 – 1 | Хорошо

Основываясь на этих значениях, Fleiss Kappa, равный 0,2099 в нашем примере, будет интерпретироваться как «справедливый» уровень согласия между экспертами.