Excel에서 cohen의 카파를 계산하는 방법

Cohen’s Kappa는 각 항목을 상호 배타적인 범주로 분류하는 두 평가자 또는 심사관 간의 합의 수준을 측정하는 데 사용됩니다.

Cohen의 카파 공식은 다음과 같이 계산됩니다.

k = ( _po – p _e ) / (1 – p _e )

금:

• p _o : 평가자 간 상대적인 동의가 관찰됨
• p _e : 우연 일치의 가상 확률

Cohen의 Kappa는 단순히 평가자가 동의하는 항목의 비율을 계산하는 대신 평가자가 일부 항목에 우연히 동의할 수 있다는 사실을 설명하려고 시도합니다.

Cohen의 Kappa 값은 항상 0과 1 사이입니다. 0은 두 평가자 간에 일치하지 않음을 나타내고 1은 두 평가자 간에 완벽한 일치를 나타냅니다.

다음 표에는 Cohen의 카파의 다양한 값을 해석하는 방법이 요약되어 있습니다.

다음 예에서는 Excel에서 Cohen의 카파를 계산하는 방법을 보여줍니다.

예: Excel에서 Cohen의 카파 계산

한 미술관의 큐레이터 두 명이 새 전시회에 전시할 만큼 좋은지 알아보기 위해 70점의 그림을 평가하도록 요청받았다고 가정해 보겠습니다.

다음 2×2 표는 평가 결과를 보여줍니다.

다음 스크린샷은 사용된 공식을 포함하여 평가자에 대한 Cohen의 카파를 계산하는 방법을 보여줍니다.

p 값 _0은 평가자 간의 상대적인 합의를 나타냅니다. 총점 중 두 평가자가 “예” 또는 “아니요”라고 대답한 비율입니다.

이는 0.6429 로 밝혀졌습니다.

p _e 값은 평가자가 순전히 우연에 의해 합의에 도달할 수 있는 확률을 나타냅니다.

이는 0.5 로 밝혀졌습니다.

k 값은 Cohen의 Kappa를 나타내며 다음과 같이 계산됩니다.

• k = ( _po – p _e ) / (1 – p _e )
• k = (0.6429 – 0.5) / (1 – 0.5)
• k = 0.2857

Cohen의 Kappa는 0.2857 로 나타났습니다.

이전 표에 따르면 두 평가자는 “상당히” 수준의 합의만 했다고 말할 수 있습니다.

추가 리소스

다음 자습서에서는 Cohen의 Kappa에 대한 추가 리소스를 제공합니다.

코헨의 카파 소개
코헨의 카파 계산기