Comment calculer le Kappa de Cohen dans Excel
Le Kappa de Cohen est utilisé pour mesurer le niveau d’accord entre deux évaluateurs ou juges qui classent chacun des éléments dans des catégories mutuellement exclusives.
La formule du kappa de Cohen est calculée comme suit :
k = (p o – p e ) / (1 – p e )
où:
- p o : Accord relatif observé parmi les évaluateurs
- p e : Probabilité hypothétique d’accord fortuit
Plutôt que de simplement calculer le pourcentage d’éléments sur lesquels les évaluateurs sont d’accord, le Kappa de Cohen tente de tenir compte du fait que les évaluateurs peuvent s’entendre sur certains éléments par simple hasard.
La valeur du Kappa de Cohen est toujours comprise entre 0 et 1, 0 indiquant l’absence d’accord entre les deux évaluateurs et 1 indiquant un accord parfait entre les deux évaluateurs.
Le tableau suivant résume la façon d’interpréter les différentes valeurs du Kappa de Cohen :
L’exemple suivant montre comment calculer le Kappa de Cohen dans Excel.
Exemple : Calculer le Kappa de Cohen dans Excel
Supposons que l’on demande à deux conservateurs d’un musée d’art d’évaluer 70 peintures pour savoir si elles sont suffisamment bonnes pour être exposées dans une nouvelle exposition.
Le tableau 2×2 suivant montre les résultats des évaluations :
La capture d’écran suivante montre comment calculer le Kappa de Cohen pour les deux évaluateurs, y compris les formules utilisées :
La valeur p 0 représente l’accord relatif entre les évaluateurs. Il s’agit de la proportion du total des notes pour lesquelles les évaluateurs ont tous deux répondu « Oui » ou « Non ».
Cela s’avère être 0,6429 .
La valeur p e représente la probabilité que les évaluateurs aient pu se mettre d’accord par pur hasard.
Cela s’avère être 0,5 .
La valeur k représente le Kappa de Cohen, qui est calculé comme suit :
- k = (p o – p e ) / (1 – p e )
- k = (0,6429 – 0,5) / (1 – 0,5)
- k = 0,2857
Le Kappa de Cohen s’avère être de 0,2857 .
Sur la base du tableau précédent, nous dirions que les deux évaluateurs n’avaient qu’un niveau « assez » d’accord.
Ressources additionnelles
Les didacticiels suivants offrent des ressources supplémentaires sur le Kappa de Cohen :
Introduction au Kappa de Cohen
Calculateur Kappa de Cohen