Coefficient de concordance Kappa de Cohen

♦ Le coefficient Kappa de Cohen est destiné à mesurer l’accord entre deux variables qualitatives ayant les mêmes modalités. Classiquement, il est utilisé afin de mesurer le degré de concordance entre les stades attribués par deux juges. Il peut également être appliqué afin de mesurer un accord intra-observateur.
Il quantifie l’intensité de l’accord véritable et vise à enlever la portion de hasard. La formule du coefficient de concordance Kappa est la suivante :

                  K = (Cobs - Cal) / (1−Cal)
avec 

• Cobs = concordance observée
• Cal = concordance aléatoire

La concordance observée est une proportion qui vaut la somme des effectifs concordants observés divisée par la taille de l’échantillon total. La concordance aléatoire est une proportion qui vaut la somme des effectifs concordants théoriques divisée par la taille de l’échantillon total.
Pour calculer cette concordance aléatoire, il faut d’abord calculer les effectifs que l’on aurait observés dans chacune des deux cases concordantes. Ces effectifs sont calculés de la même façon que dans le calcul d’un test du Chi-2 : le produit des deux marges divisé par la taille totale de l’échantillon.

Le coefficient de concordance Kappa est un nombre sans dimension compris entre -1 et +1.
L’accord est d’autant plus élevé que la valeur de Kappa est proche de +1. Une valeur de Kappa est égale à -1 lorsqu’il n’y a aucune réponse concordante (désaccord parfait). Lorsqu’il y a indépendance des jugements, le coefficient Kappa est égal à zéro (Cobs = Cal).

──────────────────────────
            < 0                          Grand désaccord
          0 – 0,20                  Accord très faible
     0,21 – 0,40                 Accord faible
      0,41 – 0,60                Accord moyen
     0,61 – 0,80                 Accord satisfaisant
      0,81 – 1,00                Accord excellent
──────────────────────────
♦ Équivalent étranger : Cohen's kappa coefficient.