Kappa Cohen (κ)

Kappa arată cât de bine concordă doi evaluatori după ce se elimină acordul care ar apărea doar din ghicit. κ = 0 înseamnă: nu mai bine decât întâmplarea; κ = 1: acord perfect. La niveluri ordonate (note) poate fi ponderat, astfel încât o greșeală mică să conteze mai puțin decât o diferență mare. Clasificare după Landis și Koch (1977): până la ,20 redus, până la ,40 mediocru, până la ,60 moderat, până la ,80 substanțial, peste aceasta aproape perfect.

Exemplu: Doi profesori notează 30 de eseuri: notele coincid în 63% din cazuri, κ = ,50 (IC 95% de la ,26 la ,74): acord moderat.

Atenție: κ depinde de distribuția categoriilor: dacă o categorie este foarte rară sau foarte frecventă, κ este mic în ciuda unui acord ridicat. Pragurile Landis și Koch sunt reguli empirice, nu limite.