Kappa Cohena (κ)

Kappa pokazuje, jak dobrze zgadzają się dwie osoby oceniające, po odjęciu zgodności, która wystąpiłaby przez samo zgadywanie. κ = 0 oznacza: nie lepiej niż przypadek; κ = 1: pełna zgodność. Przy uporządkowanych poziomach (oceny) można ją ważyć, aby niewielkie pudło liczyło się mniej niż duża różnica. Podział według Landisa i Kocha (1977): do ,20 znikoma, do ,40 słaba, do ,60 umiarkowana, do ,80 znaczna, powyżej prawie doskonała.

Przykład: Dwoje nauczycieli ocenia 30 wypracowań: oceny zgadzają się w 63%, κ = ,50 (95% CI ,26 do ,74): umiarkowana zgodność.

Ostrożnie: κ zależy od rozkładu kategorii: jeśli jedna kategoria jest bardzo rzadka lub bardzo częsta, κ jest niskie mimo wysokiej zgodności. Progi Landisa i Kocha to reguły orientacyjne, a nie granice.