Cohen-féle kappa (κ)

A kappa azt mutatja, mennyire értenek egyet ketten az értékelők, miután levontuk azt az egyezést, amely pusztán tippeléssel is előállna. κ = 0 azt jelenti: nem jobb a véletlennél; κ = 1: tökéletes egyezés. Sorrendbe rendezett szintek (jegyek) esetén súlyozható, hogy a közel találat kevesebbet számítson, mint a nagy eltérés. Besorolás Landis és Koch (1977) szerint: ,20-ig csekély, ,40-ig elfogadható, ,60-ig mérsékelt, ,80-ig jelentős, afölött majdnem tökéletes.

Példa: Két tanár 30 dolgozatot osztályoz: a jegyek 63%-ban egyeznek, κ = ,50 (95%-os KI ,26 és ,74 között): mérsékelt egyezés.

Vigyázat: A κ függ a kategóriák eloszlásától: ha egy kategória nagyon ritka vagy nagyon gyakori, a κ magas egyezés mellett is alacsony. A Landis-és-Koch-féle határok ökölszabályok, nem szigorú határok.