Cohenovo kappa (κ)

Kappa ukazuje, jak dobře se shodují dvě hodnotící osoby po odečtení shody, která by vznikla jen hádáním. κ = 0 znamená: není to lepší než náhoda; κ = 1: dokonalá shoda. U seřazených úrovní (známky) lze kappa vážit tak, aby těsné minutí vážilo méně než velký rozdíl. Zařazení podle Landis a Koch (1977): do ,20 slabá, do ,40 mírná, do ,60 střední, do ,80 podstatná, výš téměř dokonalá.

Příklad: Dvě osoby z učitelského sboru hodnotí 30 slohových prací: známky se shodují u 63 %, κ = ,50 (95 % CI ,26 až ,74): střední shoda.

Pozor: κ závisí na rozdělení kategorií: pokud je jedna kategorie velmi vzácná nebo velmi častá, je κ nízké i přes vysokou shodu. Hranice podle Landis a Koch jsou orientační pravidla, nikoli meze.