Intraklasová korelace (ICC)

ICC ukazuje, jaký podíl rozdílů ve všech hodnoceních připadá na skutečné rozdíly mezi případy - a ne na hodnotící osoby nebo na chybu měření. 0 znamená žádnou shodu, 1 dokonalou shodu. Je třeba rozlišit dvě otázky: mají být hodnoty stejné (absolutní shoda, ICC(2,·)), nebo smí mezi hodnotícími osobami existovat stálý rozdíl (konzistence, ICC(3,·))? A týká se jediného hodnocení („single“), nebo průměru všech hodnotících osob („mean“, reliabilnější)? Zařazení podle Koo a Li (2016): pod ,50 slabá, do ,75 střední, do ,90 dobrá, výš výborná; autoři doporučují brát přitom v úvahu celý interval spolehlivosti.

Příklad: Tři osoby z učitelského sboru hodnotí 12 slohových prací body: ICC(2,1) = ,74 (95 % CI ,45 až ,91). Bodový odhad ukazuje na střední shodu jediného hodnocení; interval však sahá od slabé po výbornou - s 12 slohovými pracemi je odhad ještě nepřesný. Průměr ze tří je zřetelně reliabilnější s ICC(2,3) = ,89.

Pozor: ICC je při malém počtu případů nepřesné (doporučuje se alespoň 30) a vychází nízké, když se případy sotva liší - i při dobré shodě. Vyžaduje čísla se smysluplnými vzdálenostmi.