Corelația intraclasă (ICC)

ICC arată ce parte din diferențele dintre toate evaluările se datorează diferențelor reale dintre cazuri - și nu evaluatorilor sau erorii de măsurare. 0 înseamnă niciun acord, 1 acord perfect. Trebuie deosebite două întrebări: valorile trebuie să fie identice (acord absolut, ICC(2,·)) sau este permisă o diferență constantă între evaluatori (consistență, ICC(3,·))? Și se referă la o singură evaluare („singură”) sau la media tuturor evaluatorilor („medie”, mai fiabilă)? Clasificare după Koo și Li (2016): sub ,50 slab, până la ,75 moderat, până la ,90 bun, peste aceasta excelent; autorii recomandă să se ia în considerare întregul interval de încredere.

Exemplu: Trei profesori acordă puncte pentru 12 eseuri: ICC(2,1) = ,74 (IC 95% de la ,45 la ,91). Estimarea punctuală indică un acord moderat al unei singure evaluări, dar intervalul se întinde de la slab la excelent - cu 12 eseuri estimarea este încă imprecisă. Media celor trei este clar mai fiabilă, ICC(2,3) = ,89.

Atenție: ICC este imprecis la puține cazuri (se recomandă cel puțin 30) și iese mic când cazurile diferă abia - chiar și la un acord bun. Necesită numere cu distanțe cu sens.