Внутрішньокласова кореляція (ICC)

ICC показує, яка частка дисперсії всіх оцінок відображає справжні відмінності між випадками, а не відмінності між оцінювачами чи похибку вимірювання. 0 означає відсутність узгодженості, 1 - ідеальну. Слід розрізняти два питання: чи мають значення бути однаковими (абсолютна узгодженість, ICC(2,·)), чи оцінювачі можуть відрізнятися на сталу величину (консистентність, ICC(3,·))? І чи стосується це однієї оцінки («окремі») чи середнього всіх оцінювачів («середнє», надійніше)? Класифікація за Koo і Li (2016): нижче ,50 погана, до ,75 помірна, до ,90 добра, вище - відмінна; автори радять розглядати при цьому весь довірчий інтервал.

Приклад: Троє вчителів оцінюють 12 есе балами: ICC(2,1) = ,74 (95% ДІ від ,45 до ,91). Точкова оцінка вказує на помірну узгодженість окремої оцінки, але інтервал сягає від поганої до відмінної - з 12 есе оцінка ще неточна. Середнє трьох помітно надійніше - ICC(2,3) = ,89.

Обережно: ICC неточна за малої кількості випадків (рекомендовано щонайменше 30) і виходить низькою, коли випадки майже не відрізняються, - навіть за доброї узгодженості. Потрібні числа зі змістовними відстанями.