Интракласов корелационен коефициент (ICC)

ICC показва каква част от дисперсията на всички оценки отразява истински различия между случаите, а не различия между оценяващите или грешка от измерването. 0 означава липса на съгласуваност, 1 - пълна съгласуваност. Трябва да се разграничат два въпроса: трябва ли стойностите да са еднакви (абсолютно съгласие, ICC(2,·)) или оценяващите могат да се различават с постоянна величина (съгласуваност, ICC(3,·))? И отнася ли се за една оценка („единична“) или за средната на всички оценяващи („средна“, по-надеждна)? Подялба по Koo и Li (2016): под ,50 лоша, до ,75 умерена, до ,90 добра, над това отлична; авторите препоръчват да се разглежда целият доверителен интервал.

Пример: Трима учители оценяват 12 есета с точки: ICC(2,1) = ,74 (95% ДИ ,45 до ,91). Точковата оценка говори за умерена съгласуваност на една единична оценка, но интервалът обхваща от лоша до отлична съгласуваност - с 12 есета оценката още е неточна. Средната на тримата е ясно по-надеждна, ICC(2,3) = ,89.

Внимание: ICC е неточен при малко случаи (препоръчват се поне 30) и излиза нисък, когато случаите почти не се различават - дори при добро съгласие. Изисква числа със смислени разстояния.