Κάπα του Cohen (κ)

Το κάπα δείχνει πόσο καλά συμφωνούν δύο αξιολογητές, αφού αφαιρεθεί η συμφωνία που θα προέκυπτε και μόνο με εικασίες. κ = 0 σημαίνει: όχι καλύτερα από την τύχη· κ = 1: τέλεια συμφωνία. Με τακτικά επίπεδα (βαθμοί) μπορεί να σταθμιστεί, ώστε μια μικρή απόκλιση να μετρά λιγότερο από μια μεγάλη διαφορά. Κατάταξη κατά Landis και Koch (1977): έως ,20 πολύ χαμηλή, έως ,40 χαμηλή, έως ,60 μέτρια, έως ,80 ουσιαστική, πάνω από αυτό σχεδόν τέλεια.

Παράδειγμα: Δύο εκπαιδευτικοί βαθμολογούν 30 εκθέσεις: οι βαθμοί συμφωνούν στο 63%, κ = ,50 (95% CI ,26 έως ,74): μέτρια συμφωνία.

Προσοχή: Το κ εξαρτάται από την κατανομή των κατηγοριών: αν μια κατηγορία είναι πολύ σπάνια ή πολύ συχνή, το κ είναι χαμηλό παρά την υψηλή συμφωνία. Τα όρια Landis και Koch είναι εμπειρικοί κανόνες, όχι αυστηρά όρια.