Чи розділяє число дві групи? ROC-крива і порогове значення (threshold)
Коротко
Скринінг дає бали, і є дві групи (наприклад, із діагнозом і без нього). Питання: наскільки добре бал розділяє групи, і починаючи з якого бала результат вважати позитивним? У порівнянні двох груп під результатом з’являється розділ, що розгортається: «Чи розділяє число дві групи? (ROC, площа під кривою)».
Що він показує
- AUC (площа під кривою) з 95% довірчим інтервалом і p: імовірність того, що випадково взята особа з «позитивної» групи має вище значення, ніж особа з іншої групи. ,50 - це випадковість, 1 - повне розділення.
- ROC-крива: для кожного можливого порогового значення (threshold) - чутливість проти 1 − специфічність. Чим далі крива від діагоналі до верхнього лівого кута, тим краще.
- Найкраще порогове значення (threshold) за Юденом із чутливістю та специфічністю, яких воно досягає. «Позитивною» вважається група з вищим середнім, тому порогове значення має вигляд «X або більше». Індекс Юдена J = чутливість + специфічність − 1 там найбільший.
Кнопка «Відкрити криву й порогові значення (threshold) в командах» показує обчислення в командах. Діаграму можна зберегти через «Експорт» як PNG, SVG або PDF чи скопіювати як зображення. Якщо розгорнути цей розділ, крива потрапляє до звіту також як рисунок (PDF, Word); перемикач «Показати криву ROC у звіті» прибирає її знову.
Обережно
- Порогове значення (threshold) вибирається саме на цих даних. На нових даних воно зазвичай працює гірше; без другої вибірки це лише пропозиція.
- Що важливіше - чутливість чи специфічність, залежить від ціни помилки. Пропустити хворобу важить інакше, ніж зайве повторне обстеження. Індекс Юдена цього знати не може.
- За малих груп інтервал широкий.
Типовий приклад
Короткий тест від 0 до 30 балів у 40 осіб із діагнозом деменції й 80 без нього: AUC = ,91. Низькі значення тут свідчать на користь діагнозу: 24 або менше вважається позитивним (скринінг-позитивним), із чутливістю 85% і специфічністю 88%. Statable бере групу з вищим середнім як позитивну і тому наводить те саме порогове значення (threshold) як «25 або більше» для «без діагнозу» - чутливість і специфічність при цьому міняються ролями.
AUC = ,91, 95% ДІ [,86; ,96], p < ,001; порогове значення (threshold) ≤ 24, чутливість = ,85, специфічність = ,88, J = ,73
Якщо тест уже є у вигляді «так/ні» (позитивний/негативний), питання належить до таблиці спряженості; див. «Чи трапляється щось у різних групах з різною частотою?», розділ про якість тесту.