Критерій еквівалентності (TOST)

Коротко

Для чого це: критерій еквівалентності (equivalence test) перевіряє, чи різниця така мала, що не має значення. Він міститься в розділі «Більше параметрів» у питаннях «Чи відрізняються групи?» (дві групи) і «Чи щось змінилося?». Statable виконує два односторонні (one-tailed) t-критерії (TOST) щодо меж −Δ і +Δ. Еквівалентність доведено, якщо обидва p < ,05.

Умови

• Межа Δ обов’язкова, в одиницях вимірювання. Значення за замовчуванням немає, бо межу треба обґрунтувати до аналізу, наприклад як найменшу різницю, що має значення на практиці (тест із читання в балах: Δ = 3).
• Межі не можна підганяти після обчислень, щоб досягти результату. Statable обчислює лише симетричні межі ±Δ.
• Дві незалежні групи (критерій Велча) або ті самі особи двічі (залежні вибірки), числа щонайменше з двома значеннями кожне.

Як читати результат

• «Різницю, більшу за ±0,5, можна виключити»: обидва односторонні (one-tailed) критерії статистично значущі. 90% довірчий інтервал різниці лежить тоді цілком між −Δ і +Δ.
• Чому 90%, а не 95%: два односторонні (one-tailed) критерії з α = ,05 кожен відповідають двосторонньому (two-tailed) інтервалу 90% (Lakens, 2017).
• «Еквівалентність довести не можна»: щонайменше один критерій статистично незначущий. Різниця, більша за ±Δ, лишається можливою; це не показує ні різниці, ні еквівалентності.
• Δ подається також як d (Δ, поділене на об’єднане стандартне відхилення; для залежних даних - на стандартне відхилення різниць).

Обмеження

• Статистично незначущий t-критерій ніколи не означає «різниці немає». Це відсутність доказу, а не доказ; лише критерій еквівалентності (equivalence test) може показати еквівалентність.
• За малих груп інтервал широкий; еквівалентність тоді можна довести лише з широкими межами.

Подання результату

Δ = ±0,5; t(38,21) = 2,41, p = ,011 (TOST); різниця = −0,05, 90% ДІ [−0,31; 0,22]

Джерело

Lakens, D. (2017). Equivalence tests: A practical primer for t tests, correlations, and meta-analyses. Social Psychological and Personality Science, 8(4), 355-362. Lakens, D., Scheel, A. M., & Isager, P. M. (2018). Equivalence testing for psychological research: A tutorial. Advances in Methods and Practices in Psychological Science, 1(2), 259-269.