Jak reliabilně měří moje škála? (Cronbachovo alfa, McDonaldovo omega)

Stručně

Alespoň dvě otázky se mají spojit do škály a cílem je zjistit, zda se na ně odpovídá konzistentně (vnitřní konzistence). Otázky musí být čísla se stejným směrem; otázky formulované opačně se obrací (Statable upozorní na záporné korelace položky s celkem a vytvoří nový sloupec). Orientační pravidlo (rule of thumb): alespoň 5 osob na otázku, ideálně 10.

Jak číst alfu

Cronbachovo α leží obvykle mezi 0 a 1; od ,70 se považuje za přijatelné, od ,80 za dobré, s 95% intervalem. „Alfa (pokud je položka vypuštěna)“ ukazuje, zda jednotlivá otázka zhoršuje škálu; korelace položky s celkem by měla být kladná a pokud možno nad ,30. Alfa měří vnitřní konzistenci. Neukazuje, zda otázky měří jeden společný rys (jednodimenzionalitu) - to ověřuje faktorová analýza -, ani zda škála měří to, co je zamýšleno (validitu).

McDonaldovo omega

Vedle alfy je řádek „McDonaldova omega“ (od tří otázek). Omega vychází z odhadnuté síly, jakou každá otázka přispívá ke škále; alfa předpokládá stejný příspěvek. Platí stejná orientační pravidla (rule of thumb). Je-li omega zřetelně vyšší než alfa, přispívají otázky nestejně. Statable k tomu při prvním použití jednorázově načte R (asi 30 MB), poté to trvá asi sekundu a děje se to samo. Omega předpokládá jediný společný konstrukt; pokud otázky měří několik, pomůže faktorová analýza.

Cronbachovo α = ,82, 95% CI [,76; ,87] (4 položky, n = 118); McDonaldovo ω = ,84, 95% CI [,79; ,88]

Pro odborníky

ω celkové z jednofaktorového modelu (lavaan, ML): ω = (Σλ)² / ((Σλ)² + Σθ), jako v JASP. jamovi používá psych::omega s jedním faktorem a interval neuvádí. Interval je ve výchozím stavu počítán delta metodou; volitelně percentilový bootstrap (1000 tahů, pevný seed, jako v JASP), který v prohlížeči trvá mnohem déle. Chybějící hodnoty: osoby se vynechají, nebo FIML. ωh (hierarchické) pochází z psych::omega se 2 až 4 skupinovými faktory a je k dispozici od šesti otázek. Záporný reziduální rozptyl nebo zátěž nad 1 (Heywoodův případ) se oznámí. Ověřeno proti R: HolzingerSwineford1939 a psych::bfi.

Další karty pod výsledkem

• Raschův model (úlohy správně/špatně): obtížnost každé úlohy, shoda (infit a outfit mezi 0,7 a 1,3), Wrightova mapa.
• Model 2PL: navíc diskriminace každé úlohy a charakteristické křivky; smysluplný od asi 500 osob.
• Model odstupňované odpovědi (odpovědi 1 až 5): diskriminace a prahy u každé otázky, křivky odpovědí.
• Spravedlivé úlohy (DIF): mají skupiny se stejnou schopností u úlohy různé šance? Nápadné úlohy jsou jen důvodem podívat se na obsah.
• Mapa otázek: otázky se silným vztahem leží blízko sebe; ukazuje skupiny otázek už před faktorovou analýzou.

Typické příklady

• Osm otázek o zkouškové úzkosti, jedna formulovaná obráceně („Do zkoušek jdu s jistotou“): nejdřív obrátit kódování, pak Cronbachovo alfa.
• Dotazník s 20 otázkami o motivaci: alfa pro každou podškálu.