Nyílt válaszok rendezése (szabad szöveg kategorizálása)

Röviden

Egy kérdőív rövid szabad szövegei (például „Mi hiányzott a szemináriumról?”) nem számolhatók meg közvetlenül. Itt kategóriákba vannak sorolva: az elemző személy határozza meg a kategóriákat, és ő sorolja be az egyes válaszokat; a Statable számol, megmutatja a gyakoriságokat, és kérésre oszlopokat ír az adatok közé, amelyek a további elemzéshez használhatók (például a kategória szak szerint). A Statable maga semmit nem sorol be: nincs mesterséges intelligencia, és semmilyen szöveg nem megy sehová.

Így néz ki a táblázat

Személyenként egy sor és egy szöveges oszlop a válasszal (soronként egy válasz). Segít egy azonosító oszlop (Sz., ID): a Statable ez alapján ismeri fel a sorokat; azonosító nélkül a sorszám számít. Az eredmény új oszlopok: válaszonként egy kategóriánál egy csoportoszlop 1-től k-ig terjedő kódokkal és a kategóriákkal mint értékcímkékkel, válaszonként több kategóriánál (a „További beállítások” alatt) kategóriánként egy 0/1 oszlop, többes válaszkészletként (multiple response set) létrehozva.

Lépések

1. Olvass el egy mintát a válaszokból, és hozz létre kategóriákat. Az induktív azt jelenti, hogy a kategóriák az anyagból adódnak; a deduktív azt, hogy az elméletből vagy a kutatási kérdésből származnak. Gyakran keverék (Kuckartz és Rädiker, 2022; Mayring, 2022).
2. Írj le minden kategóriához rövid leírást és rögzítő példát (kódkönyv). Ez megmondja, mi tartozik a kategóriába, és segít egy második személynek ugyanúgy besorolni.
3. Válaszok besorolása: egyenként vagy listaként, kattintással vagy az 1-9 billentyűkkel (a 0 megszünteti a besorolást). A billentyűk csak akkor működnek, ha a fókusz a besorolásban van, soha nem egy szövegmezőben.
4. Ellenőrizd a számlálót: hány személynek nincs válasza, és hány válasz még nyitott.
5. A „Beírás az adatok közé” beírja az oszlopokat (egy visszavonási lépés). Utána a „Kiértékelés most” a „Hogyan oszlik el valami?” kérdéshez vezet.

Három állapot soronként

Minden sor pontosan három állapot egyikében van: nincs válasz (üres szöveg), a válasz még nyitott, vagy besorolt. Az üres és a nyitott hiányzónak számít: meg vannak számolva, és soha nincsenek csendben „kategória nélkülivel” vagy nullával kitöltve. Ha a „sehová sem illik” rögzítendő, hozz létre egy „Egyéb” kategóriát.

Az eredmény értelmezése

• A táblázat kategóriánként megadja az n-t és a besorolt válasszal rendelkező személyek százalékát (percent of cases). Az alap az oszlopfejlécben van („alap: 31”).
• Válaszonként több kategória esetén hozzájön a megemlítések százaléka. A személyek százalékai (percent of cases) ilyenkor együtt 100%-nál többet adnak, mert egy válasz többször számít; a Statable ezt egy mondatban megmondja.
• A még nyitott válaszok hiányoznak a táblázatból; a számuk fölötte látható („12 válasz még nyitott”).
• A táblázat ezeket a válaszokat írja le. Nem tesztel semmit, és nem általánosítható más személyekre: nincs teszt, nincs p-érték.

Második kódolás és egyezés

Egy személy szubjektíven kódol. Ezért egy második személy ugyanazokat a válaszokat ugyanazokba a kategóriákba sorolja, anélkül hogy látná az első besorolást. A „Második kódolás létrehozása” erre külön besorolást készít; a második kódolásnál (second coding) az első el van rejtve. Ha mindkét kódolás be van írva az adatok közé, az „Egyezés ellenőrzése” megnyitja az „Egyeznek az értékelések?” kérdést a két oszloppal (Cohen-kappa, Krippendorff-alfa). Válaszonként több kategória esetén az egyezést kategóriánként ellenőrzi. Valóban független kódoláshoz a második személy a projektfájl saját másolatában dolgozik.

Feltételek és korlátok

• Ez rövid szabad szövegekhez való egy kérdőívben (egy-néhány mondat), nem interjúkhoz vagy hosszú szövegekhez. Ezekhez a kvalitatív tartalomelemző programok illenek, például a MAXQDA, az ATLAS.ti, a QCAmap vagy a QualCoder. A Statable nem kódolóprogram: nincsenek memók, és nincs beágyazott kategóriarendszer.
• Nincs automatikus kategorizálás és nincs mesterséges intelligencia (adatvédelem, nyomon követhetőség). Minden besorolás egy személytől származik.
• Hogy az eredmény mennyire megbízható, az a kódkönyvtől (codebook) és két személy egyezésétől függ, nem a válaszok számától.
• A sorokat az azonosító oszlop vagy a sorszám alapján ismeri fel. Azonosító nélkül a sorok törlése vagy újrarendezése eltolja a besorolást.
• A hosszú válaszokban lévő bekezdéstörések a fájl beolvasásakor szóközzé válnak.
• Újraíráskor a saját oszlopok felülíródnak; az azonos nevű másik oszlop érintetlen marad, és az új oszlop számot kap a nevében.

A 31 besorolt válaszból 12 személy (38,7%) említette a gyakorlatot; 2 válasz még nyitott volt.

Szakembereknek

Saját kód, tesztstatisztika nélkül. A személyek százaléka (percent of cases) = a kategóriával rendelkező válaszok / a legalább egy kategóriával rendelkező válaszok; a megemlítések százaléka = n / az összes besorolás összege. Válaszonként egy kategória: 1-től k-ig terjedő kódok a kategórialista sorrendjében, hiányzó az üresnél és a nyitottnál. Több kategória: kategóriánként 0/1 (1 besorolt, 0 válaszolt más kategóriával, hiányzó az üresnél vagy nyitottnál), többes válaszkészlet (multiple response set) 1 számlált értékkel. A referenciaértékek az R-ből származnak (scripts/welle4-erwartet.R szkript); a PSPP-ben létrehozott oszlopokat ezekkel vetik össze. Az adatok közé írás egyetlen PSPP-parancs (COMPUTE és IF $CASENUM-mal, VALUE LABELS, VARIABLE LEVEL).

Tipikus példák

• „Mi hiányzott a szemináriumról?”: kategóriák, például gyakorlat, visszajelzés, idő; utána egy kereszttábla megmutatja, különböznek-e a szakok.
• A fix válaszú kérdések „Egyéb, mégpedig …” mezője.

Források

Kuckartz, U. és Rädiker, S. (2022). Qualitative Inhaltsanalyse. Methoden, Praxis, Umsetzung mit Software und künstlicher Intelligenz (3. és 4. fejezet). Beltz Juventa. Mayring, P. (2022). Qualitative Inhaltsanalyse. Grundlagen und Techniken. Beltz.