Подреждане на отворените отговори (open-ended response) (категоризиране на свободен текст)

Накратко

Кратките свободни текстове от въпросник (например „Какво липсваше на семинара?“) не могат да се преброят директно. Тук те се подреждат по категории: лицето, което анализира данните, определя категориите и отнася всеки отговор към някоя; Statable брои, показва честотите и при желание записва в данните колони, които могат да се използват за по-нататъшен анализ (например категорията по специалност). Statable не отнася нищо само: без изкуствен интелект и без да изпраща текст никъде.

Как изглежда таблицата

Един ред на човек и една текстова колона с отговора (един отговор на ред). Помага колона с идентификатор (Номер, ID): Statable разпознава по нея редовете; без идентификатор важи номерът на реда. Резултатът са нови колони: при една категория на отговор колона с групи с кодове от 1 до k и категориите като етикети на стойностите, при няколко категории на отговор (в „Още опции“) по една колона 0/1 на категория, създадени като набор от множествени отговори (multiple response set).

Стъпки

1. Прочетете извадка от отговорите и създайте категории. Индуктивно означава, че категориите произлизат от материала; дедуктивно - че идват от теорията или от изследователския въпрос. Често е смес (Kuckartz и Rädiker, 2022; Mayring, 2022).
2. Запишете за всяка категория кратко описание и опорен пример (ръководство за кодиране). То казва какво принадлежи към категорията и помага на втори човек да отнася по същия начин.
3. Отнасяне на отговорите: по един или като списък, с щракване или с клавишите от 1 до 9 (0 премахва отнасянето). Клавишите работят само докато фокусът е в отнасянето, никога в текстово поле.
4. Проверете брояча: колко души нямат отговор и колко отговора още са отворени.
5. „Запишете в данните“ записва колоните (една стъпка за отмяна). След това „Оценете сега“ води към въпроса „Как е разпределено нещо?“.

Три състояния на ред

Всеки ред е точно в едно от три състояния: без отговор (празен текст), отговор още отворен или отнесен. Празното и отвореното се броят за липсващи: те се преброяват и никога не се попълват тихо с „без категория“ или с 0. Ако трябва да се отбележи „не пасва никъде“, създайте категория „Друго“.

Прочитане на резултата

• Таблицата дава n за всяка категория и процент на хората с отнесен отговор. Основата е в заглавието на колоната („основа 31“).
• При няколко категории на отговор се добавя процентът на споменаванията. Процентите на хората тогава се събират до повече от 100%, защото един отговор се брои няколко пъти; Statable го казва в едно изречение.
• Отговорите, които още са отворени, липсват в таблицата; броят им е показан по-горе („12 отговора още отворени“).
• Таблицата описва тези отговори. Тя нищо не проверява и не може да се обобщава за други хора: няма тест, няма p-стойност.

Второ кодиране и съгласуваност

Един човек кодира субективно. Затова втори човек отнася същите отговори към същите категории, без да вижда първото отнасяне. „Създайте второ кодиране (second coding)“ прави за това отделно отнасяне; при второто кодиране първото е скрито. Щом двете кодирания са записани в данните, „Проверете съгласуваността“ отваря въпроса „Съгласуват ли се оценките?“ с двете колони (каппа на Коен, алфа на Криппендорф). При няколко категории на отговор съгласуваността се проверява за всяка категория. За наистина независимо кодиране вторият човек работи в собствено копие на проектния файл.

Изисквания и ограничения

• Това е предназначено за кратки свободни текстове във въпросник (от едно до няколко изречения), а не за интервюта или дълги текстове. За тях са подходящи програми за качествен анализ на съдържание като MAXQDA, ATLAS.ti, QCAmap или QualCoder. Statable не е програма за кодиране: няма мемота и няма вложена система от категории.
• Няма автоматично категоризиране и няма изкуствен интелект (поверителност, проследимост). Всяко отнасяне идва от човек.
• Колко надежден е резултатът, зависи от ръководството за кодиране (codebook) и от съгласуваността на двама души, а не от броя на отговорите.
• Редовете се разпознават по колоната с идентификатор или по номера на реда. Без идентификатор изтриването или пренареждането на редове измества отнасянето.
• Разделянето на абзаци в дълги отговори става интервали при четенето на файла.
• При ново записване собствените колони се презаписват; друга колона със същото име остава недокосната, а новата колона получава число в името.

От 31 отнесени отговора 12 души (38,7%) са споменали практиката; 2 отговора още бяха отворени.

За специалисти

Собствен код, без тестова статистика. Процент на хората = отговори с категорията / отговори с поне една категория; процент на споменаванията = n / сума на всички отнасяния. Една категория на отговор: кодове от 1 до k в реда на списъка с категории, липсва за празните и отворените. Няколко: 0/1 на категория (1 отнесен, 0 има отговор, но друга категория, липсва за празните или отворените), набор от множествени отговори (multiple response set) със стойност за броене 1. Еталонните стойности идват от R (скрипт scripts/welle4-erwartet.R); колоните, създадени в PSPP, се сверяват с тях. Записът в данните е една команда на PSPP (COMPUTE и IF с $CASENUM, VALUE LABELS, VARIABLE LEVEL).

Типични примери

• „Какво липсваше на семинара?“: категории като практика, обратна връзка, време; след това кръстосана таблица показва дали специалностите се различават.
• Полето „Друго, а именно …“ на въпрос с фиксирани отговори.

Източници

Kuckartz, U. и Rädiker, S. (2022). Qualitative Inhaltsanalyse. Methoden, Praxis, Umsetzung mit Software und künstlicher Intelligenz (гл. 3 и 4). Beltz Juventa. Mayring, P. (2022). Qualitative Inhaltsanalyse. Grundlagen und Techniken. Beltz.