Randomizovaná kontrolovaná studie (randomized controlled trial, RCT) je nejsilnější nástroj pro závěr, že zásah způsobil změnu. Ve výzkumu epistemické anihilace však platí jednoduchá hranice: randomizovat lze ochranu, ne poškození. Nikoho nelze náhodně přidělit k tomu, aby byl vystaven coercive control, gaslightingu nebo izolaci. Tato stránka popisuje, co z logiky RCT v oboru zbývá a jak ji použít poctivě.
Vymezení
V RCT jsou účastníci náhodně rozděleni do skupin, které dostanou různé podmínky (zásah, srovnávací podmínku), a výsledky se porovnají. Náhodné přidělení vyrovná skupiny v průměru i v proměnných, které výzkumník nezná – proto je kauzální závěr silnější než u observačních dat (viz kauzální inference).
Kdy metodu použít
RCT je v oboru vhodná pro zásahy, od nichž se očekává prospěch:
- Prebunking a „očkování“ proti manipulaci. Inokulační teorie (McGuire 1961) předpovídá, že oslabená ukázka manipulativního argumentu spolu s vyvrácením zvyšuje odolnost. Tuto logiku testují randomizované studie vzdělávacích her a krátkých videí (např. Roozenbeek a van der Linden 2019).
- Psychoedukace a programy odolnosti ve školách nebo na pracovištích (viz kurikulum kritického myšlení a mediální gramotnost).
- Terapeutické a podpůrné intervence pro lidi po zkušenosti s manipulací, například srovnání skupinové podpory s individuální terapií.
- Organizační opatření, například zda změna struktury jednání snižuje dominanci jednoho hlasu – pokud lze randomizovat celé týmy.
Experimenty s krátkým, mírným a vratným podnětem existují i v základním výzkumu (např. paradigma dezinformačního efektu Loftusové a Palmera 1974 nebo studie efektu iluzorní pravdy, Hasher a kol. 1977). I ty vyžadují etické posouzení a debriefing; nejsou modelem dlouhodobé manipulace a jejich výsledky nelze na EA přenášet bez výhrad.
Postup
- Otázka a srovnávací podmínka. Proti čemu se zásah srovnává: čekací listina, běžná péče, aktivní kontrola se stejnou mírou pozornosti, nebo rozkladová studie (dismantling) testující jednotlivé složky programu.
- Randomizace a utajení přidělení. Přidělení generuje nezávislá osoba nebo systém a ten, kdo nabírá účastníky, je předem nezná.
- Zaslepení. Účastníka většinou zaslepit nelze (ví, jestli chodí do skupiny), hodnotitele výsledků ano.
- Primární výsledek stanovený předem, včetně času měření (pre-registrace).
- Velikost vzorku z analýzy síly testu; u skupinových zásahů s korekcí na shlukování.
- Monitorování bezpečnosti. U studií s vyšším rizikem nezávislá rada pro monitorování dat a bezpečnosti a předem dané pravidlo zastavení.
- Analýza podle původního přidělení (intention-to-treat) a doplňková analýza podle skutečné účasti.
- Reportování podle CONSORT včetně vývojového diagramu účastníků a hlášení velikosti účinku.
Specifika výzkumu epistemické manipulace
Co je „škodlivý“ výsledek. U programu odolnosti je třeba sledovat i nežádoucí účinky: přehnanou podezíravost, plošnou nedůvěru ke všem zdrojům nebo cynismus. Program, který naučí lidi nevěřit ničemu, není úspěch – nekritická nedůvěra je jen jiná podoba bezradnosti (viz epistemická pokora jako protiváha).
Ekvipoise. Randomizace je etická jen tehdy, když skutečně nevíme, která podmínka je lepší. U lidí v akutní krizi nelze nabídnout čekací listinu; viz akutní stabilizační protokol.
Kontaminace. Účastníci programu mluví s kontrolní skupinou, sdílejí materiály; ve školách a firmách je proto často nutné randomizovat celé třídy nebo týmy.
Výzkumná loajalita. Autoři intervence bývají jejími přesvědčenými zastánci. Nezávislé hodnocení výsledků a sdílení dat snižují riziko, že víra v program ovlivní závěry.
Kritéria kvality
| Oblast | Co doložit |
|---|---|
| Randomizace | způsob generování, utajení přidělení |
| Zaslepení | kdo byl zaslepen a jak to bylo ověřeno |
| Srovnání | zdůvodnění kontrolní podmínky |
| Úbytek | počty v každém kroku podle CONSORT, důvody odchodu |
| Analýza | intention-to-treat, korekce na shlukování, předem dané výsledky |
| Bezpečnost | sledované nežádoucí účinky, pravidlo zastavení |
Etika a ochrana účastníků
Žádný návrh nesmí obsahovat podmínku, v níž je účastník vystaven skutečné manipulaci, klamání o vlastní paměti nebo sociálnímu vyloučení nad rámec krátkého, vratného a etickou komisí schváleného podnětu. Prospěch zásahu se má po skončení studie nabídnout i kontrolní skupině. Rozhodnutí patří etické komisi (IRB protokol) a řídí se etickým kodexem výzkumníka.
Časté chyby
- čekací listina u populace, která pomoc potřebuje hned;
- výsledek měřený jen bezprostředně po zásahu (krátkodobé zlepšení znalostí ≠ trvalá odolnost);
- měření „odolnosti“ testem, který je obsahově shodný s výukou;
- záměna statistické významnosti za praktický význam;
- vynechání nežádoucích účinků ze zprávy.
Ilustrativní příklad
Hypotetický návrh. Několik středních škol se náhodně rozdělí: polovina tříd absolvuje čtyřhodinový program o rozpoznávání manipulativních argumentačních vzorců (např. falešné dilema, Gish gallop), druhá polovina program o studijních dovednostech stejné délky. Výsledkem je schopnost rozlišit manipulativní a nemanipulativní texty po týdnu a po šesti měsících; sekundárně se sleduje, zda program nezvýšil plošnou nedůvěru k důvěryhodným zdrojům.
Na příkladu je vidět, co návrh dělá eticky přijatelným: žádný student není vystaven skutečné manipulaci, ukázky argumentačních vzorců jsou krátké, oslabené a hned rozebrané, kontrolní skupina dostane hodnotný program a po skončení studie i ten testovaný. Rodiče a studenti dostanou srozumitelnou informaci, studenti mohou odmítnout účast na měření a výsledky se hlásí za třídy, nikoli za jednotlivce. Pokud by měření po šesti měsících ukázalo, že program zvýšil nedůvěru k důvěryhodným zdrojům, je to výsledek stejně důležitý jako zlepšení v rozpoznávání – a musí se zveřejnit.
Jak číst studii tohoto typu
Označení „randomizovaná studie“ propůjčuje výsledku autoritu, kterou ne každá RCT unese. Čtenář z praxe by měl zkontrolovat zejména:
- S čím se srovnávalo. Program, který porazí čekací listinu, prokázal hlavně to, že je lepší než nic. Srovnání s aktivní kontrolou stejné délky je přísnější a v oboru vzácnější.
- Co přesně se měřilo. U programů proti manipulaci se často měří schopnost rozpoznat manipulativní text v testu, který je podobný výukovým materiálům. To je blízký přenos. Vzdálený přenos – chování v reálném vztahu, skupině nebo na sociální síti – se měří zřídka a obvykle vychází slaběji.
- Jak dlouho účinek trval. Odolnost získaná „očkováním“ může v čase slábnout; studie bez pozdějšího měření o trvání nic neříká.
- Zda se sledovala nežádoucí rozlišovací chyba. Program má zlepšit rozlišování manipulativních a nemanipulativních sdělení, ne jen zvýšit podezíravost ke všem. Dobrá studie hlásí obě složky zvlášť: zda účastníci lépe odhalí manipulaci a zda přitom neodmítají i důvěryhodná sdělení.
- Kdo studii provedl. Vývojáři programu hodnotící vlastní program dosahují v mnoha oborech vyšších účinků než nezávislé týmy.
- Zda byl primární výsledek předem stanoven a zda zpráva hlásí výsledek, který byl registrován, nikoli ten, který vyšel nejlépe.
Výsledek jedné RCT je dobrý důvod k dalšímu výzkumu, ne k plošnému zavedení programu. Pro rozhodnutí o zavedení jsou vhodnější souhrny více studií (viz metaanalýza).
Meze a otevřené otázky
RCT odpoví, zda zásah v průměru pomáhá, ale ne, proč a komu. Jádro fenoménu – dlouhodobou manipulaci ve vztazích a skupinách – nelze experimentálně studovat vůbec; zde zůstává observační výzkum a kvalitativní práce. K tomu, jak riziko nadměrných zásahů hodnotit, viz iatrogenní účinky intervencí.
Literatura
- McGuire, W. J. (1961). Resistance to persuasion conferred by active and passive prior refutation of the same and alternative counterarguments.
- Roozenbeek, J., van der Linden, S. (2019). Fake news game confers psychological resistance against online misinformation.
- Loftus, E. F., Palmer, J. C. (1974). Reconstruction of automobile destruction.
- Hasher, L., Goldstein, D., Toppino, T. (1977). Frequency and the conference of referential validity.
- Schulz, K. F., Altman, D. G., Moher, D. (2010). CONSORT 2010 Statement.
Související
Metody v této sekci
- Kauzální inference – závěry tam, kde randomizovat nelze.
- Velikost účinku – jak hlásit, co zásah změnil.
- Debriefing – po každém experimentálním podnětu.
Etika
- IRB protokol – posouzení rizika a přínosu.
- Iatrogenní účinky intervencí – když ochrana škodí.
Prevence
- Kurikulum kritického myšlení – typický testovaný zásah.
- Programy mediální gramotnosti – populační rovina.
Pojmy
- Iatrogenní poškození – škoda způsobená samotnou péčí či výzkumem.
Související pojmy
Odkazují sem 11
- Vzdělávací scénář: Vážení důkazů
- Kohortové studie epistemických útoků
- Financování výzkumu EA
- Výzkumná metodologie
- Kauzální inference bez experimentu
- Debriefing po účasti ve výzkumu
- Velikost účinku a klinicky významná změna
- Etické posouzení výzkumného protokolu
- Kombinované designy (mixed methods)
- Analýza síly testu a velikost vzorku
- Reference
Související #quantitative
- Kauzální inference bez experimentu
- Velikost účinku a klinicky významná změna
- Longitudinální studie epistemické manipulace a zotavení
- Systematický přehled a metaanalýza
- Kombinované designy (mixed methods)
- Síťová analýza symptomů a sociálních vazeb
- Analýza síly testu a velikost vzorku
- Dotazníkový výzkum epistemické manipulace