- Definice
- Mechanismus (strukturní popis)
- Průběh
- Fenomenologické znaky (pohled zevnitř)
- Detekční markery (pohled pozorovatele)
- Rizikové kontexty
- Odlišení
- Klinický a právní rámec
- Postup pro posuzovatele
- Obrana a neutralizace
- Zotavení
- Ilustrativní příklad (anonymizovaný kompozit)
- Otázky pro analýzu
- Vztah k jiným technikám
- Meze a otevřené otázky
- Případy, které techniku ukazují
- Literatura
- Související
EA-2.4.6 Zachycení recenzního řízení (peer review capture)
| Pole | Hodnota |
|---|---|
| EA kód | EA-2.4.6 |
| Kategorie | 2. Scénáře delegitimizace |
| Subkategorie | 2.4 Institucionální zachycení |
| Přístupová úroveň | L2 (odborná analýza) |
| Riziková úroveň | Vysoká – zasahuje mechanismus, jímž věda rozlišuje vědění od tvrzení |
| Reverzibilita | Nízká až střední; zkreslená literatura zůstává v oběhu i po nápravě |
| Rodičovská kapitola | 3.2 Scénáře epistemické delegitimizace |
| Rychlá karta | QR: EA-2.4.6 |
Definice
Recenzní řízení (peer review) je mechanismus, jímž odborná komunita rozhoduje, co se publikuje, financuje nebo uznává. Jeho legitimita stojí na předpokladu, že recenzenti jsou kompetentní, nezávislí a různí. Zachycení recenzního řízení je vzorec, v němž se tento předpoklad naruší: okruh recenzentů se zúží na loajální skupinu, výběr recenzentů se podřídí zájmu editora nebo frakce, a recenze přestane být nezávislou kontrolou.
Výsledek má dvě tváře. Pro „své“ se řízení stává propustným – publikuje se, co by nezávislá kontrola neprošla. Pro „cizí“ se stává neprostupným – vzniká publikační blokace. Obojí mění literaturu oboru a tím i to, co obor považuje za doložené.
Mechanismus (strukturní popis)
- Úzký okruh recenzentů. Editor nebo komise vybírá recenzenty z jedné sítě; tytéž osoby recenzují navzájem své práce.
- Recenzenti navržení autory. Systémy, které připouštějí návrh recenzentů autorem, umožňují obejít nezávislost; v krajní podobě vznikají fiktivní recenzenti.
- Asymetrické požadavky. Stejný typ práce dostává od recenzentů různý stupeň přísnosti podle příslušnosti autora.
- Výměnný obchod. Příznivé recenze se oplácejí; vzniká recenzní a citační kruh.
- Kontrola odvolání. O odvolání rozhoduje tentýž okruh.
- Důvěrnost jako štít. Neveřejnost recenzí brání zjištění vzorce.
Doloženým extrémem jsou tzv. recenzní kruhy: v letech 2014–2015 stáhli velcí vydavatelé desítky článků poté, co zjistili, že recenze pocházely od fiktivních nebo autory ovládaných recenzentů.
Průběh
Zachycení obvykle začíná, když jedna skupina získá redakční nebo komisní pozice (srov. EA-2.4.8 Zachycení časopisu). Během několika let se okruh recenzentů zúží, recenze se zrychlí pro jedny a zpomalí pro druhé. Literatura oboru začne odrážet jeden směr; nesouhlasní autoři odcházejí do jiných kanálů. Vnější pozorovatel vidí „konsenzus“, který ve skutečnosti vznikl filtrem (EA-2.1.9).
Fenomenologické znaky (pohled zevnitř)
| Znak | Jak ho autor nebo recenzent popisuje |
|---|---|
| Uzavřený klub | „Víme, kdo bude recenzovat, a víme, jak to dopadne.“ |
| Nejistota měřítka | Autor neví, zda je jeho práce slabá, nebo nepohodlná. |
| Tlak na recenzenta | Recenzent cítí očekávání editora, jak má posudek vyznít. |
| Cynismus | Ztráta víry v recenzní řízení jako záruku kvality. |
| Únik | Odchod do jiných časopisů, preprintů nebo oborů. |
Detekční markery (pohled pozorovatele)
| Marker | Co může naznačovat |
|---|---|
| Opakující se malý okruh recenzentů u jedné skupiny autorů | Úzký okruh |
| Vysoký podíl recenzentů navržených autory | Obejití nezávislosti |
| Velké rozdíly v délce řízení podle autorů | Asymetrie |
| Vzájemné recenzování a citování v uzavřené skupině | Recenzní a citační kruh; srov. citační cirkularitu |
| Odvolání vyřizuje tentýž editor | Kontrola odvolání |
| Pozdější stažení článků pro problematické recenze | Doložené selhání |
Rizikové kontexty
Malé obory, kde se všichni znají; časopisy s jediným dominantním editorem; grantové agentury s malým okruhem posuzovatelů; obory s ostrými spory mezi školami; rychle rostoucí obory s nedostatkem recenzentů; časopisy s finanční motivací přijímat.
Odlišení
- Běžná nedokonalost recenzí. Recenzní řízení je známé svou nekonzistencí; Peters a Ceci (1982) ukázali, že už publikované články byly po opětovném podání pod jinými jmény a afiliacemi z velké části zamítnuty. To je systémová slabina, ne nutně zachycení.
- Odborná komunita. V malém oboru se recenzenti přirozeně opakují; rozhoduje, zda existují pojistky proti střetu zájmů.
- Konzervativismus. Odpor recenzentů k novým myšlenkám je známý jev; zachycení je selektivní podle autorů, ne podle novosti.
- EA-2.1.4 Publikační blokace. Dopad na jednotlivce; zachycení je strukturní příčina.
Klinický a právní rámec
Klinicky se dopad projevuje u autorů (frustrace, vyhoření, odchod z oboru) a u recenzentů, kteří cítí tlak (morální stres). Na úrovni společnosti jde o zkreslení poznatkové báze, na které stojí klinická doporučení a politická rozhodnutí; srov. krizi replikovatelnosti.
Právně jsou relevantní pravidla vědecké integrity, etické zásady vydavatelů (COPE), pravidla grantových agentur pro střet zájmů a v případě fiktivních recenzí i podvodné jednání. Viz profesionální pochybení.
Postup pro posuzovatele
Posuzovatel (komise pro integritu, vydavatel, agentura) by měl analyzovat metadata řízení: kdo recenzoval koho, jak často, jak dlouho řízení trvalo a s jakým výsledkem, a porovnat je mezi skupinami autorů. Užitečné je síťové zobrazení vztahů autor–recenzent a autor–citace. Dále je třeba ověřit identitu recenzentů navržených autory a jejich vztah k autorům. Výpovědi autorů o nespravedlivém zacházení jsou podnětem, nikoli důkazem; důkazem je obrazec v datech.
Obrana a neutralizace
Pro vydavatele a agentury. Evidence střetů zájmů, ověřování identity recenzentů, omezení recenzentů navržených autory, rotace editorů, nezávislé odvolací řízení, audit metadat recenzí, zveřejňování recenzí nebo jmen recenzentů (otevřená recenze) tam, kde to obor snese. Viz sledovatelnost rozhodnutí a politika střetu zájmů.
Pro autory. Zveřejňovat preprinty, žádat vyloučení recenzentů se střetem zájmů, publikovat v kanálech s jinou recenzní komunitou. Pro recenzenty: deklarovat střet zájmů a odmítnout recenzi tam, kde nemohou být nezávislí.
Zotavení
Obor se zotavuje stažením zkreslených prací, obnovou plurality recenzentů a revizí přehledových textů. Autoři vyloučení z publikování potřebují nové kanály a nezávislé uznání práce. Viz poučení po incidentu.
Ilustrativní příklad (anonymizovaný kompozit)
V malém oboru převezme vedení dvou hlavních časopisů tatáž skupina. Během pěti let recenzuje osm lidí většinu článků; autoři z jiné školy čekají na rozhodnutí v průměru třikrát déle a jejich rukopisy jsou častěji zamítnuty s obecným zdůvodněním. Analýza metadat, kterou provede nový vydavatel po stížnosti, ukáže uzavřený kruh vzájemných recenzí a citací. Část článků je opravena, nové redakční rady jsou mezinárodní.
Otázky pro analýzu
- Kolik různých recenzentů posuzovalo práce určité skupiny a jak často se opakují?
- Jaký podíl recenzentů navrhli autoři a byla ověřena jejich identita?
- Liší se délka a výsledek řízení podle příslušnosti autorů?
- Kdo rozhoduje o odvolání a je nezávislý na původním editorovi?
Vztah k jiným technikám
Zachycení recenzního řízení je uzlem, v němž se protínají techniky podkategorií 2.1 a 2.4. Na straně jednotlivce vede k publikační blokaci a potlačování citací; na straně struktury navazuje na zachycení časopisu a připravuje půdu pro pseudokonsenzus. Při analýze konkrétního případu je proto užitečné ptát se, která z těchto vrstev je primární a které jsou jejím důsledkem.
Meze a otevřené otázky
Recenzní řízení je lidské a nikdy nebude zcela nezávislé. Otevřenou otázkou je, zda otevřená recenze (se jmény) zachycení oslabuje, nebo naopak posiluje tlak na recenzenty v malých oborech, a jak udržet pluralitu tam, kde je odborníků málo.
Případy, které techniku ukazují
Historické: případ Lysenko (politicky řízené posuzování vědy), Stapelův podvod a Schönův podvod, kde recenzní řízení nezachytilo vymyšlená data (selhání propustnosti). Anonymizované kompozity: vědecká disinflace a kult výzkumné disciplíny.
Literatura
- Peters, D. P., & Ceci, S. J. (1982). Peer-review practices of psychological journals: The fate of published articles, submitted again. Behavioral and Brain Sciences.
- Merton, R. K. (1942). The Normative Structure of Science.
- Lamont, M. (2009). How Professors Think: Inside the Curious World of Academic Judgment.
- Ioannidis, J. P. A. (2005). Why most published research findings are false. PLoS Medicine.
Související
Techniky
- EA-2.4.8 Zachycení časopisu – redakční vrstva.
- EA-2.1.4 Publikační blokace – dopad na jednotlivce.
- EA-2.1.9 Vytváření pseudokonsenzu – literatura jako filtr.
- EA-2.4.7 Zachycení konference – obdoba v konferenčních programech.
Pojmy
- Glosář: krize replikovatelnosti – důsledky selhání kontroly.
Pomoc
- Politika střetu zájmů – nezávislost recenzentů.
Kontext techniky
Související pojmy
Odkazují sem 17
- Epistemická monokultura
- IRB review (posouzení etickou komisí)
- Případ 05: Vědecká disinflation
- Případ 34: Profesorská totalizace mladších kolegů
- Případ 67: Kult výzkumné disciplíny
- Compliance: rozpoznání regulatorního zajetí
- Vzdělávací scénář: Zkreslení v peer review
- Historický případ: Lysenkismus
- Rychlá karta EA-2.4.6: Zachycení recenzního řízení
- EA-2.1.4 Publikační blokace
- EA-2.1.9 Vytváření pseudokonsenzu
- EA-2.4.5 Přepis hodnoticích kritérií
a 5 dalších