Přeskočit na obsah

EA-2.4.6 Zachycení recenzního řízení (peer review capture)

Vzorec, v němž se recenzní řízení časopisů, grantů nebo komisí ovládne okruhem loajálních recenzentů a přestane plnit roli nezávislé kontroly. Znaky, odlišení, obrana.

EA-2.4.6 Zachycení recenzního řízení (peer review capture)

PoleHodnota
EA kódEA-2.4.6
Kategorie2. Scénáře delegitimizace
Subkategorie2.4 Institucionální zachycení
Přístupová úroveňL2 (odborná analýza)
Riziková úroveňVysoká – zasahuje mechanismus, jímž věda rozlišuje vědění od tvrzení
ReverzibilitaNízká až střední; zkreslená literatura zůstává v oběhu i po nápravě
Rodičovská kapitola3.2 Scénáře epistemické delegitimizace
Rychlá kartaQR: EA-2.4.6

Definice

Recenzní řízení (peer review) je mechanismus, jímž odborná komunita rozhoduje, co se publikuje, financuje nebo uznává. Jeho legitimita stojí na předpokladu, že recenzenti jsou kompetentní, nezávislí a různí. Zachycení recenzního řízení je vzorec, v němž se tento předpoklad naruší: okruh recenzentů se zúží na loajální skupinu, výběr recenzentů se podřídí zájmu editora nebo frakce, a recenze přestane být nezávislou kontrolou.

Výsledek má dvě tváře. Pro „své“ se řízení stává propustným – publikuje se, co by nezávislá kontrola neprošla. Pro „cizí“ se stává neprostupným – vzniká publikační blokace. Obojí mění literaturu oboru a tím i to, co obor považuje za doložené.

Mechanismus (strukturní popis)

  1. Úzký okruh recenzentů. Editor nebo komise vybírá recenzenty z jedné sítě; tytéž osoby recenzují navzájem své práce.
  2. Recenzenti navržení autory. Systémy, které připouštějí návrh recenzentů autorem, umožňují obejít nezávislost; v krajní podobě vznikají fiktivní recenzenti.
  3. Asymetrické požadavky. Stejný typ práce dostává od recenzentů různý stupeň přísnosti podle příslušnosti autora.
  4. Výměnný obchod. Příznivé recenze se oplácejí; vzniká recenzní a citační kruh.
  5. Kontrola odvolání. O odvolání rozhoduje tentýž okruh.
  6. Důvěrnost jako štít. Neveřejnost recenzí brání zjištění vzorce.

Doloženým extrémem jsou tzv. recenzní kruhy: v letech 2014–2015 stáhli velcí vydavatelé desítky článků poté, co zjistili, že recenze pocházely od fiktivních nebo autory ovládaných recenzentů.

Průběh

Zachycení obvykle začíná, když jedna skupina získá redakční nebo komisní pozice (srov. EA-2.4.8 Zachycení časopisu). Během několika let se okruh recenzentů zúží, recenze se zrychlí pro jedny a zpomalí pro druhé. Literatura oboru začne odrážet jeden směr; nesouhlasní autoři odcházejí do jiných kanálů. Vnější pozorovatel vidí „konsenzus“, který ve skutečnosti vznikl filtrem (EA-2.1.9).

Fenomenologické znaky (pohled zevnitř)

ZnakJak ho autor nebo recenzent popisuje
Uzavřený klub„Víme, kdo bude recenzovat, a víme, jak to dopadne.“
Nejistota měřítkaAutor neví, zda je jeho práce slabá, nebo nepohodlná.
Tlak na recenzentaRecenzent cítí očekávání editora, jak má posudek vyznít.
CynismusZtráta víry v recenzní řízení jako záruku kvality.
ÚnikOdchod do jiných časopisů, preprintů nebo oborů.

Detekční markery (pohled pozorovatele)

MarkerCo může naznačovat
Opakující se malý okruh recenzentů u jedné skupiny autorůÚzký okruh
Vysoký podíl recenzentů navržených autoryObejití nezávislosti
Velké rozdíly v délce řízení podle autorůAsymetrie
Vzájemné recenzování a citování v uzavřené skupiněRecenzní a citační kruh; srov. citační cirkularitu
Odvolání vyřizuje tentýž editorKontrola odvolání
Pozdější stažení článků pro problematické recenzeDoložené selhání

Rizikové kontexty

Malé obory, kde se všichni znají; časopisy s jediným dominantním editorem; grantové agentury s malým okruhem posuzovatelů; obory s ostrými spory mezi školami; rychle rostoucí obory s nedostatkem recenzentů; časopisy s finanční motivací přijímat.

Odlišení

  • Běžná nedokonalost recenzí. Recenzní řízení je známé svou nekonzistencí; Peters a Ceci (1982) ukázali, že už publikované články byly po opětovném podání pod jinými jmény a afiliacemi z velké části zamítnuty. To je systémová slabina, ne nutně zachycení.
  • Odborná komunita. V malém oboru se recenzenti přirozeně opakují; rozhoduje, zda existují pojistky proti střetu zájmů.
  • Konzervativismus. Odpor recenzentů k novým myšlenkám je známý jev; zachycení je selektivní podle autorů, ne podle novosti.
  • EA-2.1.4 Publikační blokace. Dopad na jednotlivce; zachycení je strukturní příčina.

Klinický a právní rámec

Klinicky se dopad projevuje u autorů (frustrace, vyhoření, odchod z oboru) a u recenzentů, kteří cítí tlak (morální stres). Na úrovni společnosti jde o zkreslení poznatkové báze, na které stojí klinická doporučení a politická rozhodnutí; srov. krizi replikovatelnosti.

Právně jsou relevantní pravidla vědecké integrity, etické zásady vydavatelů (COPE), pravidla grantových agentur pro střet zájmů a v případě fiktivních recenzí i podvodné jednání. Viz profesionální pochybení.

Postup pro posuzovatele

Posuzovatel (komise pro integritu, vydavatel, agentura) by měl analyzovat metadata řízení: kdo recenzoval koho, jak často, jak dlouho řízení trvalo a s jakým výsledkem, a porovnat je mezi skupinami autorů. Užitečné je síťové zobrazení vztahů autor–recenzent a autor–citace. Dále je třeba ověřit identitu recenzentů navržených autory a jejich vztah k autorům. Výpovědi autorů o nespravedlivém zacházení jsou podnětem, nikoli důkazem; důkazem je obrazec v datech.

Obrana a neutralizace

Pro vydavatele a agentury. Evidence střetů zájmů, ověřování identity recenzentů, omezení recenzentů navržených autory, rotace editorů, nezávislé odvolací řízení, audit metadat recenzí, zveřejňování recenzí nebo jmen recenzentů (otevřená recenze) tam, kde to obor snese. Viz sledovatelnost rozhodnutí a politika střetu zájmů.

Pro autory. Zveřejňovat preprinty, žádat vyloučení recenzentů se střetem zájmů, publikovat v kanálech s jinou recenzní komunitou. Pro recenzenty: deklarovat střet zájmů a odmítnout recenzi tam, kde nemohou být nezávislí.

Zotavení

Obor se zotavuje stažením zkreslených prací, obnovou plurality recenzentů a revizí přehledových textů. Autoři vyloučení z publikování potřebují nové kanály a nezávislé uznání práce. Viz poučení po incidentu.

Ilustrativní příklad (anonymizovaný kompozit)

V malém oboru převezme vedení dvou hlavních časopisů tatáž skupina. Během pěti let recenzuje osm lidí většinu článků; autoři z jiné školy čekají na rozhodnutí v průměru třikrát déle a jejich rukopisy jsou častěji zamítnuty s obecným zdůvodněním. Analýza metadat, kterou provede nový vydavatel po stížnosti, ukáže uzavřený kruh vzájemných recenzí a citací. Část článků je opravena, nové redakční rady jsou mezinárodní.

Otázky pro analýzu

  • Kolik různých recenzentů posuzovalo práce určité skupiny a jak často se opakují?
  • Jaký podíl recenzentů navrhli autoři a byla ověřena jejich identita?
  • Liší se délka a výsledek řízení podle příslušnosti autorů?
  • Kdo rozhoduje o odvolání a je nezávislý na původním editorovi?

Vztah k jiným technikám

Zachycení recenzního řízení je uzlem, v němž se protínají techniky podkategorií 2.1 a 2.4. Na straně jednotlivce vede k publikační blokaci a potlačování citací; na straně struktury navazuje na zachycení časopisu a připravuje půdu pro pseudokonsenzus. Při analýze konkrétního případu je proto užitečné ptát se, která z těchto vrstev je primární a které jsou jejím důsledkem.

Meze a otevřené otázky

Recenzní řízení je lidské a nikdy nebude zcela nezávislé. Otevřenou otázkou je, zda otevřená recenze (se jmény) zachycení oslabuje, nebo naopak posiluje tlak na recenzenty v malých oborech, a jak udržet pluralitu tam, kde je odborníků málo.

Případy, které techniku ukazují

Historické: případ Lysenko (politicky řízené posuzování vědy), Stapelův podvod a Schönův podvod, kde recenzní řízení nezachytilo vymyšlená data (selhání propustnosti). Anonymizované kompozity: vědecká disinflace a kult výzkumné disciplíny.

Literatura

  • Peters, D. P., & Ceci, S. J. (1982). Peer-review practices of psychological journals: The fate of published articles, submitted again. Behavioral and Brain Sciences.
  • Merton, R. K. (1942). The Normative Structure of Science.
  • Lamont, M. (2009). How Professors Think: Inside the Curious World of Academic Judgment.
  • Ioannidis, J. P. A. (2005). Why most published research findings are false. PLoS Medicine.

Související

Techniky

Pojmy

Pomoc

Související pojmy

Okolí stránky

Otevřít v Mapě knihy →