Definice signatury
Epistemická kalibrace je shoda mezi tím, jak jistě něčemu věříme, a tím, jak dobře je to podloženo. Dobře kalibrovaný člověk je si jistý tam, kde má silné důvody, a nejistý tam, kde má slabé; z věcí, kterým přisuzuje vysokou pravděpodobnost, se jich skutečně naplní většina. Jako detekční signatura tato stránka popisuje vzorec kalibračního rozladění ve vztahu mezi zdrojem a zasaženou osobou. Rozladění má dvě zrcadlové strany, které se obvykle objevují pohromadě. Na straně zdroje jde o soustavnou nadměrnou jistotu, která se nemění s důkazy; behaviorálně ji zachycuje nepřiměřená sebejistota a v terminologii přehledu Moora a Healyho (2008) jí nejblíže odpovídá nadměrná přesnost (overprecision), tedy nepřiměřeně úzké rozpětí nejistoty u vlastních přesvědčení. Na straně zasažené osoby klesá jistota ve vlastní úsudek pod úroveň jejích skutečných důkazů a současně roste důvěra ve zdroj nad úroveň toho, co zdroj doložil.
Kalibrace je zároveň obranná dovednost: kdo umí vědomě přiřazovat míru jistoty podle důkazů, je méně zranitelný vůči jistotě předváděné druhými. Teoretické zázemí dává epistemická pokora, metakognice a výzkum úsudku v nejistotě (Tversky & Kahneman, heuristiky a zkreslení; viz EA-7.3.2).
Co signatura indikuje
Ve zdravém epistemickém vztahu se důvěra pohybuje podle zkušenosti: kdo se osvědčil, získává více důvěry, kdo se mýlil, méně. Kalibrační rozladění tento pohyb přerušuje. Zdroj, který se opakovaně mýlí, si důvěru udržuje nebo zvyšuje; vlastní úsudek zasažené osoby, který se opakovaně ukázal správný, ztrácí váhu. Nejde tedy o jednotlivý omyl, ale o odpojení důvěry od výsledků.
Takové odpojení je strukturálním jádrem mnoha jiných signatur: gaslighting snižuje důvěru ve vlastní paměť navzdory dokladům, cirkularita citací zvyšuje důvěru v tvrzení bez nových dokladů, monokultura zdrojů odstraňuje srovnání, podle něhož by se dalo kalibrovat. Proto je tato signatura průřezová: shrnuje, co mají ostatní signatury společného na úrovni úsudku.
Pojem kalibrace pochází z výzkumu pravděpodobnostních úsudků. Brier (1950) navrhl pro meteorologické předpovědi skóre, které měří, jak blízko jsou vyjádřené pravděpodobnosti skutečným výsledkům, a dodnes je základem hodnocení kalibrace. Lichtenstein, Fischhoff a Phillips (1982) shrnuli tehdejší výzkum s výsledkem, který se opakovaně potvrzuje: lidé jsou u obtížných otázek obvykle příliš sebejistí a jejich jistota roste rychleji než přesnost. Tversky a Kahneman (1974) ukázali, že úsudky v nejistotě se opírají o heuristiky, které jsou užitečné, ale vedou k soustavným zkreslením; kalibrační rozladění v epistemickém vztahu lze chápat jako situaci, v níž je takové zkreslení zesíleno a nasměrováno zvenčí. Tetlock a Gardner (2015) doložili, že kalibraci lze trénovat zpětnou vazbou a pravidelným zaznamenáváním předpovědí, což dává signatuře i obrannou stránku. Flavell (1979) popsal metakognici jako schopnost sledovat a řídit vlastní poznávání; kalibrace je její nejlépe měřitelnou složkou.
Pozorovatelné markery
Na straně zdroje
| Marker | Na čem se pozná |
|---|---|
| Jistota nezávislá na obtížnosti tématu | Táž míra jistoty u snadné i u sporné otázky |
| Chybějící revize po selhané předpovědi | Jistota zůstává stejná, mění se jen výklad výsledku |
| Nárok na důvěru z postavení, ne z výsledků | „Věř mi“ místo záznamu toho, co se dříve potvrdilo |
Na straně zasažené osoby
| Marker | Na čem se pozná |
|---|---|
| Omluvná nejistota u doložitelně správných věcí | „Asi se mýlím“ pronesené nad vlastním správným zápisem nebo zprávou |
| Nerovný nárok na doklad | Tvrzení zdroje se přijímá bez dokladu, vlastní doklad nestačí |
| Vymizení stupňů jistoty | Vše je buď „jasné, protože to řekl on“, nebo „nevím“ |
Relační a institucionální kontext
| Prostředí | Podoba markeru |
|---|---|
| Skupina nebo organizace | Nesleduje se, zda se rozhodnutí a předpovědi naplnily |
| Přičítání chyb | Omyly autority nesou podřízení nebo „okolnosti“ |
| Zacházení s kritikou | Výhrada opřená o výsledky je odmítnuta jako „negativita“ |
Detekční kritéria
| Bod | Kritérium |
|---|---|
| 1 | U zdroje lze doložit opakované tvrzení s vysokou jistotou, které se nenaplnilo, bez revize jistoty. |
| 2 | U zasažené osoby lze doložit pokles důvěry ve vlastní úsudek, přestože její úsudek byl v ověřitelných případech správný. |
| 3 | Důvěra zasažené osoby ve zdroj se nesnížila úměrně jeho omylům. |
| 4 | Obě změny časově souvisejí se vztahem. |
Pozitivní při splnění bodů 1–3; bod 4 ukazuje na vztahový původ rozladění.
Odlišení od benigních podob
Oprávněná důvěra v experta je racionální: laik legitimně důvěřuje lékaři více než sobě v otázkách medicíny. Goldman (2001) ukázal, že laik má i bez odborných znalostí k dispozici nepřímé ukazatele – argumentaci, shodu s jinými odborníky, záznam úspěšnosti –, podle nichž může důvěru kalibrovat. Rozdíl oproti signatuře spočívá v tom, že lékař svou jistotu dokládá, přiznává omyly a důvěra laika se pohybuje podle výsledků.
Při učení student na začátku oboru správně přisuzuje větší váhu učiteli a s rostoucí zkušeností jeho vlastní jistota roste. Signatura předpokládá opačný směr: s trváním vztahu vlastní jistota klesá, i když se úsudek osvědčuje. Přirozená nekalibrovanost je u většiny lidí běžná – v některých oblastech jsou přehnaně sebejistí, v jiných příliš opatrní (Moore & Healy, 2008) – a sama o sobě není důsledkem působení. Konečně v krátkodobé krizi člověk přechodně přenechá úsudek druhým, což může být rozumné; po odeznění krize se k vlastnímu úsudku vrací.
Klinická diferenciální diagnostika
Deprese systematicky snižuje důvěru ve vlastní schopnosti a úsudek, a to plošně a bez vazby na jeden vztah. Zajímavou výhradou je výzkum tzv. depresivního realismu: Alloy a Abramson (1979) zjistili, že mírně depresivní účastníci odhadovali svou kontrolu nad výsledkem v některých úlohách přesněji než nedepresivní. Snížená jistota tedy nemusí znamenat sníženou přesnost, a hodnotitel musí posuzovat obojí zvlášť.
Úzkostné poruchy zvyšují nejistotu a potřebu ujištění, hypomanie a mánie naopak nafukují vlastní jistotu. Závislá struktura osobnosti se projevuje dlouhodobým přenecháváním rozhodnutí druhým napříč vztahy; Bornstein (1992) ji popisuje jako stabilní vzorec, který se vytváří již ve vývoji. Kognitivní pokles může oprávněně snižovat důvěru ve vlastní paměť; i zde však hrozí zneužití, protože oprávněná nejistota v jedné oblasti se snadno rozšíří na oblasti, v nichž úsudek zůstává spolehlivý.
Rozlišovacím znakem signatury je vztahová specifičnost a doložitelná správnost úsudku, kterému osoba přestala věřit. Klinické posouzení přísluší kvalifikovanému odborníkovi.
Riziko falešné pozitivity
Hodnotitel, který zdroji nevěří z jiných důvodů, může jeho jistotu chybně označit za nepřiměřenou. Kalibraci je proto třeba posuzovat podle výsledků, ne podle sympatií, a pokud možno na záznamu předpovědí, který vznikl před tím, než byly výsledky známy.
U oborů, kde chybí ověřitelné výsledky – v umění, v hodnotových otázkách, v dlouhodobých výhledech – nelze kalibraci měřit vůbec, a signatura se v nich může opírat jen o vztahovou dynamiku. Zpětné hodnocení předpovědí navíc trpí zkreslením zpětného pohledu: Fischhoff (1975) ukázal, že znalost výsledku vede lidi k přesvědčení, že byl předvídatelnější, než ve skutečnosti byl. Hodnotitel tak může zdroji vyčítat omyl, který v době předpovědi nebylo rozumné očekávat.
Validační test
Kalibrační audit. Pro zdroj i pro zasaženou osobu se sestaví seznam konkrétních, ověřitelných tvrzení z minulosti spolu s tehdy vyjádřenou mírou jistoty a skutečným výsledkem. Porovná se, jak často se naplnila tvrzení, kterým byla přisuzována vysoká jistota. Pokud zdroj při vysoké jistotě často chyboval a zasažená osoba při nízké jistotě měla často pravdu, je kalibrační rozladění doloženo – a tento výsledek bývá pro zasaženou osobu nejsilnějším argumentem pro obnovu důvěry v sebe.
Dokumentace v praxi
Zaznamenat konkrétní tvrzení, míru jistoty (slovně nebo na škále), datum a výsledek. V organizacích vést u důležitých rozhodnutí záznam předpokladů a jejich pozdější vyhodnocení (viz kalibrace rozhodovacích systémů).
Doporučený postup
Pro zasaženou osobu: u důležitých přesvědčení si zapisovat, jak moc si je jistá a proč, a po čase zkontrolovat výsledek. Učit se rozlišovat stupně jistoty („skoro jistě“, „spíš ano“, „nevím“). Viz kalibrace důvěry a osobní audit zkreslení.
Pro profesionála: kalibraci obnovovat na malých, bezpečných otázkách s rychlou zpětnou vazbou; modelovat kalibrovanou řeč. Vhodná je metakognitivní rehabilitace a subakutní detekční trénink.
Pro organizaci: sledovat přesnost předpovědí a rozhodnutí bez ohledu na postavení jejich autora; chránit ty, kdo upozorňují na nekalibrovanou jistotu vedení (psychologická bezpečnost).
Ilustrativní příklad
Anonymizovaný kompozit. Analytička investiční skupiny opakovaně upozorňuje na rizika projektů; ředitel její obavy odbývá s naprostou jistotou. Po třech letech přestane analytička obavy vyslovovat, protože „ředitel to vidí lépe“. Nový člen dozorčí rady nechá zpracovat přehled: z projektů, u nichž analytička varovala, většina skončila ztrátou, z ředitelových jistých předpovědí se naplnila menšina. Přehled se stane podkladem pro změnu rozhodovacího procesu – a analytička se k vlastním odhadům znovu hlásí.
Limity a otevřené otázky
Kalibraci lze měřit jen tam, kde existují ověřitelné výsledky a dostatek případů; u jednotlivého vztahu jich často není dost pro spolehlivý závěr. Lidé navíc vyjadřují jistotu nepřesně a převod slov na čísla je sám nejistý. Kent (1964) upozornil již v kontextu zpravodajských analýz, že výrazy jako „pravděpodobně“ nebo „možná“ si různí čtenáři vykládají velmi odlišně, a navrhl jejich standardizaci; v běžné řeči taková standardizace chybí.
Obnova kalibrace u zasažené osoby vyžaduje čas a zkušenosti, které nelze nahradit vysvětlením. Tetlock a Gardner (2015) popisují trénink kalibrace jako postupné zpřesňování na základě opakované zpětné vazby, a podobně i zasažená osoba potřebuje řadu malých ověřených úsudků, než znovu získá důvěru ve vlastní. Otevřenou otázkou zůstává, jak takovou zpětnou vazbu bezpečně organizovat, aby ji nebylo možné zneužít k dalšímu zpochybňování.
Literatura
- Alloy, L. B., & Abramson, L. Y. (1979). Judgment of contingency in depressed and nondepressed students: Sadder but wiser? Journal of Experimental Psychology: General, 108(4), 441–485.
- Bornstein, R. F. (1992). The dependent personality: Developmental, social, and clinical perspectives. Psychological Bulletin, 112(1), 3–23.
- Brier, G. W. (1950). Verification of forecasts expressed in terms of probability. Monthly Weather Review, 78(1), 1–3.
- Fischhoff, B. (1975). Hindsight ≠ foresight: The effect of outcome knowledge on judgment under uncertainty. Journal of Experimental Psychology: Human Perception and Performance, 1(3), 288–299.
- Flavell, J. H. (1979). Metacognition and cognitive monitoring: A new area of cognitive–developmental inquiry. American Psychologist, 34(10), 906–911.
- Goldman, A. I. (2001). Experts: Which ones should you trust? Philosophy and Phenomenological Research, 63(1), 85–110.
- Kent, S. (1964). Words of estimative probability. Studies in Intelligence, 8(4), 49–65.
- Lichtenstein, S., Fischhoff, B., & Phillips, L. D. (1982). Calibration of probabilities: The state of the art to 1980. In D. Kahneman, P. Slovic, & A. Tversky (Eds.), Judgment under Uncertainty: Heuristics and Biases (s. 306–334). Cambridge University Press.
- Moore, D. A., & Healy, P. J. (2008). The trouble with overconfidence. Psychological Review, 115(2), 502–517.
- Tetlock, P. E., & Gardner, D. (2015). Superforecasting: The Art and Science of Prediction. Crown.
- Tversky, A., & Kahneman, D. (1974). Judgment under uncertainty: Heuristics and biases. Science, 185(4157), 1124–1131.
Související
Sourozenecké signatury
- Nepřiměřená sebejistota – behaviorální strana rozladění u zdroje.
- Skok sebepochybnosti – prožitková strana u zasažené osoby.
- Kalibrace teorie mysli (ToM) – kalibrace úsudku o druhých lidech.
Pojmy a techniky
- Epistemická pokora – ctnost, jejímž jádrem je kalibrace.
- Metakognice – schopnost sledovat vlastní poznávání.
- EA-2.5.1 Pseudo-pokora Internalizace – zneužití pokory k potlačení vlastního úsudku.
Obrana a obnova
- Sebe-obrana: Kalibrace důvěry – praktická cvičení.
- Středně-dobá metakognitivní rehabilitace – obnova úsudku.
Created by Tomáš Korcak (korczis)* | GitHub | Wiki | Kontakt | Glossary | Kompendium*
Související pojmy
Odkazují sem 16
- Metakognice
- Replikační krize (replication crisis)
- Testimoniální nespravedlnost
- Obrana a kalibrace: obrana proti epistemické anihilaci
- Detekční signatury EA technik
- Detekční signatura: Sémantická eroze
- Detekční signatura: Nepřiměřená sebejistota
- Detekční signatura: Kalibrace teorie mysli (ToM)
- Vzdělávací scénář: Metakognitivní kolaps
- Vzdělávací scénář: Meta-evaluace
- Bridge: Epistemická pokora
- Bridge: Metakognice
a 4 dalších