Tulosharha (Outcome Bias)

Yhdellä silmäyksellä

1. Pika-yhteenveto

Tulosharha on mentaalinen oikotie, joka johtaa meidät kehumaan voittavaa, holtitonta uhkapeluria "rohkeaksi", kun taas tuomitsemme varovaisen strategin, joka häviää tilastolliselle varianssille "epäpätevänä". Tiivistämme riskien, todennäköisyyksien ja informaation epäsymmetrian monimutkaisen maiseman yksinkertaiseksi binaariseksi onnistumisen tai epäonnistumisen tuomioksi—jättäen huomiotta sen, että todennäköisyyksien maailmankaikkeudessa hyvät päätökset voivat johtaa huonoihin tuloksiin huonon onnen vuoksi, ja huonot päätökset voivat onnistua tyhmän onnen kautta.

2. Tiede sen takana

2.1. Löytö ja historia

Tulosharhan muodollinen akateeminen operationalisointi alkoi vuonna 1988 Pennsylvanian yliopiston Jonathan Baronin ja John Hersheyn uraauurtavalla tutkimuksella "Outcome Bias in Decision Evaluation". Ennen tätä työtä attribuutioteoriat olivat vahvistaneet, että ihmiset etsivät kausaalisia selityksiä tapahtumille, mutta Baron ja Hershey olivat ensimmäisiä, jotka eristivät spesifisti päätöksentekoprosessin arvioinnin tulosinformaatiosta kontrolloidussa kokeellisessa ympäristössä.

Yli kolmen vuosikymmenen ajan Baron ja Hershey (1988) oli alan perusteos. Sosiaalipsykologian "replikaatiokriisi" käynnisti näiden klassisten löydösten modernin uudelleentarkastelun 2020-luvulla. Tätä pyrkimystä ovat johtaneet kansainväliset tutkijat, jotka ovat sitoutuneet avoimen tieteen käytäntöihin, merkittävimpänä Gilad Feldman Hongkongin yliopistosta.

Kriittinen kehitysaskel tuli käyttäytymisetiikan tutkimuksesta, erityisesti Ginon, Mooren ja Bazermanin vuoden 2008 tutkimuksesta "No Harm, No Foul", joka osoitti, että tulosinformaatio vääristää eettisesti kyseenalaisten toimintojen arviointia.

2.2. Avaintutkijat

2.3. Merkittävät tutkimukset

Tulosharha päätösten arvioinnissa (Baron & Hershey, 1988)

Baron ja Hershey suunnittelivat viisi koetta testatakseen, vaikuttaako tulosinformaatio päätöksen laadun arviointiin jopa silloin, kun arvioijalla on kaikki se informaatio, joka päätöksentekijällä oli valintahetkellä.

Koe 1: Lääketieteellinen päätöksenteko

• Osallistujat (N=20 perustutkinto-opiskelijaa) lukivat 15 skenaariota lääkäreistä, jotka päättivät, suoritetaanko potilaalle riskialtis leikkaus vai hoidetaanko tätä lääketieteellisesti
• Todennäköisyydet ilmoitettiin selkeästi (esim. 92 % onnistumisprosentti, 8 % kuolleisuus)
• Ainoa muuttuja, joka muuttui, oli tulos—onnistuminen tai kuolema
• Osallistujat arvioivat lääkärin ajattelun laatua ja pätevyyttä

Keskeiset löydökset:

• Osallistujat arvioivat pätevyyden ja ajattelun laadun huomattavasti korkeammaksi, kun tulokset olivat suotuisia
• Kun leikkaus onnistui, lääkäreitä pidettiin "erittäin pätevinä" ja heillä katsottiin olevan "hyvä ajattelukyky"
• Kun leikkaus epäonnistui (8 %:n riski toteutui), lääkäreitä pidettiin "vähemmän pätevinä" ja heillä katsottiin olevan "huono ajattelukyky"
• Ilmiö säilyi, vaikka tutkittavia käskettiin olemaan huomioimatta tulosta
• Harha säilyi senkin jälkeen, kun tutkijat selittivät epävarmuuden vallitessa tapahtuvan päätöksenteon periaatteet

Aiyerin ja Feldmanin replikaatio (2023)

Massiivinen, esirekisteröity replikaatiotutkimus tarkasteli uudelleen vuoden 1988 tutkimuksen koetta 1 merkittävillä metodologisilla parannuksilla:

• Otoksen koko: 692 osallistujaa (vs. alkuperäinen 20)
• Asetelma: Osallistujien välinen (jokainen henkilö näkee vain yhden tuloksen jäljitellen reaalimaailman olosuhteita)
• Alkuperäinen efektikoko: Cohenin d = 0.21–0.53
• Replikaation efektikoko: Cohenin d = 0.77–1.1

Replikaatio havaitsi tulosharhan olevan huomattavasti voimakkaampi kuin alun perin luultiin, mikä viittaa siihen, että alkuperäinen osallistujien sisäinen koeasetelma on saattanut vaimentaa efektiä.

"No Harm, No Foul" (Gino, Moore & Bazerman, 2008)

Osallistujat lukivat tiedemiehestä, joka rikkoo turvallisuusprotokollia nopeuttaakseen lääketutkimusta:

• Ehto A (Ei vahinkoa): Rikkomus tapahtuu, onnettomuutta ei tapahdu
• Ehto B (Vahinko): Rikkomus tapahtuu, laboratorio-onnettomuus vahingoittaa kollegaa

Osallistujat tuomitsivat ehdon B tiedemiehen huomattavasti epäeettisemmäksi ja ansaitsevan kovemman rangaistuksen huolimatta täysin samanlaisesta toiminnasta. Tämä osoitti yhteiskunnan toimivan "ei vahinkoa, ei virhettä" (no harm, no foul) -heuristiikan varassa.

2.4. Neurologinen perusta

Ensisijainen kognitiivinen mekanismi tulosharhan taustalla on ominaisuuden korvaaminen (Attribute Substitution), jota Daniel Kahnemanin kaksoisprosessiteoria (dual-process theory) selittää:

• Systeemi 2 (Hidas/Kallis): Päätöksen laadun arviointi vaatii todennäköisyyksien, kontrafaktuaalien ja tiedon analysointia tiettynä menneenä ajankohtana
• Systeemi 1 (Nopea/Halpa): Tuloksen arviointi on vaistomaista ja näkyvää
• Korvaaminen: Aivot korvaavat vaikean kysymyksen ("Oliko päätös järkevä?") helpolla kysymyksellä ("Oliko tulos hyvä?")

Oikeudenmukaisen maailman hypoteesi (Melvin Lerner) tarjoaa lisäpsykologisen ajurin. Ihmisillä on perustavanlaatuinen tarve uskoa, että maailmankaikkeus on järjestyksessä ja reilu—että hyville ihmisille tapahtuu hyviä asioita. Kun pätevä päätöksentekijä kärsii katastrofaalisen epäonnistumisen sattuman vuoksi, se rikkoo tätä uskomusta ja vihjaa, että mekin olemme haavoittuvia satunnaisille tragedioille. Tämän ahdistuksen ratkaisemiseksi mieli etsii aktiivisesti virheitä päätöksentekijästä, saaden meidät vakuuttuneiksi siitä, että hänen on täytynyt tehdä virhe.

3. Evolutiivinen alkuperä

Tulosharha kehittyi todennäköisesti adaptiivisena heuristiikkana esi-isiemme ympäristöissä, joissa:

• Palaute oli luotettavaa: Yksinkertaisissa, vakaissa ympäristöissä tulokset korreloivat usein voimakkaasti päätösten laadun kanssa. Jos metsästäjä valitsi väärän polun ja joutui pedon syömäksi, se oli todellakin "huono päätös" useimmissa tapauksissa.
• Tilastollinen varianssi oli harvinaista: Esi-isämme eivät käsitelleet monimutkaisia todennäköisyysympäristöjä (rahoitusmarkkinat, lääketieteelliset toimenpiteet tunnetuilla todennäköisyyksillä), joissa tulosharhasta tulee maladaptiivinen.
• Toisten virheistä oppiminen pelasti ihmishenkiä: Toisten ankara tuomitseminen huonoista tuloksista—vaikka se olisikin epäreilua—saattoi rohkaista ryhmiä konservatiivisempaan käyttäytymiseen, vähentäen kollektiivista riskiä.
• Kognitiivisen energian säästäminen: Nopeiden tuomioiden tekeminen näkyvien tulosten perusteella vaatii paljon vähemmän henkistä vaivaa kuin päätöksentekijän tietotilan uudelleenrakentaminen ja odotusarvojen laskeminen.

Harha on ominaisuus, josta tuli bugi. Nykyaikaisessa maailmassa, joka on täynnä stokastisia prosesseja—joissa kirurgit, kauppiaat ja insinöörit toimivat aidon epävarmuuden vallitessa—tulosharha saa meidät rankaisemaan varovaisia ja palkitsemaan holtittomia, tuhoten kyvyn oppia rationaalisia läksyjä kokemuksesta.

4. Miten tämä harha ilmenee

4.1. Arkielämässä

• Sen henkilön kehuminen, joka ajaa päin punaisia valoja ja ehtii tapaamiseen ajoissa, kun taas tuomitaan henkilö, joka noudatti asianmukaista varovaisuutta, mutta viivästyi ennalta-arvaamattoman liikenteen vuoksi
• Ystävän parisuhdevalintojen tuomitseminen "ilmeisen vääriksi" vasta sen jälkeen, kun suhde on päättynyt
• Uskominen siihen, että sinun "olisi pitänyt tietää" ostaa tai myydä osaketta perustuen siihen, mitä markkinat tekivät myöhemmin
• Lomavalintojen, urasiirtojen tai asuntopäätösten jälkikäteinen arvostelu perustuen siihen, miten asiat sujuivat, pikemminkin kuin siihen, mikä oli tiedossa päätöksentekohetkellä

4.2. Työpaikalla

• Suoritusarvioinnit, jotka palkitsevat onnekkaista tuloksista hyvän prosessin sijaan
• Palkkaamispäätökset, jotka suosivat ehdokkaita, joiden aiemmat työnantajat sattuivat menestymään (korrelaatio, ei kausaliteetti)
• Johtajuusarvioinnit, joissa toimitusjohtajia ylistetään neroina markkinoiden noustessa ja tuomitaan epäpätevinä markkinoiden laskiessa—riippumatta heidän todellisista päätöksistään
• Projektien retrospektiivit, joissa "otetaan opiksi" sen perusteella, mitä tapahtui, eikä sen perusteella, mikä oli ennakoitavissa

4.3. Liiketoiminnassa ja markkinoinnissa

• Riskin vahvistaminen: "Onnekasta" holtitonta käyttäytymistä ei rangaista, mikä rohkaisee epäsuorasti oikomaan mutkia. Jos kauppias ottaa luvattomia riskejä ja tekee voittoa, hänet palkitaan—kunnes vääjäämätön epäonnistuminen iskee
• Osakekurssin vahvistaminen: Wall Streetin analyytikot käyttävät nousevia osakekursseja liiketoimintamallien validoimiseen. "Jos osake on nousussa, yrityksen on oltava fiksu"—Enronin koko julkisivua ylläpidettiin tällä tavoin romahdukseen saakka
• Markkinoinnin attribuutio: Kampanjoita, jotka sattuivat osumaan yksiin menestyksen kanssa, ylistetään; identtiset strategiat, jotka osuivat yksiin epäonnistumisen kanssa, tuomitaan

4.4. Politiikassa ja mediassa

• Poliitikkoja tuomitaan tapahtumista, jotka ovat suurelta osin heidän hallintansa ulkopuolella (taloussyklit, luonnonkatastrofit)
• Sotilasjohtajia ylistetään tai tuomitaan taistelujen tulosten perusteella eikä saatavilla olleen tiedustelutiedon mukaisen strategisen järkevyyden perusteella
• Poliittisia päätöksiä tuomitaan jälkikäteen sellaisten tulosten perusteella, jotka eivät olleet ennakoitavissa (pandemiareaktiot, infrastruktuuri-investoinnit)

4.5. Terveydenhuollossa

Hoitovirhevääristymä: Oikeudellinen standardi lääketieteelliselle hoitovirheelle on "huolellisuusstandardi" (Standard of Care)—mitä järkevä lääkäri tekisi. Todellisuudessa hoitovirheoikeudenkäyntejä ohjaa lähes yksinomaan tulosharha:

• Lääkärit voittavat 80–90 % oikeudenkäynneistä (jury trials), kun tulokset ovat lievempiä
• Kun tulokset ovat katastrofaalisia, voittoprosentit putoavat merkittävästi, vaikka todisteet laiminlyönnistä olisivat heikot
• "Rajatapauksissa" tuloksesta tulee ratkaiseva tekijä

Retrospektiivinen validiteetti diagnostiikassa: Kuvia arvioivat radiologit pitävät patologiaa "ilmeisenä" vasta saatuaan tietää, että potilas kuoli. Mainituissa tapauksissa muut radiologit eivät huomanneet samoja merkkejä ennen kuin heille kerrottiin tulos—jolloin epäselvästä varjosta tuli "selvästi näkyvä patologia".

Defensiivinen lääketiede (Defensive Medicine): Koska lääkärit tietävät, että heitä tuomitaan tulosten perusteella:

• Ylitestaaminen: Tarpeettomia TT-kuvauksia ja magneettikuvauksia tehdään 1-kymmenestätuhannesta-mahdollisuuksien "poissulkemiseksi"
• Riskien välttäminen: Kirurgit kieltäytyvät leikkaamasta korkeariskisiä potilaita, koska kuolema tuomittaisiin epäonnistumiseksi, vaikka leikkaus olisi ainoa mahdollisuus

4.6. Rahoituksessa ja sijoittamisessa

Mauboussinin matriisi:

Vaarallisin neljännes on "Tyhmä onni" (Huono prosessi/Hyvä tulos). Kun kauppiaat ottavat holtittomia riskejä ja voittavat, johto palkitsee heidät bonuksilla—vahvistaen huonoa käyttäytymistä katastrofaaliseen epäonnistumiseen saakka.

5. Tosielämän tapaustutkimukset

Tapaustutkimus 1: Nick Leeson ja Barings Bankin romahdus (1995)

• Konteksti: Barings Bank, 233 vuotta vanha, oli Britannian vanhin investointipankki. Nick Leeson, 28, oli sijoitettu Singaporeen, ja hänen piti suorittaa matalariskistä arbitraasia pörssien välillä.
• Mitä tapahtui: Arbitraasin sijaan Leeson asetti massiivisia, luvattomia suunnattuja vetoja. Vuonna 1993 hän raportoi 10 miljoonan punnan voitot—10 % pankin kokonaistuloista. Hän piilotti tappiot salaiseen virhetiliin (88888).
• Harha työssä: Ylin johto, sokaistuneena tuloksesta, sivuutti prosessin. He epäonnistuivat kysymään, kuinka back-office-virkailija tuotti tällaisia tuottoja "riskittömällä" arbitraasilla. He ohittivat sisäiset tarkastukset, koska "Nick on tähti."
• Seuraukset: Kun Koben maanjäristys liikutti markkinoita hänen positioitaan vastaan tammikuussa 1995, pankki menetti 1,4 miljardia dollaria ja romahti kokonaan.
• Opitut asiat: Jos johto olisi arvioinut hänen prosessinsa vuonna 1993 (luvaton riski), he olisivat erottaneet hänet. Sen sijaan he ylistivät hänen tulostaan, kunnes se tuhosi heidät.

Tapaustutkimus 2: Jerome Kerviel ja Société Générale (2008)

• Konteksti: Kerviel, nuorempi kauppias, harjoitti luvattomia fiktiivisiä kauppoja peittääkseen suunnatut vetonsa.
• Mitä tapahtui: Vuonna 2007 hän tuotti 1,4 miljardia euroa voittoa. Eurex-pörssin sisäiset hälytykset laukaisivat 75 varoitusta.
• Harha työssä: Esimiesten kerrotaan sivuuttaneen varoitukset, koska hänen yksikkönsä oli kannattava. Hyvä tulos toimi kilpenä menettelytapojen tarkastelua vastaan.
• Seuraukset: Kun tulokset kääntyivät negatiivisiksi vuonna 2008, pankki menetti 4,9 miljardia euroa ja väitti Kervielin olevan yksin toiminut "terroristi"—huolimatta siitä, että kulttuuri oli hiljaisesti hyväksynyt hänen riskinottoaan.
• Opitut asiat: Kuvio oli identtinen Baringsin kanssa: kannattavat tulokset hiljensivät prosessihuolenaiheet, kunnes katastrofi iski.

Historiallinen esimerkki: Challenger-sukkulan onnettomuus (1986)

Avaruussukkula Challengerin räjähdys on tulosharhan lopullinen tapaustutkimus insinööritieteissä, havainnollistaen sitä, mitä sosiologi Diane Vaughan kutsui "poikkeavuuden normalisoitumiseksi" (Normalization of Deviance).

• Prosessin epäonnistuminen: Kiinteän polttoaineen apuraketeissa oli O-renkaat, jotka oli suunniteltu tiivistämään liitokset. Useilla aiemmilla lennoilla näissä O-renkaissa oli näkynyt eroosiota ja ohivirtausta (kuuman kaasun karkaamista)—mikä oli selkeä suunnittelumäärittelyjen rikkomus.
• Tulosansa: Kaikissa aiemmissa tapauksissa toissijaiset tiivisteet kestivät tai noki tukki reiät, ja sukkula saavutti kiertoradan turvallisesti. NASA:n johto katsoi tulosta ("Tehtävä onnistui") ja päätteli, että prosessi ("Lentäminen kuluneilla O-renkailla") oli hyväksyttävä.
• Kaskadi: Jokainen onnistunut laukaisu vahvisti harhaa. He "normalisoivat" poikkeavuuden. Tammikuun 28. päivänä 1986 lämpötilat laskivat, O-renkaat pettivät täysin, ja seitsemän miehistön jäsentä kuoli. Päätös laukaisusta ei ollut ainutlaatuinen virhe—se oli vuosien tulosharhan seurausta, joka oli vahvistanut virheellistä riskinarviointia.

6. Tämän harhan kustannukset

6.1. Henkilökohtaiset kustannukset

• Ihmissuhteiden vahingoittuminen: Puolisoiden, ystävien tai perheen epäreilu syyttäminen tuloksista, jotka olivat aidosti ennalta-arvaamattomia
• Itsensä syyllistäminen: Sellaisten "epäonnistumisten" sisäistäminen, jotka todellisuudessa olivat hyviä päätöksiä huonoilla tuloksilla, johtaen itseluottamuksen murenemiseen
• Opittu avuttomuus: Uskominen siihen, että päätöksillä ei ole väliä, koska tulokset näyttävät satunnaisilta, sen sijaan että ymmärrettäisiin ero prosessin laadun ja onnen välillä
• Menetetyt opit: Väärien asioiden oppiminen kokemuksesta—vältetään järkeviä strategioita, jotka kerran tuottivat huonon tuloksen, ja omaksutaan holtittomia strategioita, jotka sattuivat onnistumaan

6.2. Ammatilliset kustannukset

• Uran haavoittuvuus: Tuomituksi tuleminen (ja mahdollisesti erotetuksi tuleminen) huonoista tuloksista huolimatta järkevästä päätöksenteosta
• Defensiivinen käyttäytyminen: Energian käyttäminen "oman selustan turvaamisen" dokumentointiin optimaalisen päätöksenteon sijaan
• Kieroutuneet kannustimet: Palkitseminen sellaisten holtittomien riskien ottamisesta, jotka sattuvat kannattamaan, luoden kierteen, joka lopulta johtaa katastrofaaliseen epäonnistumiseen
• Tuhoutunut luottamus: Tutkimukset osoittavat, että yksi huono tulos tuhoaa tulevan halukkuuden antaa päätöksentekijän yrittää uudelleen riippumatta prosessin laadusta

6.3. Yhteiskunnalliset kustannukset

• Defensiivinen lääketiede: Arviolta 46–210 miljardia dollaria vuosittain Yhdysvaltain terveydenhuoltojärjestelmässä
• Oikeusjärjestelmän vääristyminen: Tuomiot, jotka eivät heijasta todellista laiminlyöntiä, johtavat sekä epäoikeudenmukaisiin tuomioihin että riittämättömään vastuuseen
• Rahoitusjärjestelmän hauraus: Holtittomat kauppiaat ja normalisoitu poikkeavuus kaatavat toistuvasti instituutioita (Barings, Enron, vuoden 2008 kriisi)
• Innovaatioiden tukahduttaminen: Rationaalisesta riskinotosta rangaistaan sen epäonnistuessa, mikä lannistaa yrittäjyyttä ja tieteellistä edistystä

6.4. Tilastollinen vaikutus

• Baron & Hershey (1988): Osallistujat arvioivat identtisiä päätöksiä johdonmukaisesti eri tavoin pelkästään tuloksen perusteella
• Moderni replikaatio (Feldman et al., 2023): Efektikoko d=0.77–1.1—psykologisin standardein suuri efekti
• Moraalinen ulottuvuus: Negatiiviset tulokset eivät vain saaneet päätöksentekijöitä vaikuttamaan vähemmän päteviltä—heidät tuomittiin "epäeettisemmiksi" ja "syyllisemmiksi"
• Ohjeiden vastustuskyky: Vaikka tutkijat selittivät, miksi tulosten perusteella tuomitseminen on irrationaalista, monet osallistujat vaativat, että päätöksentekijöitä tulisi tuomita tulosten perusteella

7. Piilotetut hyödyt

Vaikka tulosharha on pääosin maladaptiivinen monimutkaisissa nykyaikaisissa ympäristöissä, sillä voi olla joitakin hyödyllisiä tarkoituksia:

• Vastuullisuuspaine: Uhka joutua arvioiduksi tulosten perusteella motivoi huolelliseen päätöksentekoon ja perusteelliseen valmistautumiseen, vaikka itse arviointi olisikin epäreilua
• Sosiaalinen koordinaatio: Yksinkertaisten tulosperusteisten tuomioiden ympärille on helpompi ryhmittyä kuin monimutkaisten prosessiarviointien, mikä mahdollistaa nopeamman ryhmäpäätöksenteon
• Hyödyllinen heuristiikka vakaissa ympäristöissä: Aloilla, joilla tulokset luotettavasti heijastavat päätösten laatua (yksinkertaiset, deterministiset järjestelmät), tulosperusteinen arviointi on tehokasta
• Motivaatio parantamiseen: Jopa epäreiluna, tulosperusteinen palaute voi motivoida ihmisiä työskentelemään kovemmin, oppimaan enemmän ja hiomaan prosessejaan
• Virheiden havaitseminen: Joskus huonot tulokset paljastavat prosessivirheitä, jotka muuten jäisivät huomaamatta—avain on erottaa signaali kohinasta

Prosessien arvioinnin täydellinen eliminoiminen tulosten arvioinnin hyväksi olisi kuitenkin katastrofaalista millä tahansa todennäköisyyslaskennan alalla. Tavoitteena on asianmukainen kalibrointi, ei eliminoiminen.

8. Itsearviointi: Onko sinulla tämä harha?

8.1. Varoitusmerkkien tarkistuslista

• Ajattelen usein "Tiesinhän minä" (I knew it all along) saatuani tietää, miten asiat sujuivat
• Arvioin ihmisten päätöksiä ensisijaisesti sen perusteella, onnistuivatko asiat
• Kun jokin menee pieleen, etsin välittömästi sitä, mitä kyseinen henkilö "teki väärin"
• Minulla on vaikeuksia hyväksyä, että hyvät päätökset voivat johtaa huonoihin tuloksiin
• Annan enemmän arvoa onnekkaille onnistumisille kuin järkeville prosesseille, jotka epäonnistuivat
• Muutan mielipidettäni jonkun pätevyydestä yksittäisen tuloksen perusteella
• Uskon, että ihmiset "saavat mitä ansaitsevat" useimmissa tilanteissa
• Minulla on vaikeuksia erottaa toisistaan taito ja onni suorituksen arvioinnissa
• Kun onnistun, luen sen taitoni ansioksi; kun epäonnistun, etsin ulkoisia tekosyitä
• Minusta tuntuu, että tulosten perusteella tuomitseminen on "reilumpaa" kuin prosessien analysointi

Pisteytys:

• 0–2 rastitettuna: Matala alttius
• 3–5 rastitettuna: Kohtalainen alttius
• 6–8 rastitettuna: Korkea alttius
• 9–10 rastitettuna: Erittäin korkea alttius

8.2. Itsetutkiskelukysymykset

1. Ajattele aikaa, jolloin kritisoidit jotakuta päätöksestä, jolla oli huono tulos. Oliko sinulla käytettävissäsi kaikki se informaatio, joka hänellä oli? Oliko tulos todella ennakoitavissa?
2. Oletko koskaan kehunut holtitonta päätöstä, koska se sattui toimimaan?
3. Kun arvioit omia menneitä päätöksiäsi, arvioitko niitä sen perusteella, mitä tiesit silloin, vai sen perusteella, mitä tiedät nyt?
4. Kohteletko tilastollista varianssia eri tavalla silloin, kun se auttaa sinua, verrattuna siihen, kun se satuttaa sinua?
5. Milloin viimeksi kehuin jotakuta hyvän päätöksen tekemisestä huolimatta huonosta tuloksesta?

8.3. Pika-diagnostinen skenaario

Skenaario: Kirurgi suosittelee toimenpidettä, jolla on 95 %:n onnistumisprosentti ja 5 %:n kuolleisuus. Läheisesi suostuu ja kuolee leikkauksen aikana. Kuinka arvioit kirurgin päätöstä suositella toimenpidettä?

Kuinka vastaisit?

• A) Kirurgin olisi pitänyt tietää, että näin käy. Hän antoi surkean suosituksen ja hänet pitäisi saattaa vastuuseen. → Korkea alttius
• B) Olen murtunut, mutta ymmärrän, että 5 % tarkoittaa, että 1 potilas 20:stä kuolee jopa täydellisellä hoidolla. Haluaisin tarkistaa, noudatettiinko asianmukaisia protokollia, mutta tulos yksinään ei todista laiminlyöntiä. → Matala alttius
• C) Tätä on vaikea hyväksyä, mutta kai huonoa onnea sattuu joskus. Silti heidän ei ehkä pitäisi suositella tällaisia riskialttiita toimenpiteitä. → Kohtalainen alttius

9. Tämän harhan tunnistaminen muissa

9.1. Käyttäytymisindikaattorit

• Äkilliset muutokset ihmisten tai organisaatioiden arvioinneissa tulosten tultua tunnetuiksi
• Tulosmittareiden korostaminen kiinnittäen vain vähän huomiota prosessimittareihin
• Tulosten nopea lukeminen yksilön taidon tai luonteen ansioksi tilannetekijöiden sijaan
• Epäonnistumisten ankara tuomitseminen, erityisesti suhteettomana näyttöön todellisista virheistä
• Kyvyttömyys ilmaista, miltä "hyvä päätös huonolla tuloksella" näyttäisi

9.2. Keskustelun varoitusmerkit

Fraaseja, joita ihmiset sanovat ollessaan tämän harhan vallassa:

• "Tulokset puhuvat puolestaan"
• "Jos olet niin fiksu, miksi et ole rikas?"
• "Hänen olisi pitänyt tietää paremmin"
• "Sitä niittää, mitä kylvää"
• "Jälkiviisaus on helppoa, mutta silti..."

Argumentteja, joita he esittävät:

• Tulosten osoittaminen riittävänä todisteena päätöksen laadusta
• Todennäköisyyksien ja varianssin sivuuttaminen "tekosyina"

Kysymyksiä, joita he välttävät kysymästä:

• "Mitä informaatiota oli saatavilla päätöstä tehtäessä?"
• "Mitkä olivat todennäköisyydet, ja oliko tämä tulos odotetun varianssin sisällä?"

9.3. Tilannelaukaisimet

• Korkeat tunneperäiset panokset: Elämän ja kuoleman tulokset, suuret taloudelliset tappiot tai henkilökohtaiset tragediat lisäävät harhan voimakkuutta
• Näkyvät uhrit: Nimetty, tunnistettavissa oleva vahinko laukaisee voimakkaamman tuomion kuin tilastollinen vahinko
• Vastuullisuuspaine: Kun jotakuta on syytettävä tai kiitettävä
• Rajallinen informaatio: Kun arvioijilla ei ole pääsyä alkuperäiseen päätöskontekstiin
• Aikapaine: Nopeat arvioinnit turvautuvat oletusarvoisesti tulosperusteiseen arviointiin

10. Kognitiiviset harhanpoistostrategiat

10.1. Välittömät tekniikat

• Aikakonekysymys: Ennen kuin arvioit päätöstä, kysy: "Jos minut siirrettäisiin takaisin päätöksentekohetkeen vain silloin saatavilla olevan informaation turvin, mitä päätöksestä ajattelisin?"
• Todennäköisyystarkistus: Kysy "Mitkä olivat todennäköisyydet?" Jos 10 % riski materialisoitui, se on odotetun varianssin sisällä—eikä todiste huonosta päätöksestä
• Kontrafaktuaalinen tauko: Ennen kuin tuomitset huonon tuloksen, kysy "Kehuisinko täsmälleen samaa prosessia, jos se olisi toiminut?"
• Attribuutio-auditointi: Kun huomaat liittäväsi tuloksen luonteeseen tai pätevyyteen, pysähdy ja listaa onnen osuus

10.2. Pitkän aikavälin strategiat

• Prosessin päiväkirjamerkinnät: Dokumentoi päätöksen perusteet ja saatavilla oleva informaatio ennen kuin tulokset ovat tiedossa. Tarkastele myöhemmin kalibroidaksesi arvostelukykyäsi
• Todennäköisyyskielen tapa: Harjoittele sanomaan "riski materialisoitui" pikemminkin kuin "hän teki virheen", kun keskustellaan epäsuotuisista tuloksista
• Etsi vastaesimerkkejä: Etsi aktiivisesti tapauksia, joissa hyvät prosessit johtivat huonoihin tuloksiin ja huonot prosessit johtivat hyviin tuloksiin
• Opiskele todennäköisyyksiä: Rakenna intuitiota varianssista, odotusarvosta ja peruskorkosuhdanteista (base rates) muodollisen tai epämuodollisen todennäköisyyskoulutuksen avulla

10.3. Ympäristön suunnittelu

• Sokean analyysin protokollat: Organisaatioissa tulisi olla arvioijia, jotka arvioivat päätösprosesseja ennen kuin he saavat tietää tulokset
• Prosessiperusteiset kannustimet: Palkitse järkevän metodologian noudattamisesta, ei vain tuloksista
• Ennakkoon sitoutumisen katsaukset: Lyö lukkoon arviointikriteerit ennen kuin tulokset ovat tiedossa
• Päätöslokit: Päätöksen perusteiden institutionaalinen dokumentointi, jota arvioidaan tuloksista riippumatta

10.4. Milloin hakea ulkopuolista palautetta

• Ennen kuin teet päätelmiä korkeiden panosten päätöksistä, joilla oli huono tulos
• Kun arvioit omia menneitä päätöksiäsi
• Kun tulos herättää voimakkaita tunteita
• Kun olet vastuussa muiden suorituksen arvioimisesta

11. Käytännön harjoitukset

Harjoitus 1: Pre-mortem (Etukäteisanalyysi)

• Tavoite: Parantaa päätöksen laatua kuvittelemalla epäonnistuminen ennen kuin se tapahtuu
• Vaadittu aika: 30–45 minuuttia
• Tarvittavat materiaalit: Vireillä oleva päätös, paperi/fläppitaulu, tiimi (valinnainen)
• Vaikeustaso: Keskitaso
• Ohjeet:
  1. Tunnista tärkeä tuleva päätös
  2. Oleta, että päätös on tehty ja vuosi on kulunut—ja se epäonnistui näyttävästi
  3. Kirjoita yksityiskohtainen kuvaus siitä, mikä meni pieleen
  4. Työskentele takaperin tunnistaaksesi syyt
  5. Tarkista nykyinen suunnitelmasi puuttumalla todennäköisimpiin epäonnistumisen syihin
• Reflektointikysymykset:
  • Mitä riskejä aliarvioit ennen pre-mortemia?
  • Kuinka epäonnistumisen kuvitteleminen muutti prosessiasi?
  • Mitä varhaisia varoitusmerkkejä sinun tulisi tarkkailla?
• Tiheys: Ennen jokaista merkittävää päätöstä

Harjoitus 2: Tulos-sokkoutus (Outcome Blindfolding)

• Tavoite: Rakentaa taitoa arvioida päätöksiä ilman tulosinformaatiota
• Vaadittu aika: 20 minuuttia
• Tarvittavat materiaalit: Uutisartikkeleita päätöksistä, pari
• Vaikeustaso: Aloittelija
• Ohjeet:
  1. Pyydä paria valitsemaan uutistarinoita päätöksistä (liiketoimintastrategiat, lääketieteelliset valinnat jne.)
  2. Lue vain kuvaus tilanteesta ja tehdystä päätöksestä—älä sitä, mitä myöhemmin tapahtui
  3. Arvioi päätöksen laatu pelkästään saatavilla olevan informaation perusteella
  4. Kirjaa ylös arviointisi ja selvitä sitten tulos
  5. Pane merkille, olisiko arviointisi muuttunut
• Reflektointikysymykset:
  • Kuinka voimakas oli halu tarkistaa tuomiotasi saatuasi tietää tuloksen?
  • Mikä teki tietyistä päätöksistä helpompia tai vaikeampia arvioida sokkona?
  • Yllättivätkö jotkut tulokset sinut?
• Tiheys: Viikoittainen harjoitus

Päivittäinen harjoitus

Varianssin huomaaminen: Huomioi joka päivä yksi tapaus, jossa tulokseen vaikuttivat kenenkään hallinnan ulkopuolella olevat tekijät. Kirjoita se ylös. Ajan myötä tämä rakentaa intuitiota onnen roolille.

• Suositeltu kesto: 5 minuuttia
• Paras aika päivästä: Ilta (päivän reflektointi)
• Kuinka seurata edistymistä: Yksinkertainen loki tai päiväkirjasovellus

Viikoittainen haaste

Mauboussinin luokittelu: Luokittele joka viikko 5 kohtaamaasi päätöstä (töistä, uutisista tai yksityiselämästä) 2x2-matriisiin: Prosessin laatu (Hyvä/Huono) × Tulos (Hyvä/Huono). Keskity erityisesti tunnistamaan "Tyhmä onni" (Huono prosessi, Hyvä tulos) -tapauksia.

• Odotetut tulokset 4 viikon jälkeen: Lisääntynyt kyky erottaa prosessi tuloksesta reaaliajassa
• Päiväkirjakehotteita reflektointiin:
  • Mihin neljännekseen oli vaikein löytää esimerkkejä?
  • Kuinka muut ympärilläsi yleensä luokittelevat nämä samat esimerkit?
  • Mitä vaadittaisiin organisaatiosi siirtämiseksi kohti prosessiperusteista arviointia?

12. Tietyille yleisöille

Johtajille ja esihenkilöille

• Luo prosessiperusteisia suoritusarviointeja: Arvioi työntekijöitä heidän analyysinsa laadun, tiedonkeruun ja protokollien noudattamisen perusteella—ei vain tulosten perusteella
• Juhlista "hyviä tappioita": Tunnusta julkisesti päätökset, jotka olivat järkeviä, mutta epäonnisia, mallintaen prosessin ja tuloksen erottamista
• Varo "Tyhmä onni" -ansaa: Kun alainen saavuttaa odottamattoman korkeita tuloksia, esitä kovia kysymyksiä hänen prosessistaan ennen kuin palkitset häntä
• Käytä Mauboussinin matriisia tiimikeskusteluissa: Kouluta tiimisi luokittelemaan tuloksia ja rakenna yhteinen kieli onnen ja taidon käsittelemiseen
• Ota käyttöön sokeita jälkiarviointeja (post-mortem): Arvioi vaaratilannekatsauksissa päätöksiä ennen tulosten paljastamista

Vanhemmille ja kasvattajille

• Kehu prosessia, ei vain tuloksia: "Olen ylpeä siitä, kuinka huolellisesti mietit tätä" pikemminkin kuin "Hienosti saatu kymppi"
• Opeta todennäköisyyksiä varhain: Noppiin, kortteihin ja odotusarvoon liittyvät pelit rakentavat intuitiota varianssista
• Keskustele onnesta avoimesti: Kun lapset kokevat onnekkaita tai epäonnisia tuloksia, nimeä ne sellaisiksi
• Käytä tarinoita ja esimerkkejä: Historiallisia ja nykyaikaisia esimerkkejä hyvä-prosessi/huono-tulos ja huono-prosessi/hyvä-tulos tapauksista
• Vältä uhria syyllistävää kieltä: Mallinna, etteivät huonot tulokset automaattisesti merkitse huonoja päätöksiä

Terveydenhuollon ammattilaisille

• Aja prosessiperusteista hoitovirheiden uudistusta: Nykyinen tulosvetoinen järjestelmä kannustaa defensiiviseen lääketieteeseen
• Dokumentoi päätöksen perusteet: Saatavilla olevan informaation ja päätöksentekohetkellä käytetyn päättelyn selkeä dokumentointi suojaa retrospektiiviseltä arvioinnilta
• Osallistu sokeisiin M&M -konferensseihin: Aja sairastuvuuden ja kuolleisuuden (morbidity and mortality) arviointeja, jotka arvioivat päätöksiä ennen tulosten paljastamista
• Kommunikoi epävarmuudesta potilaille: Auta potilaita ymmärtämään, että jopa optimaalisiin päätöksiin liittyy riskejä

Rahoitusalan ammattilaisille

• Käytä riskikorjattuja tuottoja (Sharpe Ratio): Arvioi kauppiaita riskikorjatulla suorituksella, ei raa'alla voitolla
• Ota käyttöön positiorajat ja riskienhallinta: Älä odota huonoa tulosta pakottaaksesi prosessia noudatettavaksi
• Tarkasta "tähtisuorittajat": Epätavallisen korkeiden tuottojen tulisi laukaista prosessien tarkastelu, ei vain juhlimista
• Kouluta asiakkaita tulosharhasta: Auta sijoittajia ymmärtämään, että heidän arviointinsa lyhyen aikavälin tulosten perusteella on irrationaalista
• Pidä yllä päätöspäiväkirjoja: Dokumentoi kunkin suuren sijoituspäätöksen perusteet ennen kuin tulos on tiedossa

13. Vuorovaikutus muiden harhojen kanssa

Harhat, jotka vahvistavat tulosharhaa

Harhat, jotka torjuvat tätä harhaa

Yleiset harhaketjut

Oikeudenmukaisen maailman hypoteesi → Tulosharha → Uhrin syyllistäminen → Defensiivinen päätöksenteko

Selitys: Tarve uskoa maailman reiluuteen laukaisee tulosperusteisen arvioinnin, joka johtaa uhrien syyllistämiseen onnettomuudestaan, mikä saa päätöksentekijät asettamaan etusijalle sen, että he näyttävät syyttömiltä, optimaalisten valintojen tekemisen sijaan. Tämä kaskadi voidaan keskeyttää missä tahansa vaiheessa, mutta se estetään tehokkaimmin kyseenalaistamalla alkuperäinen Oikeudenmukaisen maailman oletus.

14. Kulttuuriset näkökulmat

Tutkimukset viittaavat siihen, että tulosharha on läsnä eri kulttuureissa, mutta ilmenee eri painotuksilla:

Fraasilla "ei vahinkoa, ei virhettä" (No harm, no foul) näyttää olevan kulttuurien välistä merkitystä—taipumus antaa anteeksi haitalliset prosessit, jotka eivät tuota näkyvää vahinkoa, vaikuttaa universaalilta. Kulttuurit kuitenkin vaihtelevat siinä, kuinka nopeasti ne siirtyvät "huonosta tuloksesta" "rangaistukseen" verrattuna vivahteikkaampaan syy-seurausanalyysiin.

15. Myytit ja väärinkäsitykset

16. Asiantuntijoiden oivalluksia

"Varmista, ettet palkitse onnekkaita ja rankaise epäonnekkaita." — Michael Mauboussin, Head of Consilient Research, Morgan Stanley

"Nimetön + Harmiton = Syytön" (Nameless + Harmless = Blameless) — Gino, Moore & Bazerman kuvatessaan, kuinka epäeettisestä käyttäytymisestä tulee näkymätöntä ilman tiettyjä uhreja ja tiettyjä vahinkoja

"Emme voi hallita tuloksia. Tiettyä osaa maailmankaikkeudesta hallitsee onni, entropia ja kaaos. Voimme hallita vain prosessiamme." — Yhteenveto päätöstieteen konsensuksesta

17. Keskeiset opit

1. Tulosharha saa meidät arvioimaan päätöksiä niiden tulosten perusteella pikemminkin kuin päätöksentekoprosessin laadun perusteella päätöksentekohetkellä, oppien systemaattisesti vääriä asioita kokemuksista.
2. Millä tahansa todennäköisyysalalla (lääketiede, rahoitus, strategia) hyvät päätökset voivat johtaa huonoihin tuloksiin varianssin myötä, ja huonot päätökset voivat onnistua onnen kautta.
3. Harhaa ohjaavat ominaisuuden korvaaminen (Attribute substitution; vaikean kysymyksen vaihtaminen helppoon) ja Oikeudenmukaisen maailman hypoteesi (tarve uskoa tulosten olevan ansaittuja).
4. Nykyaikaiset replikaatiot osoittavat, että vaikutus on jopa voimakkaampi kuin alun perin luultiin (Cohenin d = 0.77–1.1).
5. Tulosharhalla on katastrofaalisia reaalimaailman seurauksia: defensiivinen lääketiede, holtittomien kauppiaiden aiheuttamat katastrofit, Challengerin räjähdys ja systemaattinen epäoikeudenmukaisuus oikeudenkäynneissä.
6. Harha säilyy, vaikka ihmisiä varoitetaan siitä ja heille opetetaan, miksi se on irrationaalista, mikä viittaa siihen, että se heijastaa syviä moraalisia intuitioita yksinkertaisten logiikkavirheiden sijaan.
7. Lieventäminen vaatii rakenteellisia toimenpiteitä: sokea analyysi, prosessiperusteiset kannustimet, pre-mortemit ja todennäköisyyksiin perustuva kieli.

18. Lisäresursseja

Akateemiset artikkelit

• Baron, J., & Hershey, J. C. (1988). Outcome bias in decision evaluation. Journal of Personality and Social Psychology, 54(4), 569-579.
• Gino, F., Moore, D. A., & Bazerman, M. H. (2008). No harm, no foul: The outcome bias in ethical judgments. Harvard Business School Working Paper.
• Oeberst, A., & Goeckenjan, I. (2016). When being wise after the event results in injustice: Evidence for hindsight bias in judges' negligence assessments. Psychology, Public Policy, and Law, 22(3), 271-279.
• Aiyer, S., Feldman, G., Kam, H. C., & Young, N. (2023). Outcome bias replication and extension. Pre-registered replication study.

Kirjat

• Kahneman, D. (2011). Thinking, Fast and Slow. Farrar, Straus and Giroux. (Suom. Ajattelu, nopeasti ja hitaasti)
• Mauboussin, M. J. (2012). The Success Equation: Untangling Skill and Luck in Business, Sports, and Investing. Harvard Business Review Press.
• Vaughan, D. (1996). The Challenger Launch Decision: Risky Technology, Culture, and Deviance at NASA. University of Chicago Press.

Kirjan luvut

• Fischhoff, B. (1975). Hindsight ≠ foresight: The effect of outcome knowledge on judgment under uncertainty. Journal of Experimental Psychology: Human Perception and Performance, 1(3), 288-299.

19. Yhteenvetokortti

20. Käytettyjen termien sanasto

21. Keskustelukysymyksiä

Lukupiireihin, luokkahuoneisiin tai itsetutkiskeluun:

1. Onko koskaan sopivaa tuomita päätöksiä niiden tulosten perusteella? Millaisissa olosuhteissa, jos missään, tulosperusteinen arviointi käy järkeen?
2. Kuinka organisaatioiden tulisi tasapainottaa vastuullisuus (joka vaatii tulosten arviointia) ja oikeudenmukaisuus (joka vaatii varianssin tunnustamista)?
3. Jos olisit suunnittelemassa oikeusjärjestelmää alusta alkaen, kuinka estäisit tulosharhaa vääristämästä hoitovirhe- ja laiminlyöntituomioita?
4. Voitko tunnistaa tapauksen, jossa sinua tai jotakuta tuntemaasi arvioitiin epäreilusti onnekkaan tai epäonnisen tuloksen perusteella?
5. Mitä yhteiskunnalle tarkoittaisi, jos todella sisäistäisimme sen, että "hyvillä päätöksillä voi olla huonoja tuloksia"? Kuinka instituutioidemme tulisi muuttua?