Նմուշի չափի նկատմամբ անզգայունություն (Insensitivity to Sample Size)

Մի հայացքով

1. Արագ ամփոփում

Մենք բնազդաբար հավատում ենք, որ տվյալների փոքր նմուշը պետք է ունենա ճիշտ այնպիսի տեսք, ինչպիսին ավելի մեծ պոպուլյացիան է, որից այն վերցված է: Երբ մետաղադրամի տասը նետումները ցույց չեն տալիս կատարյալ 50/50 հարաբերակցություն, մենք տեսնում ենք օրինաչափություններ, անընդմեջ շարքեր կամ անարդարություն՝ փոխանակ գիտակցելու փոքր թվերի բնական փոփոխականությունը: Սա ստիպում է մեզ վստահ եզրակացություններ անել սահմանափակ տվյալների հիման վրա, տեսնել իմաստալից միտումներ պատահական աղմուկի մեջ և անտեսել այն վճռորոշ դերը, որ քանակությունը խաղում է վիճակագրական հուսալիության մեջ:

2. Գիտական հիմքը

2.1. Բացահայտումը և պատմությունը

Նմուշի չափի նկատմամբ անզգայունության պաշտոնական բացահայտումը տեղի ունեցավ 1970-ականների հոգեբանության կոգնիտիվ հեղափոխության ժամանակ: 1971 թվականին Ամոս Տվերսկին և Դանիել Կահնեմանը Psychological Bulletin-ում հրապարակեցին «Հավատ փոքր թվերի օրենքին» աշխատությունը՝ առաջարկելով, որ մարդկային ինտուիցիան գործում է այնպես, կարծես «Մեծ թվերի օրենքը» կիրառելի է նաև փոքր թվերի դեպքում: Երեք տարի անց՝ 1974 թվականի իրենց նշանավոր «Դատողություններ անորոշության պայմաններում. էվրիստիկա և շեղումներ» (Judgment under Uncertainty: Heuristics and Biases) աշխատության մեջ, նրանք պաշտոնապես ամրագրեցին այս երևույթը որպես հատուկ ճանաչողական շեղում՝ Ներկայացուցչական էվրիստիկայի ավելի լայն շրջանակում:

Դրա ինտելեկտուալ արմատները գալիս են մաթեմատիկական հավանականության տեսությունից, մասնավորապես Ջերոլամո Կարդանոյի և Յակոբ Բեռնուլիի՝ Մեծ թվերի օրենքի վաղ ձևակերպումներից: Սակայն, թե ինչու են մարդիկ համակարգված կերպով խախտում այս մաթեմատիկական սկզբունքը, հոգեբանական ուսումնասիրությունը նախաձեռնվեց Կահնեման-Տվերսկի համագործակցության արդյունքում:

1970-ականներից ի վեր մեր պատկերացումները զգալիորեն զարգացել են: «Էկոլոգիական ռացիոնալության» դպրոցը, որը գլխավորում է Գերդ Գիգերենցերը (Gerd Gigerenzer) Մաքս Պլանկի ինստիտուտից, վիճարկել է սկզբնական մեկնաբանությունը՝ պնդելով, որ այս շեղումը մասամբ կարող է լինել խնդիրների ներկայացման ձևի արդյունք: Երբ վիճակագրական տեղեկատվությունը վերաձևակերպվում է որպես բնական հաճախականություններ, այլ ոչ թե աբստրակտ հավանականություններ, արդյունքները կտրուկ բարելավվում են:

2.2. Հիմնական հետազոտողները

2.3. Նշանավոր հետազոտություններ

Հիվանդանոցի խնդիրը (Տվերսկի և Կահնեման, 1974)

Այս դասական գիտափորձի ժամանակ մասնակիցները կարդում էին հետևյալը. «Մի որոշակի քաղաք սպասարկվում է երկու հիվանդանոցների կողմից: Մեծ հիվանդանոցում օրական ծնվում է մոտ 45 երեխա, իսկ փոքրում՝ մոտ 15 երեխա: Ինչպես գիտեք, բոլոր ծնվածների մոտ 50%-ը տղաներ են: Սակայն ճշգրիտ տոկոսը օրեցօր տատանվում է: 1 տարվա ընթացքում յուրաքանչյուր հիվանդանոց գրանցել է այն օրերը, երբ ծնվածների ավելի քան 60%-ը տղաներ էին: Ձեր կարծիքով, ո՞ր հիվանդանոցն է գրանցել նման օրերի ավելի մեծ քանակ»:

Արդյունքները ապշեցուցիչ էին. ուսանողների 56%-ը ընտրել է «Մոտավորապես նույնը», 22%-ը՝ մեծ հիվանդանոցը, և միայն մոտ 22%-ն է ճիշտ նշել փոքր հիվանդանոցը: Ճիշտ պատասխանը փոքր հիվանդանոցն է, քանի որ փոքր նմուշներն ավելի անկայուն են և ավելի հավանական է, որ ցուցաբերեն միջինից ծայրահեղ շեղումներ: Մասնակիցները վերաբերվել են նմուշի չափին որպես անկարևոր գործոնի՝ ակնկալելով, որ 50% հարաբերակցությունը հավասարապես կգործի անկախ նրանից, թե նմուշը 15 է, թե 45:

Հասակի գնահատման գիտափորձ (Տվերսկի և Կահնեման, 1974)

Մասնակիցները գնահատել են 6 ֆուտից (183 սմ) բարձր միջին հասակ ունենալու հավանականությունը ընդհանուր պոպուլյացիայից ընտրված 10, 100 և 1000 տղամարդկանց նմուշներում: Տրամաբանորեն, 1000 տղամարդ գտնելը, որոնց միջին հասակը գերազանցում է 6 ֆուտը, գործնականում անհնար է, մինչդեռ 10 տղամարդու դեպքում դա պարզապես քիչ հավանական է: Սակայն մասնակիցները նույն հավանականությունն են վերագրել բոլոր երեք նմուշների չափերին: Գնահատելով նմուշները միայն ըստ նկարագրության («տղամարդիկ»)՝ մասնակիցները լիովին անտեսել են մեծ թվերի կայունացնող ուժը:

Մամոգրաֆիայի խնդիրը (Գիգերենցեր և այլք, 1995)

Երբ բժիշկներին խնդրել են գնահատել կրծքագեղձի քաղցկեղի հավանականությունը դրական մամոգրամի դեպքում՝ օգտագործելով տոկոսներ (Զգայունություն=90%, Կեղծ դրական=9%, Տարածվածություն=1%), միայն 10-15%-ն է ճիշտ պատասխանել: Երբ նույն խնդիրը ներկայացվել է որպես բնական հաճախականություն («յուրաքանչյուր 1000 կնոջից 10-ն ունեն քաղցկեղ...»), ճշգրտությունն աճել է մինչև 46-67%: Սա ապացուցեց, որ հայտարարի մեջ նմուշի չափը հստակ նշելը կտրուկ բարելավում է վիճակագրական դատողությունը:

«Տաք ձեռքի» ուսումնասիրություն (Գիլովիչ, Վալոնե և Տվերսկի, 1985)

Վերլուծելով Ֆիլադելֆիա 76ers-ի և Բոստոն Սելթիքսի նետումների ռեկորդները՝ հետազոտողները չեն գտել որևէ վիճակագրական ապացույց «տաք» (հաջող) շարքերի համար, որոնք կգերազանցեին պատահականության սպասելիքները: Խաղացողի նետումների արդյունքները մաթեմատիկորեն չէին տարբերվում մետաղադրամի նետման հաջորդականությունից: Խաղացողների, մարզիչների և երկրպագուների շրջանում համընդհանուր հավատը «տաք ձեռքի» հանդեպ բացահայտվեց որպես ճանաչողական պատրանք, որն առաջացել է փոքր պատահական նմուշներում օրինաչափություններ տեսնելու հետևանքով:

2.4. Նյարդաբանական հիմքը

Շեղումը գործում է այն բանի միջոցով, ինչ հոգեբաններ Քիթ Ստանովիչը, Ռիչարդ Վեստը և Դանիել Կահնեմանը անվանել են «Համակարգ 1» մտածողություն՝ արագ, ավտոմատ, ինտուիտիվ ճանաչողական գործընթացներ, որոնք առաջնահերթությունը տալիս են արագությանը և հետևողականությանը՝ մաթեմատիկական ճշգրտության փոխարեն: Վիճակագրական տվյալներ գնահատելիս Համակարգ 1-ը մշակում է նմանությունը և օրինաչափությունների ճանաչումը, այլ ոչ թե միացնում ավելի դանդաղ, ավելի մեծ ջանքեր պահանջող Համակարգ 2-ի գործընթացները, որոնք անհրաժեշտ են ճիշտ վիճակագրական դատողությունների համար:

Ուղեղի օրինաչափությունների ճանաչման սխեմաները, որոնք էվոլյուցիայի են ենթարկվել վտանգի արագ գնահատման և պատճառահետևանքային կապերի դուրսբերման համար, ավտոմատ կերպով փնտրում են իմաստալից կառուցվածք տվյալների մեջ: Այս սխեմաները չեն տարբերակում մեծ և փոքր նմուշները. դրանք արձագանքում են տեղեկատվության արտաքին հատկանիշներին (համամասնություններ, ակնհայտ օրինաչափություններ), այլ ոչ թե հուսալիության մասին մետատեղեկատվությանը (նմուշի չափ, դիսպերսիա):

Նախաճակատային կեղևը (prefrontal cortex), որը պատասխանատու է գործադիր գործառույթի և մաթեմատիկական դատողությունների համար, կարող է վերացնել Համակարգ 1-ի որոշումները, բայց դա պահանջում է գիտակցված ջանքեր, վիճակագրական վարժեցում և կոգնիտիվ ռեսուրսներ: Ժամանակի սղության, ճանաչողական ծանրաբեռնվածության կամ հուզական գրգռվածության պայմաններում Համակարգ 1-ը գերակշռում է, և նմուշի չափը անտեսվում է:

3. Էվոլյուցիոն ծագումը

Մարդկային միտքը էվոլյուցիայի է ենթարկվել բարդ, աղմկոտ և վտանգավոր աշխարհում կողմնորոշվելու համար, որտեղ տվյալները սակավ էին, իսկ վարանումների գինը մահն էր: Պլեյստոցենի (Pleistocene) ժամանակաշրջանի միջավայրում մեր նախնիները պետք է արագ ընդհանրացումներ անեին սահմանափակ դիտարկումներից. գիշատչի կամ թունավոր հատապտղի հետ մեկ հանդիպումը բավարար էր խուսափելու համընդհանուր կանոն սահմանելու համար:

Այս էվոլյուցիոն գործիքակազմը առաջնահերթությունը տալիս էր օրինաչափությունների ճանաչմանը և արագ հետևություններ անելուն, այլ ոչ թե մաթեմատիկական ճշգրտությանը: Փոքր նմուշներից լայն եզրակացություններ անելու ունակությունը հստակ հարմարվողական առավելություն էր. գիշատիչների հետ հանդիպումների «վիճակագրորեն նշանակալի» նմուշի կուտակմանը սպասելը նախքան փախչելու որոշում կայացնելը ճակատագրական կլիներ:

Սակայն այս նույն ճանաչողական հարմարվողականությունը, որն ապահովում էր գոյատևումը տվյալների սակավություն ունեցող նախնադարյան միջավայրում, դրսևորվում է որպես լուրջ խոցելիություն մեր ժամանակակից, տվյալներով հարուստ աշխարհում: Մենք այժմ ապրում ենք մի աշխարհում, որը ղեկավարվում է ստոխաստիկ (պատահական) գործընթացներով, հավանական արդյունքներով և հսկայական տվյալների բազաներով, սակայն մեր ինտուիցիան համառորեն կապված է մնում փոքր նմուշի տրամաբանությանը:

Շեղումը կարելի է դիտարկել որպես էվոլյուցիոն հատկանիշ, այլ ոչ թե սխալ. այն չափաբերված (կալիբրացված) էր այնպիսի միջավայրերի համար, որտեղ (1) նմուշներն ի սկզբանե փոքր էին, (2) կեղծ դրականները (գոյություն չունեցող օրինաչափություններ տեսնելը) ավելի քիչ վնասակար էին, քան կեղծ բացասականները (իրական սպառնալիքները բաց թողնելը), և (3) անհապաղ գործողությունը գերակշռում էր վիճակագրական ճշգրտությանը:

4. Ինչպես է դրսևորվում այս շեղումը

4.1. Առօրյա կյանքում

Ամենօրյա որոշումներում մենք անընդհատ չափազանցնում ենք փոքր նմուշների նշանակությունը: Մեկ անգամ նոր ռեստորան այցելելուց և միջակ ճաշելուց հետո մենք եզրակացնում ենք, որ «այդ տեղը վատն է», փոխանակ գիտակցելու, որ մենք փորձել ենք մեկ ուտեստ մեկ երեկոյի ընթացքում: Որոշակի քաղաքից կամ մասնագիտությունից որևէ մեկին հանդիպելը առաջացնում է ընդհանրացումներ՝ հիմնված այդ մեկ հանդիպման վրա:

Մենք դատում ենք թաղամասերի անվտանգության մասին մի քանի պատմություններով, ձևավորում ենք կարծիք ապրանքների մասին Amazon-ի երեք ակնարկներից և եզրակացնում ենք, որ մեր մեխանիկն անազնիվ է մեկ երկիմաստ վերանորոգման հիման վրա: Մենք տեսնում ենք, որ մեր ընկերը հաջողության է հասել որևէ դիետայով և ենթադրում ենք, որ այն կաշխատի նաև մեզ համար՝ անտեսելով հազարավոր անհատական տարբերությունները, որոնք որոշում են արդյունքը:

Հարաբերություններում զուգընկերոջ վարքագիծը մի քանի օրվա ընթացքում ձևավորում է մեր դատողությունը նրա բնավորության մասին: Երեխայի վատ առաջադիմությունը մեկ թեստում ծնողներին ստիպում է եզրակացնել, որ նա «վատ է մաթեմատիկայից»: Մի քանի հաջող կանխատեսումները մեզ ստիպում են հավատալ, որ մենք լավ ենք ապագան կանխատեսելու հարցում:

4.2. Աշխատավայրում

Մասնագիտական միջավայրերը ուժեղացնում են նմուշի չափի անտեսման հետևանքով առաջացած ծախսերը: Մենեջերները գնահատում են աշխատակիցների կատարողականը՝ հիմնվելով մի քանի դիտարկված միջադեպերի վրա, այլ ոչ թե համակարգված տվյալների: Աշխատանքի ընդունելու որոշումները հիմնվում են կարճ հարցազրույցների վրա՝ վարքագծի շատ փոքր նմուշ, սակայն դրանք դիտարկվում են որպես վերջնական գնահատականներ:

Եռամսյակային արդյունքները, որոնք ներկայացնում են ընդամենը երեք ամիս (ընկերության հետագծի փոքր նմուշ), պայմանավորում են հիմնական ռազմավարական որոշումները: Նոր նախաձեռնությունը, որը երկու ամիս վատ արդյունքներ է գրանցում, չեղարկվում է այնքան շուտ, որ դիսպերսիան անգամ չի հասցնում կայունանալ: Ղեկավարները, ովքեր վաղ են հաջողության հասնում, համարվում են «տեսլական ունեցողներ», իսկ նրանք, ովքեր բախվում են վաղ անհաջողությունների, պիտակավորվում են որպես անհաջողակներ՝ անկախ արդյունքների իրական բաշխվածությունից:

Կատարողականի գնահատումները հաճախ անհամաչափորեն կարևորում են վերջին իրադարձությունները՝ դիտարկելով վերջին մի քանի շաբաթները որպես ամբողջ տարվա համար ներկայացուցչական: Վերապատրաստման ծրագրերը համարվում են արդյունավետ կամ անարդյունավետ՝ հիմնվելով առաջին խմբի վրա՝ անտեսելով տարբեր խմբերի միջև եղած բնական տատանումները:

4.3. Բիզնեսում և մարքեթինգում

«New Coke»-ի աղետը ցույց է տալիս, թե ինչպես են բիզնեսներն ընկնում այս շեղման ծուղակը: Coca-Cola-ն անցկացրեց գրեթե 200,000 կույր համտեսման թեստեր և պարզեց, որ մեծամասնությունը նախընտրում է իրենց ավելի քաղցր նոր բանաձևը: Սակայն սրանք «ումպի (կումի) թեստեր» էին՝ ըմպելիքը սպառելու փորձի շատ փոքր նմուշ: Մեկ ումպի դեպքում ուղեղը դրական է արձագանքում բարձր քաղցրությանը: Բայց ամբողջական տարայի դեպքում այդ նույն քաղցրությունը դառնում է չափազանց կլանող և տհաճ: Կոկա-կոլայի ղեկավարները ենթադրեցին, որ ումպի նմուշը ներկայացուցչական է ամբողջ տարան խմելու փորձի համար, ինչը հանգեցրեց սպառողների զանգվածային ընդվզմանը:

Ford Edsel-ի ձախողումը ցույց է տալիս ժամանակավոր նմուշի չափի անտեսումը: Ford-ը 1955-1956 թթ. անցկացրեց ծավալուն հետազոտություններ, որոնք ցույց տվեցին, որ ամերիկացիները ցանկանում են մեծ, փայլուն մեքենաներ: Նրանք այս ժամանակով սահմանափակված նմուշը ընդունեցին որպես մշտական ճշմարտություն: Մինչև 1958 թ. գործարկումը շուկան տեղափոխվել էր դեպի ավելի փոքր մեքենաներ, և Edsel-ը դարձավ մարքեթինգային ձախողման հոմանիշ:

Ընկերությունները պարբերաբար արտադրանք են թողարկում՝ հիմնված 8-12 հոգանոց ֆոկուս խմբերի, A/B թեստերի վրա, որոնք տևում են օրեր, այլ ոչ թե շաբաթներ, և պիլոտային ծրագրերի վրա՝ ոչ ներկայացուցչական շուկաներում: Մարքեթինգային արշավները մասշտաբավորվում են՝ ելնելով նախնական արձագանքների ցուցանիշներից, որոնք դեռ չեն հասցրել կայունանալ:

4.4. Քաղաքականության և լրատվամիջոցների մեջ

1936 թվականի «Literary Digest»-ի հարցման աղետը ցույց է տալիս, թե ինչպես են ձախողվում զանգվածային, բայց կողմնակալ նմուշները: Ամսագիրը հարցում անցկացրեց 2,4 միլիոն մարդու շրջանում և կանխատեսեց, որ Ալֆրեդ Լենդոնը կհաղթի Ֆրանկլին Ռուզվելտին: Նրանք ենթադրեցին, որ քանակը երաշխավորում է ճշգրտություն՝ անտեսելով, որ իրենց նմուշը (կազմված մեքենաների գրանցումներից և հեռախոսային տեղեկատուներից) համակարգված կերպով բացառում էր Մեծ Ճգնաժամի ժամանակաշրջանի այն ընտրողներին, ովքեր չունեին հարստության այս ցուցիչները: Ջորջ Գելափը (George Gallup) ճիշտ կանխատեսեց արդյունքը՝ օգտագործելով ընդամենը 50,000 հոգանոց ներկայացուցչական նմուշ:

Ժամանակակից հարցումները շարունակում են բախվել նմուշի չափի մեկնաբանման դժվարությունների հետ: Լրատվամիջոցները շնչակտուր հայտնում են սխալի թույլատրելի շեղման սահմաններում տեղի ունեցած հարցումների տատանումների մասին որպես զգալի տեղաշարժերի: Քաղաքական մեկնաբանները էքստրապոլյացիա են անում վաղ քվեարկության արդյունքները՝ դիտարկելով փոքր նմուշները որպես կանխատեսող: Չկողմնորոշված ընտրողների ֆոկուս խմբերը դառնում են ընթացքը կանխորոշող պահեր՝ չնայած ներկայացնում են ընդամենը վիճակագրական աղմուկ:

Քաղաքական կարծիքները ձևավորվում են ներգաղթյալների, նպաստ ստացողների կամ ոստիկանների մասին մի քանի անեկդոտների կամ առանձին դեպքերի հիման վրա, ընդ որում յուրաքանչյուր պատմություն ընդունվում է որպես միլիոնավոր տարբեր անհատների ներկայացուցչական օրինակ:

4.5. Առողջապահության ոլորտում

Երիկամների քաղցկեղի քարտեզը ներկայացնում է տպավորիչ բժշկական օրինակ: Վիճակագիրներ Հովարդ Վայները և Հարրիս Զվերլինգը ցույց են տվել, որ երիկամների քաղցկեղի ամենացածր ցուցանիշներով վարչաշրջանները ճնշող մեծամասնությամբ գյուղական են և նոսր բնակեցված: Ինտուիտիվ բացատրությունը կարող է լինել այն, որ գյուղական կյանքը կանխում է քաղցկեղը՝ շնորհիվ մաքուր օդի և առողջ ապրելակերպի: Բայց հետո նրանք բացահայտեցին, որ երիկամների քաղցկեղի ամենաբարձր ցուցանիշներով վարչաշրջանները նույնպես ճնշող մեծամասնությամբ գյուղական են և նոսր բնակեցված: Ընդհանուր գործոնը ոչ թե ապրելակերպն է, այլ բնակչության փոքր թվաքանակը. 500 բնակիչ ունեցող վարչաշրջանում մեկ ախտորոշումը բարձրացնում է ցուցանիշը մինչև ազգային ծայրահեղությունների, մինչդեռ զրո դեպքերը այն իջեցնում են ամենաներքև:

Բժիշկները հաճախ գերագնահատում են դրական թեստի արդյունքները հազվագյուտ հիվանդությունների դեպքում՝ հաշվի չառնելով բազային ցուցանիշները և նմուշների չափերը: Երեք բարձր ցուցանիշ ունեցող հիվանդին ախտորոշվում է քրոնիկ վիճակ, որը կարող է պարզապես արտացոլել չափումների տատանում: Բուժման արդյունավետությունը գնահատվում է մի բուռ հիվանդներից, այլ ոչ թե ռանդոմիզացված վերահսկվող փորձարկումներից:

Հանրային առողջապահության պաշտոնյաները հետապնդում են «քաղցկեղի օջախները» և «առողջ գոտիները», որոնք ընդամենը փոքր պոպուլյացիաների վիճակագրական արտեֆակտներ են: Ռեսուրսները սխալ են բաշխվում ծայրահեղ արժեքների հիման վրա, որոնք ավելի մեծ նմուշների դեպքում կվերադառնային միջինին (կռեգրեսվեին դեպի միջինը):

4.6. Ֆինանսներում և ներդրումներում

Վերապրողների շեղումը (Survivorship Bias) իրենից ներկայացնում է ֆինանսական շուկաներում նմուշի չափի անտեսման վնասակար ձև: Երբ ներդրողները վերլուծում են փոխադարձ հիմնադրամների (mutual funds) կատարողականը վերջին 10 տարվա ընթացքում, նրանք ուսումնասիրում են միայն այն հիմնադրամները, որոնք դեռ գոյություն ունեն՝ վերապրողները: Ձախողված և լուծարված հիմնադրամները բացակայում են նմուշից՝ արհեստականորեն ուռճացնելով թվացյալ միջին եկամտաբերությունը: Ներդրողը կարող է տեսնել 8% միջին եկամտաբերություն և եզրակացնել, որ ակտիվ կառավարումն աշխատում է, մինչդեռ «մեռած» հիմնադրամների ներառումը կբացահայտեր 4% կամ ավելի ցածր եկամտաբերություն:

Ներդրողները հետապնդում են հիմնադրամներ՝ հիմնվելով 3-5 տարվա ցուցանիշների վրա՝ վերաբերվելով ժամանակի այս փոքր նմուշին որպես կայուն հմտության ապացույցի: Ռիչարդ Թալերի հետազոտությունները ցույց են տալիս, որ ներդրողները չափազանց շատ են էքստրապոլյացիա անում եկամուտների մասին նորությունների փոքր նմուշները. երեք եռամսյակ շարունակ սպասելիքները գերազանցելը դիտարկվում է որպես կառուցվածքային գերազանցություն՝ հասցնելով գները իռացիոնալ մակարդակների:

Ռոբերտ Շիլլերը (Robert Shiller) փաստել է, որ շուկայական գները տատանվում են շատ ավելի, քան կարող էին արդարացնել հիմնարար ցուցանիշները: Այս «ավելցուկային անկայունությունը» (excess volatility) բխում է նրանից, որ ներդրողները վերաբերվում են կարճաժամկետ նորություններին՝ ընկերության երկարաժամկետ ապագայի փոքր նմուշներին, որպես մշտական արժեքի մասին վերջնական տեղեկատվության:

5. Իրական դեպքերի ուսումնասիրություններ

Դեպքի ուսումնասիրություն 1. Վերարտադրելիության ճգնաժամը հոգեբանության մեջ

• Համատեքստ. Տասնամյակներ շարունակ հոգեբանական հետազոտություններն իրականացվում էին փոքր նմուշներով (հաճախ N=20 կամ N=40 յուրաքանչյուր պայմանի համար): «Ուժային դիրքի» (Power Posing) ուսումնասիրությունը (Քարնի, Քադդի և Յապ, 2010) պնդում էր, որ «բարձր ուժի» դիրքում երկու րոպե կանգնելը առաջացնում է հորմոնալ փոփոխություններ և մեծացնում ռիսկի դիմելու հակվածությունը: Նմուշի չափը 42 մասնակից էր:

• Ինչ տեղի ունեցավ. Հետազոտությունը տպագրվեց հեղինակավոր ամսագրում, մեծ ուշադրություն գրավեց լրատվամիջոցների կողմից և հիմք հանդիսացավ միլիոնավոր դիտումներ ունեցող TED ելույթի համար: Գիտական հանրությունը ընդունեց, որ N=42-ը բավարար է նուրբ հորմոնալ ազդեցություններ հայտնաբերելու համար:

• Շեղումը գործողության մեջ. Հետազոտողները, խմբագիրները և գրախոսողները՝ տառապելով հենց այն շեղումից, որը նկարագրել էին Տվերսկին և Կահնեմանը, հավատում էին, որ փոքր նմուշները բավականաչափ հուսալի են նուրբ ազդեցություններ հայտնաբերելու համար: Նրանք աղմուկի մեջ օրինաչափություն էին տեսել:

• Հետևանքները. Երբ փորձ արվեց կրկնօրինակել հետազոտությունը N=200+ մասշտաբով, հորմոնալ ազդեցություններն իսպառ վերացան: Բաց Գիտության Համագործակցությունը (The Open Science Collaboration, 2015) կրկնեց 100 հոգեբանական հետազոտություն և պարզեց, որ դրանց կեսից պակասն է հնարավոր հաջողությամբ վերարտադրել: Գլխավոր մեղավորը ցածր վիճակագրական հզորություն (underpowered) ունեցող ուսումնասիրությունների վրա հիմնվելն էր:

• Քաղված դասեր. «Հաղթողի անեծքը» գիտական հրատարակչության մեջ նշանակում է, որ հրապարակվում են այն ուսումնասիրությունները, որոնք ունեն ուռճացված ազդեցության չափեր և պատահաբար հատել են վիճակագրական նշանակալիության շեմերը: Իրական էֆեկտները ի հայտ են գալիս միայն մեծ նմուշների դեպքում: Դրանից ի վեր հոգեբանությունը բարեփոխումներ է սկսել՝ պահանջելով ավելի մեծ նմուշներ և ուսումնասիրությունների նախնական գրանցում:

Դեպքի ուսումնասիրություն 2. Նոր Կոկա-Կոլայի (New Coke) աղետը

• Համատեքստ. 1985 թվականին Coca-Cola-ն շուկայում աճող ճնշման էր բախվում Pepsi-ի «Pepsi Challenge» կույր համտեսման թեստերի պատճառով: Ներքին հետազոտությունները ցույց էին տալիս, որ ավելի քաղցր Pepsi-ն հաղթում է ումպ առ ումպ համեմատություններում:

• Ինչ տեղի ունեցավ. Coca-Cola-ն անցկացրեց գրեթե 200,000 կույր համտեսման թեստեր՝ հայտնաբերելով ճնշող նախապատվություն իրենց նոր՝ ավելի քաղցր բանաձևի նկատմամբ: Հիմնվելով այս տվյալների վրա՝ նրանք փոխարինեցին իրենց դարավոր բանաձևը «Նոր Կոկայով» (New Coke):

• Շեղումը գործողության մեջ. Սրանք «ումպի թեստեր» էին՝ ամբողջական ըմպելիքը սպառելու փորձի շատ փոքր նմուշ: Ղեկավարները ենթադրեցին, որ այս միկրոնմուշը ներկայացնում է սպառման ամբողջական փորձը: Մեկ ումպի դեպքում քաղցրությունը հաճելի է, մինչդեռ մի ամբողջ տարայի մեջ այն դառնում է չափազանց շատ:

• Հետևանքները. Սպառողների ընդվզումն անմիջական էր և կատաղի: 79 օրվա ընթացքում Coca-Cola-ն վերադարձրեց սկզբնական բանաձևը որպես «Coca-Cola Classic»: Ընկերությունը միլիոններ կորցրեց և կրեց ապրանքանիշի երկարաժամկետ վնաս:

• Քաղված դասեր. «Նմուշը» պետք է համապատասխանի այն «պոպուլյացիային», որը նա ներկայացնում է: Մեկ ումպը դեռ մի ամբողջ տարա չէ, ճիշտ այնպես, ինչպես խանութ մեկ անգամ այցելելը դեռ հաճախորդի հավատարմություն չէ: Վերլուծության միավորը պետք է համապատասխանի իրական աշխարհի վարքագծին:

Պատմական օրինակ. 1936 թվականի «Literary Digest» հարցումը

«Literary Digest» ամսագիրն անցկացրեց այնպիսի հարցում, որը թվում էր, թե հարցումների ոսկե ստանդարտն է. 10 միլիոն հարցաթերթիկ ուղարկվեց, որոնցից վերադարձվեց 2.4 միլիոնը: Նրանք կանխատեսեցին, որ Լենդոնը կհաղթի Ռուզվելտին ձայների 57%-ով: Բայց Ռուզվելտը հաղթեց ձայների 61%-ով:

Digest-ի խմբագիրները հավատում էին, որ նմուշի հսկայական չափը երաշխավորում է ճշգրտություն: Այն, ինչ նրանք չէին գիտակցել, այն էր, որ իրենց ընտրանքային բազան՝ հեռախոսային տեղեկատուներն ու ավտոմեքենաների գրանցման ցուցակները, համակարգված կերպով բացառում էր ավելի ցածր եկամուտ ունեցող ընտրողներին, ովքեր ճնշող մեծամասնությամբ պաշտպանում էին Ռուզվելտի «Նոր կուրս» (New Deal) քաղաքականությունը: Ջորջ Գելափը, օգտագործելով ճիշտ հավանականային ընտրանք ընդամենը 50,000 հարցվողներով, ճիշտ կանխատեսեց արդյունքը:

Այս դեպքը սովորեցնում է, որ փոքր, ներկայացուցչական նմուշը (n=3,000) անհամեմատ ավելի հուսալի է, քան զանգվածային, բայց կողմնակալ նմուշը (N=2.4 միլիոն): Digest-ը դադարեց տպագրվել երկու տարի անց՝ դառնալով նմուշի որակի և չափի միջև կապը չհասկանալու զոհ:

6. Այս շեղման արժեքը

6.1. Անձնական ծախսեր

Հարաբերությունները տուժում են, երբ մենք դատում ենք զուգընկերներին վարքագծի փոքր նմուշների հիման վրա. մի քանի վատ օրը դառնում է բնավորության հիմնարար թերությունների ապացույց: Անձնական աճը կանգ է առնում, երբ մենք սահմանափակ փորձերից հետո եզրակացնում ենք, որ ինչ-որ բան «չենք կարող» անել: Կարիերայի փոփոխությունները լքվում են նախնական անհաջողություններից հետո, որոնք պարզապես ներկայացնում են բնական տատանումներ:

Առողջապահական որոշումները սխալ են լինում, երբ մենք գնահատում ենք բուժման արդյունավետությունը մեր սեփական եզակի փորձից կամ ընկերների մի քանի պատմություններից: Ներդրումային պորտֆելները սխալ են կառավարվում, երբ մենք հետապնդում ենք վերջերս հաղթողներին կամ խուսափում ենք վերջերս պարտվողներից: Մենք սնահավատություններ ենք զարգացնում՝ հավատալով, որ օրինաչափություններ գոյություն ունեն այնտեղ, որտեղ մաքուր պատահականություն է:

Հոգեբանական արժեքը ներառում է չարդարացված վստահություն անկայուն եզրակացությունների նկատմամբ, որին հաջորդում է շփոթություն, երբ կանխատեսումները ձախողվում են: Մենք կառուցում ենք բարդ պատճառահետևանքային բացատրություններ տարբերությունների համար, որոնք զուտ պատահական են՝ ստեղծելով իրականության մտավոր մոդելներ, որոնք չեն համապատասխանում փաստացի օրինաչափություններին:

6.2. Մասնագիտական ծախսեր

Կարիերայի առաջխաղացումը տուժում է, երբ ղեկավարները սխալ են գնահատում մեր կարողությունները՝ հիմնված սահմանափակ դիտարկումների վրա: Լավ աշխատակիցներն անտեսվում են, քանի որ վաղ տպավորությունները (վարքագծի փոքր նմուշները) չէին համապատասխանում հաջողության կարծրատիպերին: Սխալ աշխատանքի ընդունելու որոշումները վատնում են կազմակերպչական ռեսուրսները և վնասում թիմի դինամիկային:

Բիզնես ռազմավարությունները ձախողվում են, երբ դրանք հարմարեցված են վաղ արդյունքներին, այլ ոչ թե երկարաժամկետ միտումներին: Ապրանքները թողարկվում են ժամանակից շուտ կամ վաղ փակվում են՝ հիմնված աղմկոտ (անորոշ) տվյալների վրա: Շուկայի հետազոտությունը մոլորեցնում է ընկերություններին, երբ փոքր նմուշները համարվում են ներկայացուցչական:

Ֆինանսական կորուստները բազմապատկվում են, քանի որ ներդրումային որոշումները հետապնդում են վերջին արդյունքները: Հիմնադրամների կառավարիչները, ովքեր լավ են աշխատել երեք տարվա ընթացքում, գրավում են հսկայական ներհոսքեր՝ միայն միջինին վերադառնալու և ներդրողներին հիասթափեցնելու համար, ովքեր ենթադրում էին, որ փոքր նմուշը կանխատեսելու է ապագա եկամտաբերությունը:

6.3. Հասարակական ծախսեր

Վերարտադրելիության ճգնաժամը միլիարդավոր դոլարներ է արժեցել այնպիսի հետազոտությունների ֆինանսավորման համար, որոնք հնարավոր չէ վերարտադրել: Բժշկական բուժումները ընդունվում են փոքր փորձարկումների հիման վրա, միայն այն բանի համար, որպեսզի ցույց տան, որ դրանք ոչ մի օգուտ չունեն ավելի մեծ պոպուլյացիաներում: Հանրային առողջության ռեսուրսները սխալ են բաշխվում՝ լուծելու վիճակագրական արտեֆակտները փոքր պոպուլյացիաներում:

Քաղաքական դիսկուրսը թունավորվում է, երբ անհատական դեպքերի մասին անեկդոտները ձևավորում են միլիոնավոր մարդկանց վերաբերող քաղաքականության բանավեճերը: Քրեական արդարադատության համակարգերը խեղաթյուրվում են, երբ բարձր հնչեղություն ունեցող գործերը (փոքր նմուշներ) ուղղորդում են օրենսդրությունը: Հանրության վստահությունը գիտության նկատմամբ խարխլվում է, երբ բացահայտումները հակադարձվում են նմուշների չափերի մեծացմանը զուգընթաց:

Շուկաները դառնում են ավելի անկայուն, քան դա հիմնարար ցուցանիշներն են արդարացնում՝ ստեղծելով աճի ու անկման ցիկլեր, որոնք ոչնչացնում են հարստությունը և տնտեսական կայունությունը: Հանրային քաղաքականությունը տատանվում է ծայրահեղությունների միջև, քանի որ քաղաքական գործիչները արձագանքում են հասարակական կարծիքի փոքր նմուշներին, այլ ոչ թե կայուն նախապատվություններին:

6.4. Վիճակագրական ազդեցություն

Հետազոտությունների արդյունքները ցույց են տալիս, որ N=50-ից ցածր նմուշի չափ ունեցող ուսումնասիրությունները ունեն խիստ ուռճացված ազդեցության չափեր՝ հաճախ 100%-ով կամ ավելի: Բաց գիտության համագործակցությունը (Open Science Collaboration) պարզեց, որ հոգեբանության ուսումնասիրությունների միայն 36%-ը կարող է հաջողությամբ վերարտադրվել, որոնցում հիմնական պատճառը ցածր վիճակագրական հզորությամբ հետազոտություններն են:

Ֆինանսների ոլորտում Վերապրողների շեղումը արհեստականորեն բարձրացնում է փոխադարձ հիմնադրամների թվացյալ եկամտաբերությունը տարեկան մոտ 1-2%-ով, ինչը տարիների ընթացքում վերածվում է միլիոնավոր դոլարների սխալ բաշխված կենսաթոշակային խնայողությունների՝ միլիոնավոր ներդրողների համար:

Բժշկական ախտորոշման սխալները, որոնք պայմանավորված են բազային դրույքաչափի անտեսմամբ և նմուշի չափի նկատմամբ անզգայունությամբ, ըստ գնահատականների, տարեկան ազդում են 12 միլիոն ամերիկացիների վրա, որոնց մոտ կեսը հանգեցնում է վնասների:

7. Թաքնված օգուտները

Շեղումը զուտ անհարմարվողական (maladaptive) չէ. այն իրենից ներկայացնում է արագության և ճշգրտության միջև փոխզիջում, որն օպտիմիզացված էր նախնադարյան միջավայրերի համար, որտեղ տվյալները սակավ էին, իսկ անհապաղ գործողություններն անհրաժեշտ էին:

Արագ ուսուցում սահմանափակ տվյալներից. Իրապես վտանգավոր միջավայրերում եզակի դեպքերից (գիշատչի հետ մեկ հանդիպում, մեկ թունավոր հատապտուղ) ընդհանրացնելու ունակությունն ապահովում է ակնհայտ գոյատևման արժեք: Սպասելը «վիճակագրորեն նշանակալի» ապացույցների կարող է մահացու լինել:

Կոգնիտիվ տնտեսում. Վստահությունը նմուշի չափին ճշգրիտ չափաբերելը պահանջում է Համակարգ 2-ի ներգրավում՝ դանդաղ, ջանքեր պահանջող և մետաբոլիկ առումով ծախսատար: Ցածր ռիսկային իրավիճակներում Համակարգ 1-ի մտավոր կարճուղիները տալիս են «բավականաչափ լավ» դատողություններ՝ նվազագույն ճանաչողական ծախսերով:

Գործողությունների կողմնորոշում. Շեղումը խրախուսում է վճռական գործողություններ՝ կաթվածահար անող անորոշության փոխարեն: Շատ իրական իրավիճակներում ոչ լիարժեք տեղեկատվության հիման վրա գործելը ավելի լավ է, քան սպասել որոշակիության, որը երբեք չի գալիս:

Օրինաչափությունների հայտնաբերում. Փոքր նմուշներում օրինաչափություններ տեսնելու միտումը, թեև հաճախ սխալ է, երբեմն հայտնաբերում է իրական ազդակներ, որոնք զուտ վիճակագրական մոտեցումները բաց կթողնեին: Կեղծ դրական արդյունքների արժեքը (գոյություն չունեցող օրինաչափություններ տեսնելը) որոշ ոլորտներում կարող է ավելի ցածր լինել, քան կեղծ բացասական արդյունքներինը (իրական օրինաչափություններ բաց թողնելը):

Շեղման ամբողջական վերացումը կպահանջեր մշտական վիճակագրական հաշվարկներ, ինչը կգերբեռներ ճանաչողական ռեսուրսները: Նպատակը ոչ թե այն վերացնելն է, այլ համապատասխան չափաբերումը (calibration)՝ կիրառել վիճակագրական դատողություններ բարձր ռիսկային իրավիճակներում, մինչդեռ թույլ տալով էվրիստիկային գործել ցածր ռիսկային համատեքստերում:

8. Ինքնագնահատում. Ունե՞ք այս շեղումը:

8.1. Նախազգուշացնող նշանների ստուգաթերթ

• Ես ձևավորում եմ հստակ կարծիք ռեստորանների, ապրանքների կամ ծառայությունների մասին մեկ փորձից հետո
• Ես հավատում եմ սպորտում, մոլախաղերում կամ ներդրումներում «տաք շարքերին» (հաջող) և «սառը ժամանակաշրջաններին» (անհաջող)
• Ես զարմանում եմ, երբ մետաղադրամը երեք կամ ավելի անգամ անընդմեջ նույն կողմի վրա է ընկնում
• Ես ակնկալում եմ, որ կարճաժամկետ ներդրումային եկամուտները կշարունակվեն երկարաժամկետ հեռանկարում
• Ես ընկերների անեկդոտներն ու պատմությունները համարում եմ նույնքան ծանրակշիռ, որքան վիճակագրական ապացույցները
• Ես փոխել եմ կարծիքս ինչ-որ մեկի բնավորության մասին մեկ միջադեպի հիման վրա
• Ես ավելի շատ վստահում եմ հաճախորդների ակնարկներին, երբ դրանք միաձայն են, անկախ նրանից, թե որքան քիչ են դրանք
• Ես զգում եմ, որ փոքր, լավ ընտրված նմուշը պետք է տա նույն արդյունքը, ինչ մեծը
• Ես վստահ եմ դառնում օրինաչափությունների հարցում՝ տեսնելով դրանք ընդամենը երկու կամ երեք անգամ
• Ես հաճախ ասում եմ «դա միշտ ինձ հետ է պատահում»՝ հիմնվելով մի քանի դեպքի վրա

Գնահատում.

• 0-2 նշված՝ Ցածր խոցելիություն
• 3-5 նշված՝ Չափավոր խոցելիություն
• 6-8 նշված՝ Բարձր խոցելիություն
• 9-10 նշված՝ Շատ բարձր խոցելիություն

8.2. Ինքնամտորման հարցեր

1. Երբ կարդում եք, որ նոր դեղամիջոցը «80% արդյունավետություն» ունի կլինիկական փորձարկումներում, արդյո՞ք ինստինկտիվորեն մտածում եք հարցնել, թե քանի հիվանդ է մասնակցել հետազոտությանը:

2. Երբևէ թողե՞լ եք նոր սովորություն, դիետա կամ ռեժիմ առաջին երկու շաբաթվա ընթացքում, քանի որ այն «չէր աշխատում»՝ առանց հաշվի առնելու, թե արդյոք բավականաչափ ժամանակ տվել եք արդյունքներ տեսնելու համար:

3. Երբ ընկերը խորհուրդ է տալիս բժշկի, ռեստորան կամ ապրանք՝ հիմնվելով իր մեկ փորձի վրա, որքանո՞վ եք կարևորում այդ խորհուրդը՝ համեմատած ընդհանուր ակնարկների հետ:

4. Երբևէ զգացե՞լ եք, որ պատահական իրադարձությունները պարտավոր են ձեզ տալ այլ արդյունք՝ որոշակի շարքից հետո (օրինակ՝ խաղային ավտոմատը պետք է «տա» շահում):

5. Երբևէ որևէ մեկը ձեզ նշե՞լ է, որ դուք եզրակացություններ եք անում չափազանց քիչ տեղեկատվությունից:

8.3. Արագ ախտորոշիչ սցենար

Սցենար. Դուք ուսումնասիրում եք երկու փոխադարձ հիմնադրամներ ձեր կենսաթոշակային խնայողությունների համար: A հիմնադրամն ունեցել է տարեկան 15% եկամտաբերություն վերջին 3 տարում՝ գերազանց մենեջերի ղեկավարությամբ: B հիմնադրամն ունեցել է տարեկան 9% եկամտաբերություն վերջին 15 տարում՝ միջին կառավարմամբ: Ո՞ր հիմնադրամը կընտրեիք:

• A) Հիմնադրամ A, քանի որ 15%-ը շատ ավելի լավ է, քան 9%-ը, և մենեջերը միանշանակ հմուտ է → Բարձր խոցելիություն
• B) Հիմնադրամ A, բայց ես կուզենայի տեսնել ավելի շատ պատմություն՝ լիովին պարտավորվելուց առաջ → Չափավոր խոցելիություն
• C) Հիմնադրամ B, քանի որ 15 տարվա տվյալներն ավելի հուսալի են, քան 3 տարվանը, և տարբերությունը կարող է պարզապես բախտի բան լինել → Ցածր խոցելիություն

9. Ինչպես նկատել այս շեղումը ուրիշների մոտ

9.1. Վարքագծային ցուցիչներ

Դիտարկեք որոշումներ կայացնելու օրինաչափությունները. նրանք արդյո՞ք կայացնում են լուրջ որոշումներ՝ հիմնվելով սահմանափակ ապացույցների վրա: Արդյո՞ք նրանք արագ փոխում են ընթացքը վերջին արդյունքների հիման վրա: Արդյո՞ք նրանք արտահայտում են բարձր վստահություն ընդամենը մի քանի տվյալների կետերից հետո:

Հետևեք, թե ինչպես են նրանք քննարկում հավանականությունն ու պատահականությունը. արդյո՞ք նրանք ակնկալում են, որ պատահականությունը կարճ ժամանակում «կհավասարակշռվի»: Արդյո՞ք նրանք տեսնում են իմաստալից օրինաչափություններ այնտեղ, ինչը թվում է որպես աղմուկ: Արդյո՞ք նրանք անտեսում են արդյունքները որպես «պատահականություններ» (flukes), երբ դրանք չեն համապատասխանում սպասելիքներին:

Ուշադրություն դարձրեք անեկդոտներին ընդդեմ վիճակագրության արձագանքներին. արդյո՞ք նրանք ավելի շատ կարևորում են վառ անձնական պատմությունը, քան համախմբված տվյալները: Արդյո՞ք նրանք ընդհանրացնում են առանձին օրինակները համընդհանուր կանոնների:

9.2. Զրույցի նախազգուշացնող նշաններ

Արտահայտություններ, որոնք մարդիկ ասում են այս շեղման ազդեցության տակ.

• «Դա արդեն երեք անգամ անընդմեջ է պատահում, այստեղ հաստատ օրինաչափություն կա»
• «Ես դա փորձել եմ մեկ անգամ, և այն չաշխատեց, այնպես որ...»
• «Հավանականություններն ի վերջո պետք է հավասարվեն»
• «Իմ ընկերը սարսափելի փորձ ունեցավ դրա հետ, ուստի ես երբեք չեմ փորձի այն»
• «Վերջին երկու եռամսյակները հիանալի էին, այնպես որ այս ընկերությունն ակնհայտորեն լավ է կառավարվում»

Նրանց բերած փաստարկների տեսակները.

• Մի քանի օրինակների դիտարկումը որպես միտման ապացույց
• Ակնկալիք, որ փոքր նմուշները կատարելապես կներկայացնեն պոպուլյացիայի բնութագրերը

Հարցեր, որոնցից նրանք խուսափում են.

• «Քանի՞ դիտարկման վրա է սա հիմնված:»
• «Որքա՞ն է նմուշի չափը:»
• «Կարո՞ղ է սա պարզապես պատահական տատանում լինել:»

9.3. Իրավիճակային խթաններ

Հանգամանքներ, որոնք ակտիվացնում են այս շեղումը.

• Ժամանակի ճնշում, որն ստիպում է արագ որոշումներ կայացնել
• Էմոցիոնալ լիցքավորված իրավիճակներ, որտեղ վառ օրինակներն ավելի նկատելի են
• Բարդ վիճակագրական տեղեկատվության ներկայացում տոկոսային ձևաչափով՝ հաճախականությունների փոխարեն
• Ոլորտներ, որտեղ հետադարձ կապն ուշանում է (ներդրումներ, աշխատանքի ընդունում, առողջապահական ընտրություններ)
• Համատեքստեր, որտեղ անեկդոտներն ավելի հասանելի են, քան տվյալները

Միջավայրի գործոններ.

• Տեղեկատվության գերբեռնվածություն, որը խանգարում է մանրակրկիտ վիճակագրական գնահատմանը
• Արձագանքման խցիկներ (Echo chambers), որոնք ներկայացնում են կարծիքների կողմնակալ նմուշներ
• Լրատվամիջոցներ, որոնք շեշտում են պատմությունները վիճակագրության փոխարեն

Էմոցիոնալ վիճակներ, որոնք մեծացնում են խոցելիությունը.

• Անհանգստություն, որը որոշակիություն է փնտրում ցանկացած հասանելի ապացույցից
• Ոգևորություն, որը նպաստում է չափազանց մեծ վստահությանը վաղ դրական ազդակների նկատմամբ
• Հիասթափություն, որը մղում է օրինաչափությունների փնտրտուքին երկիմաստ իրավիճակներում

10. Ճանաչողական շեղման հաղթահարման (Debiasing) ռազմավարություններ

10.1. Անմիջական տեխնիկաներ

«N» հարցը. Նախքան որևէ եզրակացություն անելը, հարցրեք. «Որքա՞ն մեծ է նմուշը, որի վրա հիմնված է սա»: Ակնառու դարձրեք նմուշի չափը արդյունքները մեկնաբանելուց առաջ:

Կայունության թեստ. Հարցրեք՝ «Արդյո՞ք ես կակնկալեի, որ այս արդյունքը կմնար նույնը, եթե կրկնապատկեի կամ եռապատկեի նմուշը»: Եթե ոչ, ձեռնպահ մնացեք դատողությունից:

Վերաձևակերպեք հաճախականությունների. Վերածեք տոկոսները բնական հաճախականությունների («80% արդյունավետություն» դառնում է «8-ը 10-ից»): Սա բնականորեն ներառում է նմուշի չափը հայտարարի մեջ:

Ռեգրեսիայի կանոնը. Ենթադրեք, որ ծայրահեղ արդյունքները կվերադառնան միջինին: Եթե որևէ բան թվում է անսովոր լավ կամ վատ, ակնկալեք, որ այն ժամանակի ընթացքում կդառնա ավելի միջին:

Փնտրեք բազային դրույքաչափերը. Նախքան հատուկ ապացույցները գնահատելը, պարզեք, թե ինչ է սովորաբար տեղի ունենում պոպուլյացիայում: Օգտագործեք սա որպես խարիսխ:

10.2. Երկարաժամկետ ռազմավարություններ

Վիճակագրական գրագիտություն. Ներդրեք հիմնական հավանականության և վիճակագրության կրթության մեջ: Դիսպերսիայի, ստանդարտ սխալի և վստահության միջակայքերի ըմբռնումը տալիս է հայեցակարգային շրջանակ՝ գիտակցելու համար, թե երբ է նմուշի չափը կարևոր:

Զարգացրեք սկեպտիցիզմի սովորություն. Սովորեցրեք ձեզ ավտոմատ կերպով կասկածի տակ դնել փոքր նմուշներով արդյունքների հուսալիությունը: Դարձրեք «Արդյո՞ք սա բավականաչափ տվյալ է» հարցը ռեֆլեքսային:

Հետևեք ձեր կանխատեսումներին. Գրանցեք սահմանափակ տվյալներից արված եզրակացությունները և արդյոք դրանք արդարացվեցին ժամանակի ընթացքում: Սա ապահովում է անձնական հետադարձ կապ չափաբերման վերաբերյալ:

Ուսումնասիրեք դասական օրինակներ. Ծանոթացեք կանոնիկ դեպքերին (Հիվանդանոցի խնդիրը, Երիկամների քաղցկեղի քարտեզը), որպեսզի դրանք գան ձեր մտքին նոր իրավիճակներ գնահատելիս:

10.3. Միջավայրի ձևավորում

Ներկառուցեք նմուշի չափը որոշումների կայացման գործընթացներում. Ստեղծեք կազմակերպչական կանոններ, որոնք պահանջում են նմուշների նվազագույն չափեր նախքան եզրակացություններ անելը: Ներդրեք սպասման ժամանակահատվածներ նախքան վաղ արդյունքների հիման վրա գործելը:

Օգտագործեք վիզուալ գործիքներ. Ստեղծեք վահանակներ (dashboards), որոնք ցույց են տալիս փոքր նմուշների համար վստահության միջակայքերի ընդլայնումը: Վիզուալ կերպով ակնառու դարձրեք անորոշությունը:

Պահանջեք հաճախականությունների ձևաչափեր. Կազմակերպչական հաղորդակցություններում պարտադրեք, որ հավանականությունները ներկայացվեն որպես բնական հաճախականություններ՝ հստակ հայտարարներով:

Ստեղծեք սատանայի փաստաբաններ. Հանձնարարեք թիմի անդամներին հատուկ վիճարկել, թե արդյոք նմուշների չափերն արդարացնում են վստահության մակարդակները: Ինստիտուցիոնալիզացրեք սկեպտիցիզմը:

10.4. Երբ դիմել արտաքին օգնության

Բարձր ռիսկային որոշումներ. Ցանկացած կարևոր ընտրություն (խոշոր ներդրումներ, աշխատանքի ընդունում, բժշկական բուժում), որը հիմնված է սահմանափակ տվյալների վրա, պահանջում է վիճակագրական խորհրդատվություն:

Երբ դուք վստահ եք զգում. Պարադոքսալ կերպով, փոքր նմուշներից բխող ուժեղ վստահությունը պետք է խթանի արտաքին ստուգում: Հարցրեք. «Արդյո՞ք իմ վստահությունն արդարացված է տվյալներով»:

Ոլորտի փորձագետներ. Վիճակագիրները, տվյալագետները և հետազոտողները կարող են տալ ապացույցների ուժի չափաբերված (կալիբրացված) գնահատականներ: Ձևակերպեք հարցումները որպես. «Հաշվի առնելով N=X, որքա՞ն վստահ պետք է լինեմ այս արդյունքի վրա»:

Երբ օրինաչափություններն արագ են ի հայտ գալիս. Եթե դուք տեսնում եք հստակ օրինաչափություն ընդամենը մի քանի դիտարկումներից հետո, խորհրդակցեք մեկի հետ, ով պակաս շահագրգռված է արդյունքով, որպեսզի գնահատի, թե արդյոք այն հավանաբար կպահպանվի:

11. Գործնական վարժություններ

Վարժություն 1. Մետաղադրամի նետման գիտափորձ

• Նպատակը. Զարգացնել ինտուիցիա փոքր նմուշների փոփոխականության համար
• Պահանջվող ժամանակը. 20 րոպե
• Անհրաժեշտ նյութեր. Մետաղադրամ, թուղթ, մատիտ
• Բարդության մակարդակը. Սկսնակ
• Հրահանգներ.
  1. Նետեք մետաղադրամը 10 անգամ և գրանցեք գերբ ընկնելու տոկոսը
  2. Կրկնեք սա 10 անգամ՝ ստեղծելով 10 նետումներից բաղկացած 10 նմուշ
  3. Նշեք տոկոսների տիրույթը (հավանաբար տատանվում է 20%-ից 80%)
  4. Այժմ նետեք մետաղադրամը 100 անգամ և գրանցեք տոկոսը
  5. Կրկնեք 100 նետումների ևս մեկ շարք
  6. Համեմատեք տատանումները 10 նետումների և 100 նետումների նմուշներում
• Ինքնամտորման հարցեր.
  • Որքանո՞վ էիք զարմացած փոքր նմուշների տատանումներից:
  • 10 նետումների որևէ հաջորդականություն ձեզ թվա՞ց «կեղծված», թեև գիտեիք, որ մետաղադրամն արդար է:
  • Ինչպե՞ս են 100 նետումների տոկոսները համեմատվում միմյանց հետ:
• Հաճախականություն. Մեկ անգամ, ապա վերադարձեք, երբ հիշեցման կարիք ունեք

Վարժություն 2. Ակնարկների վերլուծություն

• Նպատակը. Կիրառել վստահության չափաբերում նմուշի չափին իրական որոշումներում
• Պահանջվող ժամանակը. 30 րոպե
• Անհրաժեշտ նյութեր. Ինտերնետ հասանելիություն
• Բարդության մակարդակը. Միջին
• Հրահանգներ.
  1. Փնտրեք ապրանքի կատեգորիա, որը կարող եք գնել (ականջակալներ, գրքեր, ռեստորաններ)
  2. Գտեք երեք տարբերակ. մեկը՝ 5 ակնարկով, մեկը՝ 50 ակնարկով, մեկը՝ 500 ակնարկով
  3. Յուրաքանչյուրի համար նշեք միջին գնահատականը և կարդացեք մի քանի ակնարկներ
  4. Գրեք, թե որքան վստահ եք յուրաքանչյուր գնահատականի ճշգրտության մեջ
  5. Մտածեք. որքանո՞վ կփոխեր յուրաքանչյուր միջինը մեկ նոր ծայրահեղ ակնարկ:
• Ինքնամտորման հարցեր.
  • Դուք բնականաբար ավելի վստա՞հ զգացիք ավելի շատ ակնարկներ ունեցող գնահատականներում:
  • Ինչպե՞ս ակնարկների բաշխումը (բոլորը 5 աստղ ընդդեմ խառը) ազդեց ձեր վստահության վրա:
  • Ի՞նչ նվազագույն նմուշի չափ կպահանջեիք վարկանիշին վստահելու համար:
• Հաճախականություն. Ամեն ամիս, օգտագործելով տարբեր ապրանքների կատեգորիաներ

Վարժություն 3. Պատմական թեստավորում (Backtesting)

• Նպատակը. Զգալ, թե ինչպես են փոքր նմուշների եզրակացությունները ձախողվում ժամանակի ընթացքում
• Պահանջվող ժամանակը. 45 րոպե
• Անհրաժեշտ նյութեր. Պատմական բաժնետոմսերի տվյալներ կամ սպորտային վիճակագրություն (անվճար հասանելի առցանց)
• Բարդության մակարդակը. Բարդ
• Հրահանգներ.
  1. Ընտրեք 10 բաժնետոմս կամ մարզիկ՝ առնվազն 10 տարվա տվյալներով
  2. Նայեք միայն առաջին տարվա տվյալներին: Առանձնացրեք լավագույն 3 կատարողներին
  3. Կանխատեսեք, որ նրանք կլինեն լավագույնները նաև 2-րդ տարում
  4. Ստուգեք 2-րդ տարվա արդյունքները: Նրանցից քանիսը՞ մնացին լավագույն եռյակում:
  5. Այժմ նայեք 5 տարվա միջիններին: Նույնացրեք լավագույն 3 կատարողներին
  6. Ստուգեք հաջորդ 5 տարվա կատարողականը: Համեմատեք ճշգրտությունը
• Ինքնամտորման հարցեր.
  • Ինչպե՞ս է կարճաժամկետ կատարողականը կանխատեսում երկարաժամկետ արդյունքները:
  • Ինչո՞վ է բացատրվում ձեր նկատած միջինին վերադարձը:
  • Ինչպե՞ս սա կփոխեր ձեր ներդրումային կամ խաղադրույքային ռազմավարությունը:
• Հաճախականություն. Եռամսյակը մեկ

Ամենօրյա պրակտիկա

Ամեն օր նկատեք մեկ եզրակացություն, որն անում եք սահմանափակ տվյալների հիման վրա: Այն ընդունելուց առաջ հարցրեք. «Քանի՞ դիտարկման վրա է սա հիմնված» և «Ի՞նչ կեզրակացնեի, եթե ունենայի 10 անգամ ավելի տվյալներ»: Պարզապես նմուշի չափի խնդրի վրա ուշադրություն դարձնելը բավարար է. կարիք չկա փոխել ձեր եզրակացությունը, ուղղակի նկատեք սահմանափակումը:

• Առաջարկվող տևողությունը՝ 2 րոպե
• Օրվա լավագույն ժամը՝ Երեկոյան մտորումներ
• Ինչպես հետևել առաջընթացին՝ Պահեք ամենօրյա դիտարկումների գրառումների փոքրիկ տետր

Շաբաթական մարտահրավեր

Շաբաթը մեկ անգամ գտեք նորությունների հոդված կամ սոցիալական մեդիայի գրառում, որը մեջբերում վիճակագրություն: Ուսումնասիրեք բնօրինակ աղբյուրը և պարզեք նմուշի չափը: Գրեք համառոտ նշում այն մասին, թե արդյոք եզրակացություններն արդարացված են ապացույցների ուժով:

• Ակնկալվող արդյունքներ 4 շաբաթ անց. Բնական սկեպտիցիզմ զեկուցված արդյունքների նկատմամբ; ավտոմատ ուշադրություն նմուշի չափին
• Օրագրի գրառման հարցեր.
  • Ո՞րն էր նմուշի ամենազարմանալի չափը, որը հայտնաբերեցի այս շաբաթ:
  • Ինչպե՞ս նմուշի չափի մասին իմանալը փոխեց իմ մեկնաբանությունը արդյունքի վերաբերյալ:
  • Արդյո՞ք ես դառնում եմ ավելի չափաբերված (հավասարակշռված) իմ նախնական սկեպտիցիզմում:

12. Կոնկրետ լսարանների համար

Առաջնորդների և մենեջերների համար

Առաջնորդները պարբերաբար կայացնում են բարձր ռիսկային որոշումներ՝ հիմնված սահմանափակ տվյալների վրա. եռամսյակային արդյունքներ, արտադրանքի վաղ արձագանքներ, հարցազրույցների տպավորություններ, պիլոտային ծրագրերի արդյունքներ: Նմուշի չափի անտեսման արժեքը բազմապատկվում է կազմակերպչական մասշտաբով:

Հատուկ ռազմավարություններ.

• Ներդրեք նվազագույն դիտարկման ժամանակահատվածներ՝ նախքան եզրակացնելը, որ նախաձեռնությունները հաջողում կամ ձախողվում են
• Պահանջեք նմուշի չափի զեկուցում բոլոր ներքին հետազոտություններում և վերլուծություններում
• Ստեղծեք որոշումների կայացման շրջանակներ, որոնք հստակորեն ներառում են փոքր նմուշների անորոշությունը
• Օրինակ ծառայեք վիճակագրական համեստությամբ. հրապարակայնորեն վերանայեք եզրակացությունները, երբ ավելի շատ տվյալները փոխում են պատկերը
• Ձևավորեք թիմեր վիճակագրական փորձաքննությամբ, ովքեր կարող են վիճարկել չափազանց վստահ մեկնաբանությունները

Թիմային միջամտություններ.

• Նշանակեք «նմուշի չափի փաստաբանի» դեր կարևոր հանդիպումներում
• Ստեղծեք նորմեր վստահության չափաբերման շուրջ. «Հաշվի առնելով այս N-ը, որքա՞ն պետք է վստահ լինենք»:
• Անցկացրեք հետահայաց քննարկումներ (post-mortems) անցյալի որոշումների վերաբերյալ, որոնք կայացվել են սահմանափակ տվյալներով

Ծնողների և մանկավարժների համար

Երեխաներին անհրաժեշտ է զարգացնել վիճակագրական ինտուիցիա՝ նախքան հավանականության ֆորմալ կրթությունը: Նպատակը մտածելակերպի ձևավորումն է, որը կասկածի տակ է դնում ապացույցների ուժը:

Տարիքին համապատասխան բացատրություններ.

• Փոքր երեխաներ. «Երբ մենք ինչ-որ բան փորձել ենք միայն մի քանի անգամ, մենք իսկապես չենք կարող իմանալ, թե արդյոք այն միշտ այդպես կստացվի»
• Ավելի մեծ երեխաներ. Օգտագործեք խաղեր և գիտափորձեր (մետաղադրամներ, զառեր)՝ ցույց տալու, թե ինչպես են տատանվում փոքր նմուշները
• Դեռահասներ. Քննարկեք, թե ինչպես են սոցիալական ցանցերը ստեղծում հասակակիցների վարքագծի և կարծիքի կողմնակալ նմուշներ

Գործունեություններ.

• Ընտանեկան փորձարկումներ զառերով և մետաղադրամներով՝ տատանումները դիտարկելու համար
• Քննարկեք, թե քանի փորձ է արժանի ինչ-որ բան նախքան եզրակացնելը, որ այն «լավ» է կամ «վատ»
• Միասին վերլուծեք գովազդային պնդումները. «Նրանք որտեղի՞ց գիտեն սա»:

Առողջապահության ոլորտի մասնագետների համար

Բժշկական որոշումներն ունեն կենսական հետևանքներ՝ նմուշի չափի նկատմամբ զգայունությունը դարձնելով չափազանց կարևոր: Մամոգրաֆիայի խնդիրը ցույց է տալիս, թե ինչպես են նույնիսկ վերապատրաստված բժիշկները դժվարանում վիճակագրական դատողություններում:

Կլինիկական հետևանքներ.

• Ընդունեք, որ առանձին հիվանդների մոտ թեստի անսովոր արդյունքները կարող են լինել ընտրանքային տատանումներ
• Եղեք հատկապես զգույշ հազվագյուտ հիվանդությունների դեպքում, որտեղ բազային դրույքաչափերը կեղծ դրականները դարձնում են հավանական
• Օգտագործեք հաճախականությունների ձևաչափեր՝ հիվանդներին ռիսկերը փոխանցելիս

Հիվանդների հետ հաղորդակցման ռազմավարություններ.

• Բացատրեք, որ մեկ թեստի արդյունքը միայն մեկ տվյալների կետ է. ժամանակի ընթացքում մոնիտորինգը տալիս է ավելի հուսալի տեղեկատվություն
• Ներկայացրեք բուժման արդյունավետության տվյալները նմուշների հստակ չափերով. «500 հիվանդների մասնակցությամբ հետազոտության մեջ...»
• Օգնեք հիվանդներին հասկանալ, որ իրենց անհատական փորձը կարող է չհամապատասխանել պոպուլյացիայի վիճակագրությանը

Ֆինանսական մասնագետների համար

Շուկաները խստորեն պատժում են նմուշի չափի անտեսումը: Երեք տարվա ցուցանիշների հետևից վազելը, եռամսյակային եկամուտներին չափազանցված արձագանքելը և վերապրողների շեղումն անտեսելը ներդրողներին արժենում է միլիարդավոր դոլարներ տարեկան:

Ներդրումային հատուկ կիրառություններ.

• Պահանջեք ավելի երկարաժամկետ արդյունքների պատմություն նախքան եզրակացնելը, որ մենեջերը հմտություններ ունի
• Հաշվի առեք վերապրողների շեղումը հիմնադրամների կատեգորիաները վերլուծելիս
• Ընդունեք, որ կարճաժամկետ գերազանցությունը համապատասխանում է պատահական տատանումներին

Հաճախորդների հետ հաղորդակցման ռազմավարություններ.

• Կրթեք հաճախորդներին կարճաժամկետ արդյունքների անհուսալիության մասին
• Ներկայացրեք պատմական տվյալները համապատասխան վստահության միջակայքերով
• Բացատրեք միջինին վերադառնալու երևույթը. ծայրահեղ արդյունքները սովորաբար չափավորվում են ժամանակի ընթացքում

Ռիսկերի կառավարման հետևանքներ.

• Կառուցեք պորտֆելներ՝ ենթադրելով, որ վերջերս հաղթողները կվերադառնան միջինին
• Պահանջեք նոր ռազմավարությունների համար ավելի երկար գնահատման ժամանակահատվածներ
• Ներառեք փոքր նմուշներից բխող անորոշությունը ռիսկի մոդելներում

13. Փոխազդեցություններ այլ շեղումների հետ

Շեղումներ, որոնք ուժեղացնում են այս մեկը

Շեղումներ, որոնք հակազդում են այս մեկին

Ընդհանուր շեղումների շղթաներ

Ներկայացուցչական էվրիստիկա → Նմուշի չափի նկատմամբ անզգայունություն → Խաղացողի մոլորություն → Կորած ծախսերի մոլորություն (Sunk Cost Fallacy)

Բացատրություն. Մենք սկսում ենք հավանականությունը դատելով ըստ նմանության, այլ ոչ թե նմուշի հուսալիության: Երբ փոքր նմուշները շեղվում են սպասվող օրինաչափություններից, մենք ակնկալում ենք, որ դրանք «կուղղվեն»՝ հանգեցնելով Խաղացողի մոլորությանը: Երբ դրանք չեն ուղղվում, մենք կարող ենք շարունակել ներդրումներ կատարել (Կորած ծախսեր)՝ հավատալով, որ «շրջադարձը» մոտ է:

Դադարեցնելու համար. Կասկածի տակ դրեք նմուշի չափը առաջին իսկ քայլից: Հարցրեք «Արդյո՞ք սա բավականաչափ տվյալ է վստահելու համար» նախքան որևէ պատճառահետևանքային մեկնաբանություն սկսելը:

14. Մշակութային տեսանկյուններ

Այս շեղման մշակութային տատանումների վերաբերյալ հետազոտությունները դեռևս սահմանափակ են, սակայն որոշ օրինաչափություններ ի հայտ են գալիս միջմշակութային ճանաչողական հոգեբանությունից:

Վերլուծական մտածողությունը շեշտադրող մշակույթները (հաճախ ասոցացվում են արևմտյան, անհատապաշտ հասարակությունների հետ) կարող են դրսևորել խոցելիության այլ օրինաչափություններ, քան հոլիստիկ (ամբողջական) մտածողությունը շեշտադրող մշակույթները (հաճախ ասոցացվում են արևելաասիական, կոլեկտիվիստական հասարակությունների հետ): Հոլիստիկ մտածողներն ավելի ուշադիր կարող են լինել համատեքստի և իրավիճակային գործոնների նկատմամբ՝ պոտենցիալ մեղմելով փոքր նմուշներից բխող ծայրահեղ եզրակացությունները:

Կրթական համակարգերը, որոնք շեշտում են մեխանիկական մաթեմատիկական հաշվարկները՝ ի հակադրություն հայեցակարգային վիճակագրական դատողությունների, հավանաբար ազդում են շեղման սրության վրա: Հաճախականությունների ձևաչափի վարկածը ենթադրում է, որ կոնկրետ, փորձարարական մաթեմատիկայի ավելի ուժեղ ավանդույթներ ունեցող մշակույթները կարող են ավելի լավ հանդես գալ նմուշի չափի նկատմամբ զգայուն առաջադրանքներում:

Միջմշակութային ուսումնասիրությունները Project Implicit-ի նման հաստատություններից (ներգրավելով հետազոտողներ Իսրայելի Բեն-Գուրիոնի համալսարանից և Հարվարդից) ցույց են տալիս, որ չնայած շեղումը համընդհանուր է, էվրիստիկայի վրա հիմնվելու աստիճանը կարող է տարբերվել՝ կախված կրթական համակարգերից և մշակութային նորմերից:

15. Առասպելներ և թյուրիմացություններ

16. Փորձագետների կարծիքներ

«Մարդիկ ունեն սխալ ինտուիցիաներ պատահականության օրենքների վերաբերյալ: Մասնավորապես, նրանք պոպուլյացիայից պատահականորեն վերցված նմուշը համարում են խիստ ներկայացուցչական, այսինքն՝ պոպուլյացիային նման բոլոր էական բնութագրերով»: — Ամոս Տվերսկի և Դանիել Կահնեման, Science (1974)

«Փոքր նմուշը, որը իր կազմով խիստ ներկայացուցչական է պոպուլյացիայի համար, պարտադիր չէ, որ ներկայացուցչական լինի վիճակագրական հատկություններով, ինչպիսիք են միջինները, դիսպերսիաները կամ կոռելյացիաները»: — Ամոս Տվերսկի և Դանիել Կահնեման, «Հավատ փոքր թվերի օրենքին» (1971)

«Միտքը նախագծված չէ հավանականությունները տոկոսների տեսքով հաշվարկելու համար, բայց այն կարող է 'տեսնել' բնական հաճախականությունները»: — Գերդ Գիգերենցեր, Մարդկային զարգացման Մաքս Պլանկի ինստիտուտ

17. Հիմնական եզրակացություններ

1. Տարբերությունը (դիսպերսիան) նվազում է նմուշի չափի մեծացման հետ. Այս մաթեմատիկական ճշմարտությունը (σ/√n) հետևողականորեն խախտվում է մարդկային ինտուիցիայի կողմից: Փոքր նմուշները բնականից անկայուն են; մեծ նմուշները կայուն են:

2. Շեղումը համընդհանուր է. Սովորական մարդկանցից մինչև Նոբելյան դափնեկիրներ՝ բոլորը դրսևորում են այս հակվածությունը: Վիճակագրական վերապատրաստումը նվազեցնում է, բայց չի վերացնում այն:

3. Մենք օրինաչափություններ ենք տեսնում աղմուկի մեջ. Մտքի օրինաչափությունների ճանաչման համակարգերը հաշվի չեն առնում նմուշի հուսալիությունը, ինչը ստիպում է մեզ կառուցել պատճառահետևանքային պատմություններ պատահական տատանումների համար:

4. Ձևաչափը նշանակություն ունի. Տեղեկատվությունը որպես բնական հաճախականություններ ներկայացնելը («10-ը 1000-ից»)՝ տոկոսների փոխարեն, կտրուկ բարելավում է դատողությունը, ինչը հուշում է, որ շեղումը մասամբ կապված է տեղեկատվության ձևավորման հետ:

5. Ծախսերը հսկայական են. Վերարտադրելիության ճգնաժամը, բժշկական սխալ ախտորոշումները, ֆինանսական պղպջակները և մարքեթինգային աղետները կարող են կապվել այս մեկ սխալի հետ:

6. Շեղումն էվոլյուցիայի է ենթարկվել լավ պատճառներով. Տվյալներով աղքատ նախնադարյան միջավայրերում փոքր նմուշներից արագ ընդհանրացումն ադապտիվ էր: Խնդիրն առաջանում է ժամանակակից տվյալներով հարուստ միջավայրերի հետ անհամապատասխանությունից:

7. Հարցրեք «Որքա՞ն է N-ը»: Ամենաարդյունավետ միջամտությունը նմուշի չափը ակնառու դարձնելն է՝ նախքան որևէ եզրակացություն անելը:

18. Լրացուցիչ ռեսուրսներ

Ակադեմիական հոդվածներ

• Tversky, A., & Kahneman, D. (1971). Belief in the law of small numbers. Psychological Bulletin, 76(2), 105-110.
• Tversky, A., & Kahneman, D. (1974). Judgment under uncertainty: Heuristics and biases. Science, 185(4157), 1124-1131.
• Gigerenzer, G., & Hoffrage, U. (1995). How to improve Bayesian reasoning without instruction: Frequency formats. Psychological Review, 102(4), 684-704.
• Gilovich, T., Vallone, R., & Tversky, A. (1985). The hot hand in basketball: On the misperception of random sequences. Cognitive Psychology, 17(3), 295-314.
• Wainer, H., & Zwerling, H. L. (2006). Evidence that smaller schools do not improve student achievement. Phi Delta Kappan, 88(4), 300-303.

Գրքեր

• Kahneman, D. (2011). Thinking, Fast and Slow. Farrar, Straus and Giroux.
• Gigerenzer, G. (2002). Calculated Risks: How to Know When Numbers Deceive You. Simon & Schuster.
• Thaler, R. H. (2015). Misbehaving: The Making of Behavioral Economics. W. W. Norton & Company.
• Stanovich, K. E. (2009). What Intelligence Tests Miss: The Psychology of Rational Thought. Yale University Press.

Գրքի գլուխներ

• Kahneman, D., & Tversky, A. (1972). Subjective probability: A judgment of representativeness. In Cognitive Psychology, 3(3), 430-454.

19. Ամփոփիչ քարտ

20. Օգտագործված տերմինների բառարան

21. Քննարկման հարցեր

Գրքի ակումբների, դասարանների կամ ինքնամտորման համար.

1. Հիշեք ձեր վերջին կարևոր որոշումներից մեկը: Որքա՞ն տվյալների վրա էր հիմնված այդ որոշումը, և արդյո՞ք կանեիք նույն ընտրությունը, եթե ունենայիք տասն անգամ ավելի շատ տեղեկատվություն:

2. Ինչո՞ւ եք կարծում, որ վիճակագրական վերապատրաստումը ամբողջությամբ չի վերացնում այս շեղումը: Ի՞նչ է սա բացահայտում մարդկային ճանաչողության ճարտարապետության մասին:

3. Երիկամների քաղցկեղի քարտեզը ցույց տվեց, որ և՛ ամենաբարձր, և՛ ամենացածր քաղցկեղի ցուցանիշները հանդիպում են փոքր, գյուղական վարչաշրջաններում: Ինչպե՞ս կմոտենար սրան վիճակագրության մեջ վերապատրաստված հանրային առողջապահության պաշտոնյան՝ ի տարբերություն չվերապատրաստվածի:

4. Գիգերենցերը պնդում է, որ տեղեկատվության ներկայացումը որպես բնական հաճախականություններ (տոկոսների փոխարեն) կտրուկ բարելավում է դատողությունը: Ինչո՞ւ մեր միտքը կարող է ավելի լավ ընկալել «10-ը 1000-ից», քան «1%»-ը:

5. Եթե այս շեղումն ադապտիվ էր նախնադարյան միջավայրերում, ի՞նչ է դա հուշում այն մասին, թե ինչպես մենք պետք է մոտենանք դրան՝ որպես վերացնելո՞ւ բան, թե՞ նպատակահարմար ուղղորդելու: