Thinking in Bets (Annie Duke, 2018)

Tézis

Két dolog dönti el, hogyan alakul az életünk: a döntéseink minősége és a szerencse — és az agyunk szisztematikusan összemossa a kettőt. A rossz kimenetből rossz döntésre következtetünk (resulting), a jóból jó döntésre, és ezzel elrontjuk a tanulási hurkot: a rossz döntést megerősítjük, ha szerencsénk volt, a jót elvetjük, ha nem. annie-duke pókerkerete szerint minden döntés egy fogadás egy bizonytalan jövőre, és a döntéshozó feladata nem az, hogy biztos legyen, hanem hogy megbecsülje, mennyire bizonytalan — és ezt ki is mondja, százalékban. Az élet nem sakk (teljes információ, kevés szerencse), hanem póker (rejtett információ, sok szerencse): von Neumann sem véletlenül a pókerre építette a játékelméletet, nem a sakkra (ch. 1).

A könyv gyakorlati magja hat eszköz: (1) a kimenet és a döntés szétválasztása, (2) a hit kalibrálása százalékban, (3) a kimenetek tudatos besorolása szerencse/tudás vödrökbe, (4) igazságkereső csoport explicit chartával, (5) backcasting + premortem, (6) mentális időutazás (10-10-10, Ulysses-szerződés, tilt-felismerés).

Kulcsgondolatok

• Resulting / kimenet-torzítás — a döntés minősége ≠ a kimenet minősége → resulting-and-outcome-bias
• Szerencse vagy tudás? — a kimenetek besorolása és a self-serving bias → luck-vs-skill
• "Wanna bet?" és a hit kalibrálása — a bizonyosság százalékban kimondva → belief-calibration
• Igazságkereső csoport — charter: pontosság + beszámoltathatóság + nézetsokféleség; CUDOS szabályok → truthseeking-pod
• Backcasting és premortem — a jövő felderítése pozitív és negatív irányban → premortem-and-backcasting
• Tilt, döntés-megszakítók, Ulysses-szerződés → tilt-and-decision-interrupts
• Az élet póker, nem sakk: rejtett információ + szerencse → ludic-fallacy, luck-vs-skill
• "I'm not sure" mint pontosság, nem gyengeség → epistemic-arrogance, forecasting-limits

Nevezetes bizonyítékok és példák

• Pete Carroll, Super Bowl XLIX (2015). 26 másodperc, 4 pont hátrány, labda az 1 yardos vonalon. Carroll passzt kért futás helyett; interception, vereség. Öt főcím nevezte "a történelem legrosszabb taktikai döntésének". Az adat: az adott szezonban 66 passz ment az ellenfél 1 yardos vonaláról, ebből nulla lett interception; az előző 15 szezon átlaga ~2%. A passz három támadást adott volna a kettő helyett (az incomplete megállítja az órát). Carroll maga: "It was the worst result of a call ever." (ch. 1, 6)
• A vezérigazgató, aki kirúgta az elnökét (Duke tanácsadói esete). Végigment a teljes folyamaton — versenytárs-benchmark, vezetői coach, a poszt kettéosztásának mérlegelése, külső tehetségpiac felmérése —, a csere rosszul sült el, és ettől "élete legrosszabb döntésének" minősítette. A csoport egyhangúlag jó döntésnek találta a folyamatot. (ch. 1, 5, 6)
• Gilbert (1991, 1993): a hitformálás sorrendje. Nem halljuk → megvizsgáljuk → elhisszük, hanem halljuk → elhisszük → néha, később, ha van időnk, megvizsgáljuk. Kísérlet: színkóddal "igaz"/"hamis"-nak jelölt állítások; időnyomás vagy kognitív terhelés alatt a hibák nem véletlenszerűek — a kísérleti alanyok a hamisnak jelölt állításokat is igaznak dolgozták fel. (ch. 2)
• Hastorf–Cantril, "They Saw a Game" (1954). Dartmouth–Princeton meccs filmje, ugyanaz a felvétel: a princetoni diákok kétszer annyi durva és háromszor annyi enyhe szabálytalanságot láttak Dartmouth-tól, mint saját csapatuktól; a dartmouthiak egyenlőnek látták. Megismételve 2012-ben ("They Saw a Protest", Kahan, Stanford Law Review) ugyanaz a tüntetés-videó, más címkével → a világnézet döntötte el, mit "láttak". (ch. 2)
• Az okosság rontja a helyzetet. West–Meserve–Stanovich (2012): hét torzításból hatnál a kognitívan fejlettebb résztvevőknek nagyobb volt a bias blind spotja. Kahan: azonos adathalmaz "bőrkrém" címkével → a jobb számolási képesség jobb választ ad; ugyanaz az adat "fegyvertartási tilalom / bűnözés" címkével → a számolásban jobbak követtek el több hibát, a saját politikai oldaluk javára. (ch. 2)
• Self-serving bias számokkal. MacCoun autóbaleseti beszámoló-elemzése: a sérültek 75%-a mást hibáztatott; többjárműves baleseteknél 91%; és egyjárműves baleseteknél is 37% talált valaki mást, akire ráfoghatta. Phil Hellmuth (14 WSOP-karkötő) az ESPN-nek: "If it weren't for luck, I'd win every one." (ch. 3)
• Sunstein fellebbviteli bíró-vizsgálata. 6 000+ szövetségi fellebbezés, közel 20 000 egyéni szavazat. Környezetvédelmi ügyekben a demokrata kinevezettek összesítve 43%-ban szavaztak a felperesre — de csak 10%-ban, ha két republikánus kinevezettel ültek együtt; a republikánus kinevezettek 20% helyett 42%-ban, ha két demokratával. Egyetlen másként gondolkodó "nagy fegyelmező hatást" fejtett ki. (ch. 4)
• Dreber és mtsai: fogadási piac vs. peer review. Ugyanazok a szakértők a Reproducibility Project 44 pszichológiai vizsgálatáról: hagyományos szakértői véleményként 58% találat; pénzzel alátámasztott előrejelzési piacon 71%. → replication-crisis, belief-calibration
• A cukoripar által fizetett 1967-es NEJM-tanulmány (három harvardi kutató), amely a zsírra mutatott és a cukrot felmentette; a konfliktus 2016-ban derült ki (JAMA Internal Medicine). A NEJM 1984-ig nem kért összeférhetetlenségi nyilatkozatot. (ch. 5)
• Oettingen mentális kontrasztolása. Fogyókúra-programban a pozitív fantáziákat szövő nők 24 fonttal kevesebbet fogytak, mint akik a nehézségeket is elképzelték. Megismételve állásra jelentkezőkön, vizsgázó diákokon, csípőprotézis-műtéten átesetteken. (ch. 6)
• Bailenson–Carstensen (Stanford). VR-tükörben a jelenlegi énjüket látó alanyok átlag 73,90 dollárt tettek nyugdíjszámlára 1 000 dollárból; akik az öregített énjüket látták, 178,10 dollárt. (ch. 6)
• Mitchell–Russo–Pennington (1989). A "prospective hindsight" — annak elképzelése, hogy az esemény már megtörtént — 30%-kal javítja a jövőbeli kimenetek okainak helyes azonosítását. Ez a backcasting és a premortem kísérleti alapja. (ch. 6)
• After-School All-Stars. A nonprofit a pályázatait a megpályázott összeg szerint rangsorolta. Duke bevezette a várható értéket: 100 000 $ × 25% = 25 000 $, míg 50 000 $ × 70% = 35 000 $ — a sorrend megfordult. Következmény: reálisabb költségvetés, visszacsatolás a megnyert pályázatokra is, kevesebb resulting. (ch. 6)

Kritikák és korlátok

• A póker nem marketing — és ez a könyv gerinchibája. Duke saját érve szerint a póker azért jó laboratórium, mert gyors, sűrű, azonnali pénzügyi visszacsatolást ad (kb. 30 leosztás/óra, leosztásonként akár 20 döntés). Csakhogy Kahneman két feltétele az intuíció megbízhatóságához pontosan ez: kellően szabályos környezet és hosszú gyakorlás gyors, egyértelmű visszacsatolással (when-to-trust-intuition). A póker zárt szabályrendszerű, ismert eloszlású, azonnali visszajelzésű játék; a márkaépítés, a pozicionálás és a médiaterv egyike sem az. Amit Duke a pókerből általánosít, azt a marketingben a visszacsatolási hurok hiánya sokszorosan nehezebbé teszi: egy kampánydöntés eredménye hónapok múlva, zajos mérésben, sok konfundáló változóval jelentkezik. A könyv ezt a különbséget megnevezi (a "sakk vs. póker" kettősség), de nem építi be: az eszközöket úgy kínálja, mintha a póker-szintű hurok mindenhol rendelkezésre állna.
• Ludikus tévedés (ludic-fallacy). Duke maga is beleesik abba, amit Taleb a pókerkeret legfőbb veszélyének nevez: a pókerben ismerjük az eloszlást (52 lap, kiszámolható esélyek), az üzletben nem. A "76% / 24%" típusú kalibrálás ott működik, ahol van eloszlás; a negyedik negyedben (fourth-quadrant) a kimondott százalék hamis pontosság-érzetet ad. → lásd ## Feszültségek a belief-calibration oldalon.
• Nulla marketinges adat. A könyvben nincs egyetlen kampány-, márka- vagy médiaeset sem. A példák: póker, amerikai futball, baseball, jogi tárgyalások, nyugdíj-megtakarítás, egy nonprofit pályázati portfóliója. A marketinges fordítást a wiki végzi el, nem a forrás.
• Módszertani. Duke gyakorló pókerjátékos, kognitív pszichológiából végzett doktori kurzusokat (disszertáció nélkül, a Penn-en). A könyv másodlagos forrásokra és személyes anekdotákra épít — Kahneman, Gilbert, Tetlock, Haidt, Duhigg, Thaler, Oettingen, Merton —, nem saját mérésre. Semmilyen új kísérlet nincs benne. A póker-történetek n = 1 megfigyelések; a tanácsadói esetek névtelenek és ellenőrizhetetlenek. A hivatkozott kísérletek egy része a replikációs válság gyanús zónájából való (a Reproducibility Project maga is a könyv egyik adata) → replication-crisis.
• A "truthseeking pod" mint szervezeti javaslat nincs tesztelve. Duke a Lerner–Tetlock (2002) csoportelméleti eredményeit és Merton 1942/1973-as normáit ülteti át; a csoport-charter konkrét formája viszont az ő javaslata, mérés nélkül. A vállalati "red team" és "dissent channel" példák (CIA, State Department) valódiak, de az eredményességük nem számszerű.
• A kalibrálás korlátja a gyakorlatban. A könyv nem foglalkozik azzal, mi történik, ha egy szervezetben a százalékos konfidenciát teljesítményértékelésre használják — ekkor a mutató eltorzul (goodharts-law): a szereplők a jól kalibrálhatóra fogadnak, nem a fontosra.

Kinek érdemes elolvasnia

• Marketingvezetőnek és ügynökségi stratégának, akinek a munkáját kimenet szerint értékelik. Ez a könyv adja a legtisztább nyelvet ahhoz, hogy a folyamatot lehessen védeni a számmal szemben — és a fejezetei pontosan az a fegyverzet, amivel egy bukott kampány utáni megbeszélést vezetni lehet.
• Bárkinek, aki briefet ír vagy jóváhagy: a kimondott konfidencia ("80%-on vagyok azon, hogy a fő gát az ismertség, nem az ár") egyetlen mondatban megváltoztatja a brief minőségét.
• Nem való annak, aki adatvezérelt marketing-módszertant keres: nincs benne. Aki a valószínűségi gondolkodás elméleti alapját akarja, jobban jár Kahnemannal (thinking-fast-and-slow) és Talebbel (the-black-swan); Duke ezek gyakorlati desztillátuma, plusz a csoport- és időutazás-eszközök, amelyek egyik előbbiben sincsenek meg.

Chapter map

(A 10–13. rész köszönetnyilvánítás, jegyzetek, bibliográfia és tárgymutató; a 14–25. rész lábjegyzet-töredék és kiadói anyag — nem tartalmaz önálló tartalmat.)

Kapcsolódó

resulting-and-outcome-bias · luck-vs-skill · belief-calibration · truthseeking-pod · premortem-and-backcasting · tilt-and-decision-interrupts · annie-duke · daniel-kahneman · nassim-taleb · jonathan-haidt · thinking-fast-and-slow · the-black-swan · the-righteous-mind · when-to-trust-intuition · fourth-quadrant · reference-class-forecasting · input-output-outcome-metrics · goodharts-law · silent-evidence · regression-to-the-mean · narrative-fallacy · epistemic-arrogance · forecasting-limits · ludic-fallacy · replication-crisis · how-firms-compete