MMarketingWiki
keretrendszer vázlat

Mikor bízz a szakértői intuícióban (és mikor a képletben)

Más névenwhen to trust intuition, expert intuition, szakértői intuíció, conditions for intuitive expertise, illusion of validity, az érvényesség illúziója, illusion of skill, Gary Klein, recognition-primed decision, RPD, wicked environment, Meehl, clinical vs statistical prediction, broken leg rule, Apgar, Dawes, Lew Goldberg, Man versus Model of Man, Oregon Research Institute, Daryl Morey, Moneyball, Don Redelmeier

Kahneman és Gary Klein — a "naturalisztikus döntéshozatal" iskolájának vezetője, aki kifejezetten ellenséges a torzítás-irodalommal szemben — hét-nyolc éven át tartó "ellenséges együttműködésben" próbálta megválaszolni: mikor bízhatunk egy tapasztalt szakemberben, aki azt állítja, hogy megérzése van? A közös cikk címe magáért beszél: "Conditions for Intuitive Expertise: A Failure to Disagree."

Ez a wiki market-research-limits, the-real-why és design-sprint oldalainak a hiányzó döntési szabálya: mikor nyer a marketinges megérzése, és mikor a teszt.

A két feltétel

A szakértői intuíció akkor és csak akkor megbízható, ha mindkettő teljesül:

  1. A környezet elég szabályos ahhoz, hogy megjósolható legyen.
  2. Volt lehetőség megtanulni ezt a szabályosságot hosszú gyakorlással, gyors és egyértelmű visszajelzés mellett.

Simon definíciója, amit Kahneman a könyv elején és végén is idéz:

"A helyzet jelzést adott; a jelzés hozzáférést adott a szakértőnek a memóriában tárolt információhoz; és az információ megadta a választ. Az intuíció nem több és nem kevesebb, mint felismerés."

Ami ebből következik és fáj: ha a környezetben nincs stabil szabályosság, akkor a magabiztos megérzés nem szakértelem, hanem helyettesítés — az 1. rendszer könnyebb kérdést válaszolt meg. "Az intuícióban nem lehet megbízni, ha a környezetben nincsenek stabil szabályosságok."

A táblázat, amit érdemes kinyomtatni

Szabályos környezet Szabálytalan / nulla érvényességű környezet
Gyors, egyértelmű visszajelzés Bízz az intuícióban. Sakknagymester, tűzoltóparancsnok, aneszteziológus, gyakorlott gépjárművezető, tapasztalt szövegíró a saját formátumában, értékesítő a saját ügyfélkörében. Ritka kombináció.
Lassú, ritka, kétértelmű vagy nulla visszajelzés Óvatosan. Radiológus (nem tudja meg, mit nézett be), hajókormányos, pszichoterapeuta a hosszú távú kimenetről. Az intuíció itt részleges: rövid távon jó, hosszú távon nem. Ne bízz benne. Tőzsdei részvényválogatás, hosszú távú politikai jóslat, klinikai prognózis, "ez a kampány be fog jönni", "ez a startup nyerni fog".

Hogarth "gonosz" (wicked) környezete a legrosszabb eset: a visszajelzés rossz leckét tanít. A 20. század eleji orvos, aki megtapintotta a tífuszgyanús betegek nyelvét kézmosás nélkül, kiváló találati arányt ért el a jóslataiban — mert ő okozta a fertőzést. Rendíthetetlen hite lett a klinikai tévedhetetlenségében.

És a legfontosabb tétel, amiben Kahneman és Klein végül egyetértett:

"A magabiztosság, amelyet az emberek az intuíciójuk iránt éreznek, nem megbízható jelzője az intuíció érvényességének. Vagyis: ne bízz senkiben — magadban sem —, hogy megmondja, mennyire bízhatsz az ítéletében."

Az érvényesség illúziója: a három kanonikus adat

1. A fal-feladat (Kahneman izraeli hadseregbeli munkája). A tisztjelöltek egy rönkkel másztak át egy falon, és az értékelők teljes magabiztossággal rangsorolták őket. A tiszti iskolából visszaérkező visszajelzés mindig ugyanaz volt: "az előrejelző képességünk elhanyagolható volt." És — ez a lényeg — ennek a tudása nulla hatással volt a magabiztosságukra. Másnap jött a következő csoport, felemelték a rönköt, és néhány perc múlva megint "látszott a valódi természetük". Kahneman ekkor találta ki a fogalmat: az érvényesség illúziója.

2. Odean adata az egyéni befektetőkről. 10 000 számla, hét év, közel 163 000 tranzakció. Minden olyan esetben, amikor egy befektető eladott egy részvényt és mást vett, összevetették a következő év hozamát: az eladott részvény átlagosan 3,2 százalékponttal jobban teljesített a vettnél — a tranzakciós költségeken felül. "A legtöbb egyéni befektetőnek jobb politika lett volna lezuhanyozni és nem csinálni semmit."

3. A 25 vagyonkezelő 8 éve. Kahneman egy vagyonkezelő cégtől megkapta 25 tanácsadó teljesítményét nyolc egymást követő évre — azt az adatot, ami az éves bónuszukat meghatározta. Kiszámolta a 28 páronkénti korrelációt az évek rangsorai között. Az átlag 0,01. Vagyis nulla. A cég a szerencsét jutalmazta, mintha szakértelem lenne. A vacsorán a vezetőség nem hitetlenkedett — egyszerűen nem vették be: "nekem nagyon jól ment a cégnek, és ezt senki nem veheti el tőlem." Kahneman: "Én épp ma reggel elvettem."

A képlet veri a szakértőt (Meehl)

Paul Meehl "nyugtalanító kis könyve" (1954) óta kb. 200 összehasonlítás készült szakértői ítélet és egyszerű statisztikai szabály között:

  • ~60%-ban a képlet szignifikánsan pontosabb. A többi döntetlen — ami a képlet győzelme, mert olcsóbb. Meggyőző ellenpélda nincs.
  • Az ok nem a szakértő tudatlansága, hanem az inkonzisztenciája. Tapasztalt radiológusok 20%-ban mondanak mást ugyanarra a mellkasröntgenre, ha másodszor látják. 41 vizsgálat auditorokról, patológusokról, pszichológusokról és menedzserekről ugyanezt mutatja — akár percekkel későbbi újraértékelésnél is. "A megbízhatatlan ítélet semminek nem lehet érvényes előrejelzője." A képletnek ez a fő előnye: ugyanaz a bemenet, mindig ugyanaz a kimenet.
  • Dawes: az egyenlő súlyozás veri a regressziót. Nem kell optimalizált modell. Válassz ki néhány olyan mutatót, aminek van némi érvényessége, standardizáld őket, és add össze egyenlő súllyal — ez rendszerint ugyanolyan jó, mint a többszörös regresszió, sőt gyakran jobb, mert nem illeszkedik túl a mintavételi zajra. Dawes emlékezetes példája a házassági stabilitásra: szeretkezések gyakorisága mínusz veszekedések gyakorisága (ne legyen negatív).
  • Két klasszikus alkalmazás: az Apgar-pontszám (Virginia Apgar, 1953 — öt változó, 0-1-2 pont, egy perccel a születés után) százezrek életét mentette meg azzal, hogy a szülőszobában egységes kritériumot adott a klinikai megérzés helyett. Ashenfelter bordeaux-i borképlete (nyári átlaghőmérséklet + szüreti eső + előző téli csapadék): a korreláció a jóslat és a tényleges ár között 0,90 felett — pontosabb, mint a fiatal borok aktuális ára.
  • "Broken-leg rule". A képletet felülírni csak akkor szabad, ha van olyan információd, ami ritka és döntő (a jósolt személy ma eltörte a lábát). A gyakorlatban a legtöbben állandóan törött lábakat találnak ki. Több vizsgálat mutatja, hogy az emberi döntéshozó akkor is rosszabb, ha megkapja a képlet eredményét és felülbírálhatja.

Az ellenállás okai és etikája. A klinikai módszert a képviselői "dinamikusnak, holisztikusnak, mélynek, valódinak" nevezik, a statisztikait "mechanikusnak, atomisztikusnak, halottnak, áltudományosnak". Kahneman és Meehl válasza: etikátlan intuitív ítéletre hagyatkozni fontos döntésben, ha van olyan algoritmus, amely kevesebb hibát vét. A pszichológiai valóság viszont az, hogy egy algoritmus által okozott hiba érzelmileg felháborítóbb, mint ugyanaz a hiba emberi kéztől.

Kahneman felvételi eljárása — a wiki legkonkrétabb recepje

Kahneman huszonegy évesen tervezte az izraeli hadsereg interjúrendszerét, és a mai napig ez a legjobb rövid protokoll, amit a könyv ad. Tegyük fel, hogy értékesítőt veszel fel:

  1. Válassz ki néhány jellemzőt, ami előfeltétele a sikernek (szakmai felkészültség, kitartás, megbízhatóság, …). Ne vidd túlzásba: hat dimenzió jó szám. Legyenek a lehető legfüggetlenebbek egymástól, és olyanok, amelyeket tényszerű kérdésekkel meg tudsz bízhatóan ítélni.
  2. Írj minden jellemzőhöz néhány konkrét, múltbeli tényre kérdező kérdést (hány munkahelye volt; milyen rendszeresen és pontosan végezte a munkáját; milyen gyakran találkozik barátokkal), és határozd meg előre az 1-5 skálát — mit jelent a "nagyon gyenge" és a "nagyon erős".
  3. Egyszerre egy jellemző. Végig minden kérdést az első dimenzióról, pontozd, csak utána a következő. Ne ugrálj. Ez a halo-hatás elleni védelem → system-1-and-system-2.
  4. Add össze a hat pontszámot, és előre kösd magad: a legmagasabb összpontszámú jelöltet veszed fel, még akkor is, ha valaki mást jobban kedvelsz. "Állj ellen a vágynak, hogy törött lábakat találj ki a rangsor megváltoztatására."

A meglepetés, amit Kahneman maga se várt. Az interjúztatók fellázadtak ("robotokat csinál belőlünk!"), ezért kompromisszumot kötött: a hat pontozás után becsukhatták a szemüket, elképzelhették a jelöltet katonaként, és adhattak egy globális 1-5-öst. Ez a "csukd be a szemed" pontszám ugyanolyan jól jósolt, mint a hat pontszám összege — és Kahneman ugyanakkora súlyt adott neki.

"Az intuíció akkor is hozzáad értéket, ha a jogosan lenézett kiválasztási interjúról van szó — de csak a tényszerű információ fegyelmezett összegyűjtése és a különálló jellemzők fegyelmezett pontozása UTÁN. Az általánosabb tanulság: ne bízz vakon az intuitív ítéletben — sem a sajátodban, sem a másokéban —, de ne is vesd el."

A történet záró képe: negyvenöt évvel később Kahneman visszalátogatott a saját egykori egységébe, ahol az eljárás lényegében változatlanul futott. A parancsnok a végén hozzátette: "Aztán azt mondjuk nekik: csukd be a szemed."

Alkalmazás a marketingben

Helyzet Bízz az intuícióban? Miért
Egy szövegíró a saját formátumában, ahol napi A/B-visszajelzést kap Igen Szabályos környezet + gyors visszajelzés
Értékesítő, aki ismeri a saját ügyfélkörét, a hívás közbeni reakciót olvassa Igen, rövid távra Azonnali visszajelzés a beszélgetésről; de a lezárási valószínűség becslése már nem
"Ez a kreatív be fog jönni" egy új kategóriában Nem Nincs stabil szabályosság; ezért kell teszt → prototype-testing, five-user-test
"Ez a jelölt jó lesz" Csak a strukturált pontozás után A fenti eljárás
"Ez a piac 200 millió dolláros" Nem Nulla érvényességű környezet → planning-fallacy, opportunity-assessment
"Ez a termék nem fog tetszeni a vevőnek" Nem Knapp adata: a szakértő rosszul jósolja a reakciót → market-research-limits
A brief értékelése ("ez zavaros") Igen A zavart észlelni gyakorolt, azonnal ellenőrizhető készség

Feszültségek

  • Klein vs. Kahneman: mi maradt a nézeteltérésből? Nem tétel, hanem hangsúly és temperamentum. Klein azokkal dolgozott, akiknek valódi szakértelmük van (tűzoltóparancsnok, gyermekgyógyász nővér), Kahneman azokkal, akiknek nincs (klinikus prognózis, tőzsde, politikai jóslat). Klein összerezzen a "torzítás" szóra és élvezi azokat a történeteket, ahol az algoritmus abszurd döntést hoz; Kahneman az algoritmus hibáit javítási lehetőségnek látja és élvezi, amikor az arrogáns szakértő megbukik. Érdemi kérdésben nem maradt vitájuk.
  • Gigerenzer (gerd-gigerenzer). A két feltétel lényegében Gigerenzer ökológiai racionalitása: a heurisztika a hozzá illő környezetben jó. A vita nem arról szól, működnek-e a heurisztikák, hanem hogy a tipikus modern döntési környezet szabályos-e. Erre Kahneman és Gigerenzer eltérő választ ad, de a kritérium ugyanaz → system-1-and-system-2.
  • Taleb (epistemic-arrogance, forecasting-limits). Taleb ugyanezt a határvonalat húzza meg más szótárral: van szakértő "azokban a dolgokban, amelyek nem mozognak" (sakk, orvosi diagnózis, fizika), és nincs "azokban, amelyek mozognak" (gazdaság, politika, piac). Taleb erősebb következtetést von le: ezekben nem óvatosnak kell lenni, hanem strukturálisan kell felkészülni a hibára → barbell-strategy, robustness-and-redundancy.
  • Knapp (design-sprint, five-user-test). A sprint pontosan azért működik, mert visszajelzési hurkot gyárt oda, ahol nem volt: nem a szakértő intuícióját javítja, hanem öt nap alatt valódi reakciót szerez. A Kahneman-kritérium megadja, miért: szabályosság nélkül csak a mérés marad.
  • Módszertani. A Meehl-vonal a könyv legerősebben megalapozott része: ~200 független vizsgálat, hatvan év, minden területen ugyanaz az irány. Az Odean-adat 163 000 valós tranzakció. A vagyonkezelő-korreláció egyetlen cég nyolc éve (n=25) — illusztratív, de a mutual fund-irodalom (50+ év) ugyanezt mutatja. A "csukd be a szemed" eredmény egyetlen, több száz fős katonai vizsgálat, replikáció nélkül idézve → replication-crisis.

Az eredeti források (The Undoing Project, beolvasva 2026-09-14)

A fenti tételek eddig a thinking-fast-and-slow összefoglalóin keresztül szerepeltek itt. A the-undoing-project három ponton adja meg az eredeti kísérleteket — és két modern esettanulmányt, amelyek a wikiben eddig nem szerepeltek.

1. A falfeladat és a "Kahneman-pontszám" primer változata (1955). A részletes leírás a daniel-kahneman életrajzi szakaszában áll. A lényeg, ami a fenti receptet igazolja: a hat dimenzió nem elméletből jött ("Nem vezettem le semmiből. Csak kitaláltam. Egy profinak évekbe telt volna, előtesztekkel, változatokkal — de én nem tudtam, hogy ez nehéz."), és a rendszer mégis hetven éve fut. A Thorndike-hivatkozás (1915) a halo-hatásra Kahneman saját forrása volt; Thorndike amerikai tiszteket kérdezett, és azt találta, hogy a "fizikum" értékelése átszínezi az "intelligenciáét" — "nyilvánvaló, hogy az általános érdem glóriája kiterjed és befolyásolja a részképesség értékelését, vagy fordítva."

2. Az Oregon Research Institute gyomorfekély-kísérlete (1968-70) — a Meehl-tétel legerősebb egyetlen demonstrációja. Lew Goldberg és munkatársai megkérdeztek radiológusokat, milyen hét "jel" alapján döntik el egy gyomorfekélyről, hogy rosszindulatú-e. Ebből építettek egy egyenlő súlyozású, egyszerű lineáris modellt — kifejezetten kiindulópontnak szánva, amit majd bonyolítani kell. Aztán 96 fekélyt ítéltettek meg az orvosokkal hétfokú skálán, mindegyiket kétszer, véletlenszerűen keverve a paklit. Négy eredmény:

  • (a) Az egyszerű modell kiválóan előrejelezte az orvosok ítéletét — a "finom, összetett klinikai gondolkodás" leírható volt hét, egyenlően súlyozott jellel.
  • (b) Az orvosok nem értettek egyet egymással.
  • (c) Egyetlen orvos sem értett egyet önmagával: mindegyik más diagnózist adott ugyanarra a fekélyre másodszorra. (Goldberg jellemzése az eredményről: "általánosságban rémisztő.")
  • (d) És a legfontosabb: a modell verte az orvosokat — még a legjobb orvost is. "Ha tudni akartad, rákos vagy-e, jobban jártál a kutatók által épített algoritmussal, mint ha megkérted volna a radiológust, hogy nézze meg a röntgent."

A magyarázat nem a tudás hiánya: az orvosoknak volt elméletük arról, hogyan kell diagnosztizálni; csak nem tartották magukat a saját elméletükhöz. "A klinikus nem gép. Birtokolja az emberi tanulás és hipotézisalkotás minden képességét, de hiányzik belőle a gép megbízhatósága. Vannak napjai." → a "Man versus Model of Man" (1970) cikk. Marketinges fordítás: ha a kreatív- vagy médiaértékelésedhez van kritériumlistád, akkor az összeadott pontszám rendszeresen jobb lesz, mint a szobában kialakuló összbenyomás — nem azért, mert a szoba nem tud eleget, hanem mert nem konzisztens.

Egy figyelmeztetés ugyaninnen: Goldberg és Rorer azonnali visszajelzést adott egy pszichológuscsoportnak több ezer eseten — és nem javultak. "A kimeneti visszajelzésnél sokkal több kell ahhoz, hogy valaki megtanuljon egy ilyen nehéz feladatot."replication-crisis nem érinti; ez az eredmény azt mutatja, hogy a visszajelzés önmagában nem elég — a fenti két feltételből a környezet szabályossága nem pótolható.

3. Daryl Morey és a Houston Rockets — mi történik, amikor a modell ütközik a szakértővel. Morey 2006-ban került az NBA-be "Moneyball-típusként". A tanulságsora a wiki szempontjából ritka: egy adatvezérelt rendszer valós kudarcainak dokumentációja.

Amit a modell rontott el Amit Morey tanult belőle
Joey Dorsey (2008, 25. pick) — "model superstar", teljes bukás A kor súlyát alulbecsülte: Dorsey 24 éves volt az egyetemi statisztikái idején. A kor és az ellenfél erőssége szerinti súlyozás bevezetése az egész adatbázison javított
DeAndre Jordan (2008, 35. pick) — a modell kizárta, All-Star lett Egy évet játszott rosszul az egyetemen, mert szándékosan nem próbálkozott. "Hogyan jósolhatná meg bármely modell annak a játékosnak a jövőjét, aki szándékosan bukott meg?" Ezt a szkaut látta, a modell nem
Marc Gasol (2007, 48. pick) — a stáb "Man Boobs"-nak csúfolta egy fotó alapján, Morey nem mert szembemenni velük; két szeres All-Star lett "Aznap új szabályt hoztam: betiltottam a beceneveket." A címke megváltoztatja az értékeléstreframing, brand-naming
Jeremy Lin (2010) — a modell a 15. helyre tette, a szem nem hitte el Egy évvel később bevezették az első két lépés sebességének mérését: Lin volt a leggyorsabb a mért játékosok közül. "A valóság az, hogy minden egyes rohadt ember, engem is beleértve, atlétikátlannak gondolta. És nem tudok más okot elképzelni, mint hogy ázsiai volt."
Kyle Lowry-csere (2012) — majdnem visszautasították, amíg valaki ki nem mondta: "Ha nálunk lenne a pick, és ők ajánlanák érte Lowryt, eszünkbe sem jutna elfogadni" Felismerte a birtoklási hatást (endowment-effect); azóta a draft előtt minden saját játékosuknak megállapítják a pick-értékét

Morey módszertani szabályai, amelyek közvetlenül átemelhetők marketingszervezetbe: - Állásinterjún a szkautoktól azt kérdezi: "Kit néztél be?" "Ha nem tud egy jó példát mondani, akkor kösz, nem." — a kalibrált bizonytalanság a felvételi kritérium. - A privát edzéseket meg kell nézni, de alacsony súllyal. Egy szkaut könyörgött neki, hogy szüntessék meg őket: "Danny, én már nem bírom. Ne csináljuk többet." Morey: "Olyan, mint egy crackfüggő. Nem kerülhet a közelébe anélkül, hogy ne ártson neki."market-research-limits - Tiltotta az azonos rasszon belüli összehasonlítást, mert a felszíni hasonlóság elnyomta az adatot. "Ha átkényszeríted az embereket a faji határon, egyszerűen nem látják az analógiát."representativeness-and-base-rates - Az egyik legjobb definíció, amit a wiki a témában talált: "a nerd az az ember, aki elég jól ismeri a saját elméjét ahhoz, hogy ne bízzon benne."

4. Don Redelmeier és a Sunnybrook — a szerepkör, amit érdemes átvenni. A torontói traumaközpont külön embert tart azért, hogy a többiek gondolkodását ellenőrizze. "Nincs kimondva, de elfogadott, hogy ő ellenőrzi a többiek mentális hibáit." Redelmeier maga az eljárását is megtervezi a saját hibái ellen: jegyzettömb mindenhova; éjszakai hívásnál azt hazudja, hogy rossz a vonal, hogy a rezidens megismételje mindent ("nem mondhatod egy rezidensnek, hogy túl gyorsan beszél — magadat hibáztatod, és az mindkettőnk gondolkodását segíti"); konyhai időzítő a látogatóknál; előadás előtt végigjárja a termet. A "lassíts és ellenőrizd a gondolkodásod" beavatkozás pontja ott van, ahol egy egyszerű diagnózis gyönyörűen megmagyaráz mindent.representativeness-and-base-rates

Kapcsolódó

epistemic-arrogance · market-research-limits · planning-fallacy · reference-class-forecasting · regression-to-the-mean · system-1-and-system-2 · advertising-research-methods · five-user-test · prototype-testing · forecasting-limits · gerd-gigerenzer · herbert-simon · daniel-kahneman · amos-tversky · endowment-effect · counterfactual-thinking · thinking-fast-and-slow · the-undoing-project · luck-vs-skill · belief-calibration · resulting-and-outcome-bias · annie-duke · thinking-in-bets · ludic-fallacy


A póker mint az érvényes intuíció tankönyvi esete — és miért nem marketing (beolvasva 2026-09-14)

Ez a kiegészítés a wiki egyik legfontosabb forráskritikai pontja, mert egy egész könyv általánosításának a határát jelöli ki.

annie-duke (thinking-in-bets) egész módszertana pókerből jön, és a póker a fenti két feltételt kivételesen jól teljesíti:

Kahneman feltétele Póker Marketing
Kellően szabályos, kiszámítható környezet Igen. Zárt szabályrendszer, 52 lap, kiszámolható esélyek. Nem. Nyílt rendszer, versenytársak, algoritmusváltozás, makró, kultúra.
Hosszú gyakorlás gyors, egyértelmű visszacsatolással Igen. ~30 leosztás/óra, leosztásonként akár 20 döntés, azonnali pénzügyi kimenet. Nem. Hónapos hurok, zajos mérés, sok konfundáló változó, kevés ismétlés.

Duke maga is megnevezi ezt a különbséget (a "sakk vs. póker" kettősséggel), de nem építi be a tanácsaiba: az eszközöket úgy kínálja, mintha a póker-szintű hurok mindenhol rendelkezésre állna. Két következmény:

  1. Ami átvihető: a fogalmi keret és a folyamat-fegyelem — a kimenet és a döntés szétválasztása (resulting-and-outcome-bias), az előre rögzített indoklás és valószínűség (belief-calibration), a kimenet-vak véleményezés (truthseeking-pod), a premortem (premortem-and-backcasting). Ezek nem intuíció-fejlesztők, hanem az intuíció megkerülői, tehát pont ott működnek, ahol a két feltétel hiányzik.
  2. Ami nem vihető át: a "kalibrált marketing-intuíció" mint szakértelem. Aki azt mondja, hogy évek gyakorlata után "megérzi", melyik kreatív fog működni, ugyanabban a helyzetben van, mint Meehl klinikusai — és a fenti táblázat szerint a visszacsatolás hiánya miatt nem is tudta megtanulni. Ez epistemic-arrogance, nem szakértelem.

Taleb hozzáadása (ludic-fallacy): a pókerben ismerjük az eloszlást, ezért a számszerű valószínűség értelmes. Az üzletben nem ismerjük — a kimondott százalék ott csak akkor informatív, ha van referenciaosztály (reference-class-forecasting); a negyedik negyedben (fourth-quadrant) hamis pontosság.