Resulting: a döntés minősége ≠ a kimenet minősége

Definíció. A resulting (pókerzsargon; a szakirodalomban outcome bias, kimenet-torzítás) az a hiba, amikor egy döntés minőségét kizárólag abból ítéljük meg, hogyan sült el. Rossz kimenet → "rossz döntés volt"; jó kimenet → "jó döntés volt". (annie-duke, thinking-in-bets, ch. 1)

A kapcsolt torzítás a hindsight bias: miután ismerjük a kimenetet, elkerülhetetlennek látjuk ("tudnom kellett volna"). A resulting a döntés megítélését rontja el, a hindsight a tudásunk emlékét — együtt dolgoznak.

Miért hiba. A kimenet = döntésminőség + szerencse (luck-vs-skill). Ha a szerencse hozzájárulása nem nulla, akkor egyetlen kimenet statisztikailag értéktelen jel a döntés minőségéről. Egy n = 1 mintából nem lehet visszakövetkeztetni a folyamatra. Duke képe: aki részegen hazaér baj nélkül, nem vezetett jól. "He decided he drove better when he was drunk."

Miért számít marketingben — ez a wiki mérés-anyagának hiányzó darabja

A marketing mérési oldala eddig a mit mérünk kérdését tárgyalta (input-output-outcome-metrics, goodharts-law). A resulting a hogyan ítélünk kérdése, és ez a drágább hiba, mert a szervezet tanulási hurkát rontja el:

• Egy kampány bukása nem bizonyítja, hogy rossz volt a döntés — és a siker sem, hogy jó. A kreatív, a médiaterv, a pozicionálás mind valószínűségi fogadás egy bizonytalan piacra; a kimenet a fogadás és a piac zaja együtt.
• A kimenet szerinti számonkérés kockázatkerülő viselkedést termel: biztonságos médiaterv, bevált kreatív, nagy ügynökség — pontosan az a viselkedés, amit Kahneman az orvosoknál mért a műhibaperek terjedése után (több felesleges teszt, több beutaló, konvencionális kezelés akkor is, amikor nem segít). → a részletes adat: narrative-fallacy "Kahneman kiegészítése".
• És fordítva: a szerencsés, felelőtlen kockázatvállalót soha nem büntetik. Aki egy viralra fogadott és bejött, "zseni"; aki tíz hasonlóra fogadott és mind megbukott, nincs a mintában → silent-evidence.
• A kimenet szerinti ítélet a regressziót is okságként olvassa: a kiugró negyedév utáni visszaesés "a kampány hibája", pedig statisztikai szükségszerűség → regression-to-the-mean.

Bizonyítékok

• Pete Carroll, Super Bowl XLIX (2015). A passz-döntés: az adott szezonban 66 passz ment az ellenfél 1 yardos vonaláról, ebből nulla lett interception (15 szezon átlaga ~2%), és a passz három támadást adott volna kettő helyett, mert az incomplete megállítja az órát. A sajtó egyöntetűen "a történelem legrosszabb taktikai döntésének" nevezte. Duke gondolatkísérlete: ha a passz gólpassz, a főcím "Carroll Outsmarts Belichick". Carroll maga: "It was the worst result of a call ever." (thinking-in-bets, ch. 1, 6)
• Kahneman kísérleti száma (Duluth-híd). Ugyanaz a döntési helyzet, csak a döntés idején elérhető információval: 24% mondta, hogy fel kellett volna venni a hídfelügyelőt. Akik megtudták, hogy árvízkár lett belőle: 56% — annak ellenére, hogy kifejezetten kérték őket, hogy ne hagyják magukat befolyásolni. (thinking-fast-and-slow, 19. fej.; a teljes kifejtés: narrative-fallacy)
• Fischhoff hindsight-kísérlete (1972). Nixon kínai és szovjet útja előtt megbecsültetett esélyek; utána ugyanazoktól az emberektől a saját korábbi becslésük felidézése. Aki bekövetkezett eseményről beszélt, felfelé torzította az emlékét — sokan el sem hitték, hogy valaha mást gondoltak.
• A vezérigazgató esete (thinking-in-bets, ch. 1, 5, 6). Kirúgta az elnökét versenytárs-benchmark, vezetői coach és a poszt kettéosztásának mérlegelése után; a csere rosszul sült el, és ettől "élete legrosszabb döntésének" nevezte. A tanácsadói csoport, miután a kimenet nélkül hallotta a folyamatot, egyhangúlag jó döntésnek találta.
• Feynman a fizikáról. Ha az adatelemző tudja vagy csak megsejti a tesztelt hipotézist, az elemzés valószínűbben támasztja alá azt. A részecskefizikában és kozmológiában ezért terjedt el a kimenet-vak elemzés (MacCoun–Perlmutter, Nature, 2015), ahol "gyakran ez az egyetlen módja annak, hogy sok eredményben meg lehessen bízni". (thinking-in-bets, ch. 5)
• Az ágazat, ahol a torzítás a legkegyetlenebb: a megbízottként eljáró döntéshozó — orvos, pénzügyi tanácsadó, diplomata, ügynökség, márkamenedzser. Kahneman: "a kliens gyakran azt veti a szemükre, hogy nem látták a falra írt jeleket — elfelejtve, hogy láthatatlan tintával volt írva."

Hogyan alkalmazd

1. Vezess döntési naplót — előre. A brief jóváhagyásakor írd le egy oldalban: mit tudsz, mit nem, milyen alternatívákat vetettél el és miért, milyen kimenetekre milyen esélyt adsz (→ belief-calibration), és mi bizonyítaná, hogy tévedtél. Utólag írva a szöveg már át van írva a hindsight által. Ez narrow-framing "dumb principal" pontjának a párja.
2. Kérj tanácsot kimenet nélkül. Ha egy kampányt vagy ajánlatot véleményeztetsz, ne mondd el, hogyan sült el (vagy hogy mit gondolsz róla), amíg a másik meg nem szólalt. Duke pókercsoportjának alapszabálya; Feynman fizikai változata a kimenet-vak elemzés. → truthseeking-pod
3. Értékeld a döntést, mielőtt megjön az eredmény. Az ügyvéd az ítélet előtt, az értékesítő a lezárás előtt, a marketinges a kampány indulása után, de az első riport előtt. Ez a legolcsóbb kimenet-vakság: a jövő még nem szennyezte be az ítéletet.
4. Külön kérdés: "jó volt-e a döntés?" és "jó lett-e az eredmény?". A post-mortem sablonba tedd be mindkettőt külön szekcióként, és tiltsd meg, hogy a második válasza átfolyjon az elsőbe.
5. Mentsd meg a levágott ágakat. A döntés előtt felrajzolt forgatókönyveket és valószínűségeket őrizd meg a kampány után is. Duke képe: a jelen láncfűrészként vágja le a meg nem valósult ágakat, és ami marad, az elkerülhetetlennek látszik. → premortem-and-backcasting
6. A mutatórendszerben: a folyamatmutatók (input) értékelhetők azonnal és tisztán, a kimenetmutatók (outcome) csak zajjal és késleltetve. Ha a bónusz a kimeneten van, resultingot fizetsz ki → input-output-outcome-metrics, goodharts-law.

Feszültségek

• Duke vs. a marketinges valóság — ez a legfontosabb fenntartás. Duke a resultinget a pókerből általánosítja, ahol a döntés és a visszacsatolás másodpercekre van egymástól, és ezer leosztás után a szerencse kiátlagolódik. A marketingben a hurok hónapos, zajos, és ritkán fut le elégszer ahhoz, hogy a "hosszú táv" megérkezzen. Következmény: a "ne a kimenet alapján ítélj" tanács marketingben nehezebben visszaellenőrizhető, és könnyen ürüggyé válhat ("nem rossz volt a döntés, csak pechünk volt"). A wiki álláspontja: a resulting elleni védekezés csak akkor hiteles, ha előre rögzített döntési naplóval és kimondott valószínűségekkel jár — különben utólagos mentség. → when-to-trust-intuition, epistemic-arrogance
• Taleb (the-black-swan) ellenvetése. Ha az eloszlás ismeretlen (negyedik negyed, fourth-quadrant), akkor nemcsak a kimenetből nem lehet a döntésre következtetni, hanem a döntés minősége sem értékelhető valószínűségi kalkulussal. Ott a helyes kérdés nem "jó volt-e a fogadás?", hanem "elviselhető-e a kitettség, ha rosszul sül el?" → asymmetric-payoffs, barbell-strategy
• Ellentétes szervezeti kockázat. A folyamat védelme visszaélésre alkalmas: aki minden kudarcot "jó döntés, rossz szerencse" címkével lát el, ugyanazt a hibát követi el, mint aki mindent a kimenet alapján ítél — csak a másik irányban (luck-vs-skill, self-serving bias). Duke szerint ezért kell a besorolást is fogadásként kezelni, és csoportnak ellenőriznie.
• A kimenet nem teljesen értéktelen jel. Sok ismétlésnél a kimenetek eloszlása igenis informatív — ez a különbség a Mediocristan és az Extremistan típusú marketingtevékenységek között (extremistan-vs-mediocristan). Egy A/B teszt vagy egy direkt válaszlevél kimenete elég nagy mintán tanulságos; egy pozicionálási döntésé soha.

Housel: az aszimmetria a saját és a mások kudarcának megítélésében (beolvasva 2026-09-14)

the-psychology-of-money (ch. 4) ugyanazt a torzítást írja le, mint Duke, de egy fokkal élesebben fogalmazza meg az aszimmetriát:

"Someone else's failure is usually attributed to bad decisions, while your own failures are usually chalked up to the dark side of risk. When judging your failures I'm likely to prefer a clean and simple story of cause and effect, because I don't know what's going on inside your head. But when judging myself I can make up a wild narrative justifying my past decisions and attributing bad outcomes to risk." (morgan-housel, ch. 4)

A rendszerszintű változat: a Forbes-címlap. "The cover of Forbes magazine does not celebrate poor investors who made good decisions but happened to experience the unfortunate side of risk. But it almost certainly celebrates rich investors who made OK or even reckless decisions and happened to get lucky. Both flipped the same coin." Marketinges megfelelője: a szakmai díjak, a "kampány of the year" listák és az esettanulmányok kimenet szerint válogatnak, nem döntésminőség szerint — és ezzel a rossz döntés is átöröklődik, ha nyert → silent-evidence, advertising-research-methods.

A saját döntés próbája, Housel formájában. "Say I buy a stock, and five years later it's gone nowhere. It's possible that I made a bad decision… It's also possible that I made a good decision that had an 80% chance of making money, and I just happened to end up on the side of the unfortunate 20%. How do I know which is which?" — és a válasza őszintébb, mint a szokásos tanácsadói: "It's possible to statistically measure whether some decisions were wise. But in the real world, day to day, we simply don't. It's too hard." Ez fontos korlátozás a wiki eddigi optimizmusához képest: a döntés/kimenet szétválasztás elvben helyes, a gyakorlatban ritkán kivitelezhető egyetlen esetre — ezért kell a mintázat (több kampány, több ciklus), nem az egyedi utólagos elemzés → luck-vs-skill, regression-to-the-mean.

Két gyakorlati szabály (ch. 4, 21):

1. "Be careful who you praise and admire. Be careful who you look down upon and wish to avoid becoming." — a mintakép kiválasztása maga is kimenet-torzítás áldozata.
2. "Go out of your way to find humility when things are going right and forgiveness/compassion when they go wrong." — a szervezeti fordítása: a nyertes kampány utáni retrospektív ugyanolyan fontos, mint a bukotté; a legtöbb cég csak a bukottat csinálja meg → truthseeking-pod, premortem-and-backcasting.

Kapcsolódó

luck-vs-skill · belief-calibration · premortem-and-backcasting · truthseeking-pod · tilt-and-decision-interrupts · input-output-outcome-metrics · goodharts-law · silent-evidence · regression-to-the-mean · narrative-fallacy · narrow-framing · planning-fallacy · forecasting-limits · epistemic-arrogance · when-to-trust-intuition · fourth-quadrant · reference-class-forecasting · ludic-fallacy · annie-duke · daniel-kahneman · nassim-taleb · thinking-in-bets · thinking-fast-and-slow · the-black-swan