Nate Silver och Prognosen

Wall Street överflödar alltid av Holy Grails - de förutsägelser, strategier, hemliga formler och geniala tolkningar som lovar annan världslig kunskap och rikedom om du bara förtroende . De levereras oftast i investeringsvärlden via en svart låda —Ett slutet system där in- och utgångar är kända, men de interna analytiska funktionerna lämnas högst hemliga, bara för högprästernas konsumtion. Blackbox-positionering går dock långt utöver marknaderna. Det är inte förvånande i en modern, sammankopplad tidsålder att när du tar en väldigt smart kille, rader med datorer, egna formler och kod som bara en smart kille kan se, och sedan lägger till en rad framgångsrika prognoser , boom - du slutar med en nördig, superstjärna som är gjord för sociala medier som plötsligt gör förutsägelse coolt för proletariatet.

Nate Silver är det där kille. Överväga:

• Han kallade framgångsrikt resultaten i 49 av de 50 staterna i USA: s presidentval 2008.
• Han kallade framgångsrikt resultaten i 50 av 50 stater i USA: s presidentval 2012.

Silver blev den smarta siffran över natten. Han gick från expert på baseballstatistik till expert på politisk statistik. Hans matematiska modell för val slog politiska journalister och kommentatorer i sitt eget spel - så går hans Moneyball-för-politik-berättelse. På kort sikt överträffade hans anhängare på Twitter 1 miljon, hans bok blev en bästsäljare och FiveThirtyEight.com blev allestädes närvarande - till och med att erbjuda investeringsinsikter som, Orolig för aktiemarknaden? Vad du än gör, sälj inte.

Men för alla som följde presidentloppet 2016 slog Silvers politiska förutsägelser väggen. Under 2016 publicerade Silver dagliga valodds som hoppade runt som en katt i brand - inte förvånande om din nya guru-status tvingar dig att erbjuda prognoser varje dag i en valcykel i över ett år.

Jag erkänner att konsistens för oss bara dödliga är en frestare - även för högutbildade och välbärgade. En av mina medarbetare, en skicklig affärsman och jag åt lunch för några år tillbaka. Under vårt samtal nämnde han att han hamnade i en mycket välkänd hedgefondbedrägeri (inte Madoff). Jag frågade honom innan han kunde förklara mycket om hans avkastning var positiv varje månad. Han svarade: Varje månad. Senare googlade jag honom och fick reda på att han verkligen hade tappat flera miljoner dollar.

Denna önskan om säkerhet, för förutsägelse finns överallt i det moderna samhället för de uppmärksamma. Sport också? Det kan du ge dig på. Under ett fotbollsmatch på måndagskvällen satte en av annonsörerna, Ron Jaworski, siffror och odds i perspektiv för att spela fotbollsspel: Att spela samtal handlar om sannolikhet, inte säkerhet.

Det låter så lätt att smälta. Men det är inte. Den bristen på säkerhet är så ofta en utlösande faktor för vår djupaste rädsla. David Rock hade ett fantastiskt stycke i Psychology Today som spikade förvirringen:

Vissa delar av redovisning och rådgivning tjänar sina pengar genom att hjälpa chefer att uppleva en uppfattning om ökad säkerhet genom strategisk planering och ”prognoser”. Även om de finansiella marknaderna 2008 återigen visade att framtiden i sig är osäker, är det en sak som är säker att människor kommer att betala mycket pengar för att åtminstone känna sig mindre osäkra. Det beror på att osäkerheten känns för hjärnan som ett hot mot ditt liv.

Det var därför Silver blev så populär - han eliminerade rädslan - eller åtminstone det var berättelsen. Men även killen med alla siffror gick bort från siffrorna. Han erkände i sin mödosamma mea culpa, How I Acted Like a Pundit and Screwed on Donald Trump för att inte använda sina statistiska modeller för Donald Trumps kandidatur. Han använde istället utbildade gissningar, som sprängde hans statistiska-modell-gjorde-mig-så-berömd-du-kan-nu-lita på-jag-är-inte-en-typ-pundit-med-inbyggda-fördomar berättelse Ur vattnet. Ännu värre, hur Silver hade gjort sitt förutsägelser , kunde han i princip säga att han hade rätt oavsett vad som hände. För Silvers anhängare är hans 2016 säkrade prognoser, hans diskutabla matematik , spelar ingen roll:

Titta på Nates rekord. Trump var en uteliggare.

Det var inte tillräckligt historisk data.

Han får mest av dem rätt.

Nates vinnande procentsats är så hög.

Dessa svaga retorter illustrerar en felaktig grund i Silvers strategi. Michael Mauboussin, en av de stora tänkarna inom beslutsfältet inför osäkerhet, utbildar: Det som är slående är att de ledande tänkarna inom olika områden - inklusive hästspel, kasinospel och investeringar - betonar alla samma punkt . Vi kallar det Babe Ruth-effekten: även om Ruth slog mycket, var han en av basebollens största hitters.

Sagt på ett annat sätt: Du vill tänka i termer av förväntat värde. Ändå är det inte ett värdefullt eller användbart sätt att tänka för ett engångsval där båda sidor bokstavligen föreställer sig liv och död. Men det finns ingen säkerhet, ingen garanti - någonsin. Världen handlar om överraskning .

Och Silver utelämnar överraskningarna, det ovanliga och oväntade. Han har inget sätt att förutsäga eller redovisa för dem. På Trumps seger sa Silver lika mycket, Det är den mest chockerande politiska utvecklingen under min livstid. Men ingen kan förutsäga avvikare, så om någon som Silver låtsas att han kan - se upp. Spyros Makridakis, i hans berömda 1979-tidning Accuracy of Forecasting: An Empirical Investigation, visade att enkla slag var komplicerade och att glidande medelvärden slog krångliga ekonometriska rutiner. Skulle glidande medelvärden också ha förutsagt de två val som gjorde Silver till ett känt namn?

Ändå kommer Silver-försvarare tillbaka till 49 av 50 och 50 av 50 under 2008 och 2012 - bevis, säger de när de ignorerar 2016. Men 2008 och 2012, hur stor andel av dem var hård samtal? Till exempel är Kalifornien blå oavsett vad. Så det finns alltid en enorm risk att förlita sig på strategi som gör det lätt att ringa samtal och poäng på de svåra.

Dessa är inte väldigt nya inkonsekvenser att fundera över. Den effektiva marknadsteorin - strategin som driver världens pengar - har inte heller någon lösning för överraskning (dvs. svarta svanar). Silver illustrerar helt enkelt mötet över en annan disciplin, men med samma pressande problem. Sommaren 2016 lanserade Nassim Taleb, fadern till svarta svanskonceptet, en detaljerad kritik av Silver i det offentliga rummet: @FiveThirtyEight visar oss en lärobok om hur vi ska vara helt aningslös om sannolikhet men gör ett företag i det.

Den intellektuella burmatchen: Nassim Taleb kontra Nate Silver.

Välj din sida noggrant. Det är liv eller död.

Michael Covel är författare till fem böcker: inklusive den internationella bästsäljaren, Trend efter , och hans undersökande berättelse, Den kompletta TurtleTrader . Michael är också rösten bakom Trend Following Radio, den underjordiska alternativhiten som har varit så hög som # 2 på iTunes med 5 miljoner lyssningar.