Нейт Сильвер - Сигнал и шум. Почему одни прогнозы сбываются, а другие – нет

• Название: Сигнал и шум. Почему одни прогнозы сбываются, а другие – нет
• Автор: Нейт Сильвер
• Жанр: Публицистика
• Год: 2015
• ISBN: 978-5-389-09938-8

Мы считаем, что наш мир во многом логичен и предсказуем, а потому делаем прогнозы, высчитываем вероятность землетрясений, эпидемий, экономических кризисов, пытаемся угадать результаты торгов на бирже и спортивных матчей. В этом безбрежном океане данных важно уметь правильно распознать настоящий сигнал и не отвлекаться на бесполезный информационный шум.

О том, как этому научиться, рассказывает Нейт Сильвер, политический визионер и гуру статистики, разработавший систему прогнозов, позволившую дважды максимально точно предсказать результаты президентских выборов почти во всех штатах Америки. Его книга во многом близка исследованиям Нассима Талеба и столь же значима для всех, кто имеет дело с большими объемами данных и просчитывает различные варианты развития событий. И если Талеб говорит о законах зарождения «черных лебедей», Сильвер исследует модели и способы, позволяющие поймать этих птиц в расставленные нами сети. Он обобщает опыт экспертов-практиков, изучает различные модели и подходы, позволяющие делать более точные прогнозы. Как и Даниэль Канеман, автор бестселлера «Думай медленно… Решай быстро», наблюдая за поведением и мышлением людей, оценивающих неопределенные события, Сильвер утверждает: да, компьютеры незаменимы при работе с огромными массивами данных, но для максимальной точности результатов необходим гибкий человеческий ум и опыт, ведь прогнозирование – это планирование в условиях неопределенности.

---

Выводы Тэтлока оказались убийственными. Эксперты в рамках его опросов – вне зависимости от их рода занятий, опыта или отрасли знаний – демонстрировали ничуть не лучшие результаты, чем можно получить при обычном гадании. Более того, они предсказывали будущие политические события хуже, чем даже рудиментарные статистические методы. Они были слишком самоуверенны, оценивая их вероятность: около 15 % событий, которые, по их мнению, не имели ни малейшего шанса на возникновение, все же реализовывались, а еще 25 % событий, в возникновении которых эксперты были полностью уверены, так и не произошли{161}. И не имело значения, какие это были события: касались ли они экономики, внутренней политики или международных дел, суждения экспертов оказались одинаково ошибочными по всем вопросам.

Чтобы делать более верные прогнозы, нужно стать лисой

Хотя в среднем результаты экспертов оказались довольно плохими, Тэтлок обнаружил, что некоторым из них эта работа удавалась лучше, чем остальным. Среди проигравших оказались те эксперты, чьи предсказания чаще всего цитировались в СМИ. Тэтлок установил, что чем больше интервью прессе давал эксперт, тем хуже были его предсказания.

Другая же подгруппа экспертов показывала сравнительно более хорошие результаты. Тэтлок, получивший образование психолога, очень интересовался когнитивным стилем экспертов – тем, как они размышляют о мире. Поэтому он видоизменил несколько вопросов в личностных тестах и задал их всем экспертам.

Основываясь на полученных ответах, Тэтлок смог классифицировать всех экспертов в соответствии с определенной шкалой, распределив их между так называемыми ежами и лисами. Разделение на эти две группы напрямую связано с названием эссе Исайи Берлина о русском писателе Льве Толстом. Берлин, в свою очередь, позаимствовал его из строки, приписываемой греческому поэту Архилоху: «Лис знает много секретов, а еж – один, но самый главный».

Если вы не фанат Толстого или цветистой прозы, то вам совершенно не обязательно читать эссе Берлина. Однако основная его идея заключается в том, что писателей и мыслителей можно разделить на две большие категории.

• «Ежи» – это те люди, которые верят в Большие Идеи или управляющие миром принципы. «Ежи» приравнивают их к законам физики, универсальным для каждого вида взаимоотношений в обществе. Можно вспомнить Карла Маркса и идею классовой борьбы или Зигмунда Фрейда и идею бессознательного. Или же Малкольма Гладуэлла и теорию «переломного момента».

• «Лисы» же, напротив, верят во множество мелких идей и предлагают разнообразные подходы к решению проблем. Они более терпимы к нюансам, неопределенности, сложности и противоречивым мнениям. Если «ежи» – это охотники, всегда ищущие большую добычу, то «лисы» – это собиратели.

«Лисы», как обнаружил Тэтлок, умеют предсказывать значительно лучше, чем «ежи». Например, они гораздо лучше оценили перспективы Советского Союза. Вместо того чтобы воспринимать СССР исключительно в идеологических понятиях, как «империю зла» или как сравнительно успешный (и, возможно, даже выступающий образцом для подражания) пример марксистской экономической системы, они видели то, что было на самом деле, – все более дисфункционализирующую страну, стоявшую на грани распада. Если прогнозы «ежей» были немногим лучше, чем вероятностный шанс, то прогнозы «лис» показывали, что у них есть определенные способности к предсказаниям (табл. 2.2).

Таблица 2.2. Различия между «лисами» и «ежами»

Почему из «ежей» получаются хорошие гости телешоу

Я встретился с Тэтлоком за обедом в гостинице «Дюран», приятном и освещенном зимним солнцем заведении, расположенном рядом с общежитием Беркли. Вполне естественно, Тэтлок напоминал типичную «лису»: он говорил мягким голосом и часто замолкал на 20 или 30 секунд перед тем, как дать на мои вопросы максимально выверенный ответ.

«Что стимулирует людей, демонстрирующих свой интеллект на публике? – спросил меня Тэтлок. – Есть целый ряд ученых, предпочитающих сохранять анонимность. Но есть и другие, желающие выступать на публике, высказывать смелые теории и оценивать значительные события в понятиях вероятности. Разумеется, такой подход естественным образом привлекает к ним внимание».

Иными словами, смелые предсказания в стиле «ежа» с большей вероятностью приведут вас на телевидение. Возьмем пример Дика Морриса, бывшего советника Билла Клинтона, работающего в настоящее время комментатором на канале Fox News. Моррис – это классический «еж», и, по всей видимости, его стратегия состоит в том, чтобы при любом удобном случае выступать с шумным предсказанием. В 2005 г. Моррис заявил, что действия Джорджа У. Буша по преодолению последствий урагана «Катрина» помогут ему обрести прежние позиции во взаимоотношениях с общественностью{162}. Накануне выборов 2008 г. он предсказал, что Барак Обама выиграет в Теннесси и Арканзасе{163}. В 2010 г. Моррис предсказал, что республиканцы легко получат сотню мест в Палате представителей США{164}. В 2011 г. он заявил, что Дональду Трампу стоит выдвинуть свою кандидатуру на президентских выборах от республиканской партии и что у него «чертовски высокие» шансы на выигрыш{165}.

Все эти предсказания оказались абсолютно неверными. «Катрина» стала началом конца Буша, а не его возрождения. Обама проиграл в Теннесси и Арканзасе с разгромным счетом – фактически это были единственные штаты, в которых его результаты были хуже, чем у Джона Керри четырьмя годами ранее. Республиканцам повезло в ноябре 2010 г., однако они получили 69 мест, а не 100. Трамп официально отказался от президентских амбиций всего через две недели после настойчивых призывов Морриса.

Однако Моррис умеет быстро вставать на ноги и снова продолжает заниматься маркетингом самого себя – он, как и прежде, регулярно появляется в программах Fox News и даже смог продать свою книгу сотням тысяч людей.

«Лисам» же порой бывает непросто вписаться в отдельные типы культур, таких как телевидение, бизнес и политика. Их убеждение в том, что многие проблемы сложно предсказать и что мы должны принимать во внимание большую степень неопределенности в жизни, может ошибочно приниматься за отсутствие у них уверенности в себе. Их плюралистический подход может быть столь же ошибочно принят за отсутствие убежденности. Широко известна фраза Гарри Трумэна, потребовавшего представить ему «сделанного одной рукой экономиста»[23], после того как «лисы» в его администрации никак не могли дать ему однозначный ответ на вопрос.

При этом оказывается, что «лисы» могут делать более качественные предсказания. Они быстрее других понимают, насколько данные могут быть искажены шумом, и они в меньшей степени склонны гоняться за фальшивыми сигналами. Они больше знают о том, что они не знают.

Если вам нужен врач, способный оценить ваше физическое состояние, или инвестиционный консультант, помогающий максимизировать величину пенсионных накоплений, то вам стоит довериться «лисе». Возможно, он даст менее радужные прогнозы относительно своих способностей, но уж точно будет лучше понимать, что происходит на самом деле.

Почему политические предсказания обычно оказываются неудачными

«Лисье» восприятие происходящего может оказаться особенно важным, когда речь заходит о предсказаниях в области политики. Существует целый ряд ловушек, в которые чаще всего попадают «ежи», а «лисы» с присущей им осторожностью – нет.

Одна из них – партийная идеология. Моррис, несмотря на то что ранее был советником Билла Клинтона, позиционирует себя как республиканец и занимается сбором средств для кандидатов от этой партии. И его консервативные взгляды вполне соответствуют взглядам его работодателя, Fox News. Однако и у либералов нет иммунитета против того, чтобы стать «ежами». Изучая правильность прогнозов, сделанных участниками McLaughlin Group, я обнаружил, что Элеанор Клифт, обычно выступающая как самый либеральный участник этого шоу, почти никогда не выдвигала предположений о более предпочтительном для республиканцев варианте. Возможно, это и помогло ей в предсказании результата выборов 2008 г., но в долгосрочной перспективе она не была более точной, чем ее консервативные оппоненты.

Научные эксперты, деятельность которых изучал Тэтлок, могут страдать от той же проблемы. В сущности, неполные знания могут стать опасной вещью в руках «ежа» с докторской степенью. Один из самых примечательных выводов Тэтлока звучал так: если с приобретением нового опыта у «лис» улучшаются способности к предсказанию, то для «ежей» справедливо обратное – по мере приобретения дополнительных знаний результативность их прогнозов, скорее, ухудшается. Тэтлок верит, что чем больше фактов узнают «ежи», тем больше у них появляется возможностей манипулировать с этими фактами с целью подтверждения их предубеждений. Это чем-то напоминает ситуацию, когда вы помещаете ипохондрика в темную комнату с доступом в интернет. Чем больше времени вы ему дадите, тем больше информации будет у него в распоряжении и тем более страшный диагноз он себе поставит (в подобных ситуациях ему будет легко принять обычную простуду за бубонную чуму).