Нейт Сильвер - Сигнал и шум. Почему одни прогнозы сбываются, а другие – нет

• Название: Сигнал и шум. Почему одни прогнозы сбываются, а другие – нет
• Автор: Нейт Сильвер
• Жанр: Публицистика
• Год: 2015
• ISBN: 978-5-389-09938-8

Мы считаем, что наш мир во многом логичен и предсказуем, а потому делаем прогнозы, высчитываем вероятность землетрясений, эпидемий, экономических кризисов, пытаемся угадать результаты торгов на бирже и спортивных матчей. В этом безбрежном океане данных важно уметь правильно распознать настоящий сигнал и не отвлекаться на бесполезный информационный шум.

О том, как этому научиться, рассказывает Нейт Сильвер, политический визионер и гуру статистики, разработавший систему прогнозов, позволившую дважды максимально точно предсказать результаты президентских выборов почти во всех штатах Америки. Его книга во многом близка исследованиям Нассима Талеба и столь же значима для всех, кто имеет дело с большими объемами данных и просчитывает различные варианты развития событий. И если Талеб говорит о законах зарождения «черных лебедей», Сильвер исследует модели и способы, позволяющие поймать этих птиц в расставленные нами сети. Он обобщает опыт экспертов-практиков, изучает различные модели и подходы, позволяющие делать более точные прогнозы. Как и Даниэль Канеман, автор бестселлера «Думай медленно… Решай быстро», наблюдая за поведением и мышлением людей, оценивающих неопределенные события, Сильвер утверждает: да, компьютеры незаменимы при работе с огромными массивами данных, но для максимальной точности результатов необходим гибкий человеческий ум и опыт, ведь прогнозирование – это планирование в условиях неопределенности.

---

«На определенном уровне и я, и скауты воспринимаем бейсбол одинаково, – рассказывал мне Джеймс. – Возможно, это можно сравнить с ситуацией, когда люди с крайне правыми и крайне левыми взглядами начинают говорить, по сути, об одном и том же. Скауты хотят увидеть то же, что пытаюсь увидеть я».

В 2004 г. Джеймс помогал Red Sox отбирать новых игроков. Он написал довольно положительный отчет о Педройе, однако порекомендовал команде взять кого-то другого. Тем не менее ему было приятно и то, что Педройя все же попал в команду, и то, что его результаты заставляли прежних критиков выглядеть идиотами.

Однако в самом начале карьеры Педройи было несколько моментов, когда даже самые большие его фанаты начали в нем сомневаться. Педройю пригласили для участия в играх высшей лиги в августе 2006 г. Он сыграл в 31 матче, однако его показатель попадания по мячу составил всего 0,198, и он всего шесть раз смог выбить мяч за пределы базы. Это никого не обеспокоило; Red Sox, в несколько непривычной для себя манере уже выбыла из соревнований в рамках плей-офф в последние недели сезона, и внимание всей Новой Англии переключалось на Celtics и Patriots. Однако в следующем году, когда Педройе уже была доверена вторая база, он начал сезон столь же медленно – после первого месяца игр его результат составил 0,172.

В этот момент Педройю уже могли бы выгнать из такой команды, как Cubs, до недавних времен славившейся своим довольно бессистемным процессом принятия решений. Во многих клубах каждое действие вызывает мощную и порой чрезмерную прямо противоположную реакцию. Однако Red Sox следует более дисциплинированному и систематическому подходу. И когда менеджеры Red Sox внимательно посмотрели на происходившее с Педройей в тот момент сезона, то, по словам Джеймса, они увидели кое-что, что им понравилось. Педройя не просто промахивался по мячу – он активно взаимодействовал с ним. И активность этого взаимодействия должна была рано или поздно привести к появлению какой-то новой тенденции.

«У каждого из нас возникает момент, когда мы теряем доверие к данным, – сказал мне Джеймс. – Возможно, вы это знаете и сами, но если вы посмотрите на данные предыдущего года, когда результат Дастина составил где-то около 0,180, то соотношение ударов и промахов у него находилось на уровне примерно 8–9 %. Это происходило именно в те весенние месяцы, когда ему было сложнее всего. Такой результат вполне закономерен – если вы замахиваетесь так же сильно, как он, то вы никогда в жизни не сможете обеспечить хороший контакт и показать результат выше 0,180».

Руководители команды Red Sox принимали решение о том, чтобы Педройя оставался в команде, не без сомнений. Они продолжали наблюдать за ним, чтобы понять, удается ли ему делать то, что приносило ему успех на любительском уровне. Если бы они решили оставить Педройю на скамейке запасных, то принятие его потребовало бы ничуть не меньших раздумий, чем решение о том, чтобы выпустить его на поле. Они не позволяли данным диктовать решения без рассмотрения более широкого контекста происходящего.

По словам Джеймса, единственное, что их беспокоило, было связано с тем, не начнет ли сам Педройя сомневаться в себе. И такой поворот событий был вполне вероятен для любого другого игрока, но только не Педройи, не переживающего ни из-за дураков, ни из-за критиков.

«К счастью, Дастин по-настоящему упрямый человек. Если бы он слушал всех этих людей, то почувствовал бы себя униженным, и это бы его просто уничтожило. Он же никого не слушал. Он копал свою яму, он отрабатывал замахи, и, в конечном итоге, все повернулось так, как он хотел».

Педройя обладает тем, что Джон Сандерс называет «памятью главной лиги», то есть быстро забывает то, что становится прошлым. Его не беспокоят отдельные неудачи, потому что он совершенно уверен в том, что играет правильно, а в долгосрочной перспективе значение имеет лишь это.

И он крайне нетерпим ко всему, что отвлекает его от работы. И становится не самым приятным в общении человеком, но именно это и дает ему возможность играть на второй базе за бостонскую команду Red Sox, а это – единственное, о чем заботится Педройя.

«Наши сильные и слабые стороны всегда взаимосвязаны, порой не самым явным образом, – сказал мне Джеймс. – Педройя смог превратить в силу то, что у других игроков является слабостью».

Реальные уроки «Moneyball»

«Как сказал Майкл Льюис, споры окончены», – заявил Билли Бин, когда мы с ним обсуждали «Moneyball». В течение какого-то времени «Moneyball» представлял немалую угрозу для людей, имеющих отношение к игре. Казалось, что на кон поставлена их работа и уровень жизни. Однако новая жизнь так и не наступила – компьютеры не стали полноценной заменой скаутам. В действительности спрос на знание о том, какое будущее ждет различные категории бейсболистов (знание, получаемое либо из отчетов скаутов, либо из статистических систем типа PECOTA), все же значительно превышает предложение. Каждый раз, когда команда размышляет над тем, кого брать в состав, кого обменять на другого игрока или сколько заплатить за свободных игроков, на кону стоят миллионы долларов – и исход будущего чемпионата. И чтобы принять правильные решения, команды все активнее используют все имеющиеся в их распоряжении инструменты.

Информационная революция внесла существенный вклад в мир бейсбола, при том что во многих других областях ее результаты оказались значительно более скромными. И причина тому – присущая бейсболу уникальная комбинация быстро развивающихся техник, хорошо сбалансированной системы стимулов, жесткой конкуренции и наличия огромных массивов данных.

Но это не делает жизнь Бина легче. В разговоре со мной он выразил изрядную озабоченность тем обстоятельством, что другие команды смогли скопировать лучшие трюки A’s. Например, немногие команды в наши дни не понимают всей важности OBP[61] или пренебрегают ролью защиты – но при этом у большинства из них, как и прежде, гораздо больше денег, чем у A’s.

В таких высококонкурентных областях, как спорт, лучшие прогнозисты должны постоянно использовать новые методы. Нет ничего сложного в том, чтобы поставить себе цель «пользоваться неэффективностью рынка».

Вот почему эта книга обходит стороной быстрые и легкие решения, но и не приводит план поиска примеров такой неэффективности. Они не позволят вам понять, действительно ли вам удалось нащупать что-то свежее и интересное, или же вы забрели в тупик. Маловероятно, что вы натолкнетесь на идею, которую никто другой не обдумывал. А еще сложнее – на хорошую идею, – и даже когда вы на нее натолкнетесь, пройдет совсем немного времени, и ее кто-нибудь скопирует.

Вот почему эта книга не рассказывает о быстрых решениях, в основе которых лежат лишь небольшие корректировки, дающие возможность предсказывать будущее лучше конкурентов. Хорошие специалисты в области инноваций обычно обдумывают ситуацию и масштабно, и в деталях. Порой новые идеи можно найти именно в деталях и тонкостях проблемы, на которые не обращают внимания другие. А порой их можно найти, когда вы начинаете совершенно абстрактно и философски размышлять о том, почему мир устроен определенным образом и возможна ли альтернатива для доминирующей парадигмы. Но подобное мышление сложно обрести в тех условиях, в которых живут 99 % из нас. Привычные для нашей обычной жизни способы мыслить категориями и делать приблизительные выкладки порой приводят к тому, что мы упускаем из виду информацию, способную обеспечить нам конкурентное преимущество.

Главное, что здесь можно сделать, – это развивать инструменты и привычки, помогающие вам чаще находить идеи и информацию в нужном месте, и оттачивать навыки, необходимые как при поражениях, так и в победах.

Это сложная задача. Однако бейсбол остается необычайно плодородной почвой для множества новаторов. С момента дебюта PECOTA прошло десять лет, но после нее никакая другая столь же новаторская система так и не была создана. Однако наверняка появится кто-то, способный по-умному распорядиться данными Pitch f/x или же понять, каким образом совмещать количественные и качественные оценки результативности игрока. Все это обязательно произойдет, и произойдет быстрее, чем мы думаем, – возможно, уже тогда, когда будет печататься тираж этой книги.

«Сейчас в игру вступают люди с невероятно высокими интеллектуальными и творческими способностями, – рассказывал мне Бин. – Если бы я хотел получить свою работу десятью годами позже, то не дошел бы даже до стадии собеседования».

Moneyball умер; да здравствует Moneyball.

Глава 4 Вы столько лет говорили нам, что дождь – зеленый

Во вторник 23 августа 2005 г. самолет-разведчик ВВС США уловил признаки атмосферных возмущений над Багамами{237}. Члены экипажа наблюдали «несколько небольших воздушных вихрей», вращавшихся против часовой стрелки и перемещающихся с востока на запад – от просторов Атлантического океана в сторону США. Подобное изменение в движении ветра было сложно выявить на основании данных спутников или наземного наблюдения, однако постепенно все больше экипажей грузовых лайнеров стали докладывать о нем. Национальный Центр слежения за ураганами (NHC) посчитал, что собрал достаточно свидетельств, чтобы охарактеризовать это явление как тропический циклон, получивший название «Тропическая депрессия 12»[62]. Это был «коварный» шторм, способный как развиться в нечто более серьезное, так и просто исчезнуть без следа. Примерно половина всех тропических депрессий в Атлантическом бассейне со временем перерастает в ураганы{238}.