Добавить в корзинуПозвонить
Найти в Дзене

Как принимать решения лучше экспертов

Последние 2 поста про шум в решениях, покерную математику подтолкнули
меня продолжить тему… Вы уверены, что принимаете хорошие решения?
Представьте, что обычные люди — без доступа к секретной информации,
точнее предсказывают будущее, чем аналитики спецслужб. Это не
фантастика, а результат крупнейшего исследования прогнозирования — Good
Judgment Project под руководством Филипа Тетлока. Что такое Good Judgment Project? Good Judgment — это исследовательский проект, запущенный IARPA
(аналитическое подразделение разведки США), где десятки тысяч
добровольцев со всего мира пытались предсказывать события: выборы,
военные конфликты, экономические кризисы. Как вы думаете кто выиграл? Не разведка… Выяснилось, что: Да, да, эксперты проигрывают суперпрогнозистам, и не только в
описанной выше области. «Будущее можно предсказывать точнее — если
отказаться от уверенности и начать мыслить вероятностями.» Вспомнил
снова про покер) Хороший игрок мыслит вероятностями, диапазонами и
корректирует

Последние 2 поста про шум в решениях, покерную математику подтолкнули
меня продолжить тему… Вы уверены, что принимаете хорошие решения?
Представьте, что обычные люди — без доступа к секретной информации,
точнее предсказывают будущее, чем аналитики спецслужб. Это не
фантастика, а результат крупнейшего исследования прогнозирования — Good
Judgment Project под руководством Филипа Тетлока.

Что такое Good Judgment Project?

Good Judgment — это исследовательский проект, запущенный IARPA
(аналитическое подразделение разведки США), где десятки тысяч
добровольцев со всего мира пытались предсказывать события: выборы,
военные конфликты, экономические кризисы.

  • Участникам задавали конкретные вопросы с датами.
  • Требовалось оценить вероятность наступления события в процентах.
  • Прогнозы отслеживались и оценивались по объективной метрике точности = Brier score.

Как вы думаете кто выиграл? Не разведка…

Выяснилось, что:

  • Лучшие участники предсказывали на 30 – 60 % точнее по метрике Brier score, чем профессиональные аналитики. Их назвали суперпрогнозистами
  • Они обгоняли даже группы экспертов с доступом к разведданным.

Да, да, эксперты проигрывают суперпрогнозистам, и не только в
описанной выше области. «Будущее можно предсказывать точнее — если
отказаться от уверенности и начать мыслить вероятностями.» Вспомнил
снова про покер) Хороший игрок мыслит вероятностями, диапазонами и
корректирует их после каждого хода, изменений в игре.

Чем суперпрогнозисты отличаются от остальных?

Как вы думаете? Вот что их объединяло по факту:

  • Мыслили в вероятностях, а не «да/нет».
  • Постоянно обновляли прогнозы, когда появлялась новая информация.
  • Изучали альтернативные сценарии.
  • Сомневались, проверяли себя, принимали, что могут ошибаться.

Это мышление не в формате «я все знаю», а про «гипотезы, вероятности,
постоянное обновление картины мира». И самая хорошая новость — это
тренируемый навык. Если вы умеете думать, как суперпрогнозист, — вы:

  • снижаете потери,
  • быстрее отсекаете плохие варианты,
  • увереннее двигаетесь в сегодняшней неопределённости.

Как мыслить точнее: 5 принципов из практики суперпрогнозистов

  1. Думай в вероятностях. Не «это точно сработает» или «совсем не подойдет» … А «есть 70 % шансов, что это даст нужный результат».
  2. Обновляй оценки.
    Появились новые данные (а они всегда появляются, если быть
    внимательнее)? Обновляй общую картину и пересчитай свой прогноз в %
    выше. Гибкость — сила, а не порок.
  3. Находи и сравнивай альтернативы. Не зацикливайся на одном варианте, рассматривай альтернативные способы и варианты. Сценарное мышление рулит.
  4. Веди журнал решений.
    Записывай прогнозы, потом сверяй их с реальностью. Чтобы из этой точки
    возвращаться в п.2 и учиться, в том числе пересобирать собственную
    модель принятия решений.
  5. Ошибайся осознанно.
    Хороший прогнозист не тот, кто не ошибается, а тот, кто понимает, когда
    ошибся, где и почему. И самое главное уточняет: как я учту это завтра в
    принятии решений?

Пример применения в жизни.Представьте, что вы выбираете между тремя предложениями о работе:

  • Компания A — стабильная, но скучная.
  • Компания B — стартап с высоким риском.
  • Компания C — международный проект с частыми командировками.

Какую выберите? Давайте подумаем, как здесь будет действовать суперпрогнозист:

  1. Сначала сформулируем и выпишем критерии, которые для нас важны. Я бы остановился на 2÷4: карьерный и профессиональный рост, деньги, баланс «жизнь/работа».
  2. Затем оцениваем вероятность успеха для каждого варианта.
    Как бы оценили Компанию Б = стартап с высоким риском? Возможно — 60 %
    шанс на быстрый рост, 75% что получите хорошие деньги в перспективе 6
    месяцев. И 30% что вас ждет очень плохой (не приемлемый для вас) баланс
    «жизнь/работа». Так проходимся по каждому варианту выше: А, В, С.
  3. Находим и сравниваем сценарии:
    что произойдёт, если всё пойдёт хорошо, средне или плохо.
    Программа-минимум: хорошо и плохо. Давайте пофантазируем про стартап.
    Если хорошо, можем подняться вмести с ним и заработать себе хороший опыт
    в портфолио + значительно пополнить личный кошелек. А если плохо,
    быстро и с треском закроется, оставив нас за бортом с бубликом в резюме…
  4. Делаем ставку и фиксируем прогноз:
    «Ожидаю, что за год в компании B вероятность карьерного скачка — 60 %,
    75% что получу хорошие деньги (тут сумма должна быть) за эту работу и
    есть 30 % риска уволиться, потому что мне не подойдет или все
    закроется». Так по каждому из вариантов, и принимаем решение… Здесь
    очень хочется заменить слово «решение» на «гипотезу».
  5. Сделав выбор, следим за новыми данными, хотя бы раз в месяц обновляем свой «дашборд».
    Что с ростом и вероятностью увидеть его дальше? Что с деньгами сейчас и
    в перспективе? Что с балансом «жизнь/работа» в динамике? Проверяем,
    были ли правы и на сколько. Анализируем ошибки, корректируем стиль
    мышления. Может быть уже в другой компании.

Это превращает решение из «слушаю интуицию» в управляемую гипотезу с
прилаживанием и обратной связью. «Будущее принадлежит тем, кто умеет
видеть вероятности, а не гадать на кофейной гуще…» У меня есть мысль
продолжить эту тему и дать развернутый алгоритм принятия решений для
снижения шума и вероятности искажений для каждого отдельно и в команде.
Актуально или не стоит? Просьба дать обратную связь. А сегодня хочу
подытожить:

Решения — это навык который можно улучшать, а не судьба = приговор. При этом удачу в моменте, никто не отменял)