Ошибка выжившего
Краткий обзор
| Категория | Детали |
|---|---|
| Определение | Систематическая логическая ошибка концентрации на людях, объектах или данных, прошедших процесс отбора, при игнорировании не прошедших его из-за их невидимости. |
| Категория | Недостаточно смысла (мы упрощаем вероятности и числа, чтобы о них было легче думать) |
| Сложность преодоления | Очень высокая |
| Распространенность | Повсеместная |
| Связанные когнитивные искажения | Эвристика доступности, Склонность к оптимизму, Ошибка отбора, Предвзятость подтверждения, Эффект знания задним умом |
1. Краткое содержание
Когда мы анализируем успех, мы видим только победителей: компании, которые процветают, здания, которые все еще стоят, людей, которые добились успеха. Мы никогда не видим неудач, потому что они исчезли. Это создает опасно искаженную картину реальности, в которой мы переоцениваем свои шансы на успех, неверно определяем причины успеха и делаем выводы на основе неполных данных. Самая важная информация почти всегда та, которая отсутствует.
Простыми словами
Ошибка выжившего возникает тогда, когда ты замечаешь только победителей и совершенно забываешь про всех, у кого ничего не получилось. Проигравшие обычно просто не попадаются на глаза. Из-за этого любой успех кажется гораздо проще и доступнее, чем есть на самом деле.
Представь, что ты листаешь ленту с роликами, где ребята с первого раза выполняют сложнейший трюк на скейте. Начинает казаться, будто это под силу каждому. Но ты видишь только те видео, которые авторы решили выложить. Те, кто падал, разбивал коленки или бросал попытки, такие ролики в сеть не выкладывают. Твоя лента показывает лишь немногих счастливчиков, а не всю картину целиком. Со старыми песнями происходит то же самое. Хиты времен твоих родителей могут звучать лучше современной музыки, но плохие песни тех лет просто давным-давно забыли.
Возьми за правило полезную привычку. Когда что-то кажется очень простым из-за чужого успеха, всегда спрашивай себя: а сколько человек пробовали то же самое и провалились? И подумай о том, что они могли бы тебе рассказать.
2. Научное обоснование
2.1. Открытие и история
Интеллектуальное признание ошибки выжившего предшествует современной статистике более чем на два тысячелетия, хотя ее формальное математическое описание появилось во время Второй мировой войны.
Древние истоки (V век до н.э.): Самое раннее задокументированное наблюдение принадлежит Диагору Мелосскому, греческому поэту и известному атеисту. Когда ему показали нарисованные таблички молящихся, переживших кораблекрушение, как доказательство божественного вмешательства, Диагор знаменито ответил: «Я вижу тех, кто был спасен, но где нарисованы те, кто потерпел кораблекрушение?» Этот анекдот, сохраненный Цицероном в трактате О природе богов, описывает весь механизм искажения: выжившие видимы и говорят вслух, а погибшие безмолвны.
Формализация в эпоху Возрождения (XVII век): Фрэнсис Бэкон интегрировал это наблюдение в свою теорию «Идолов разума», в частности «Идолов рода». Он отметил, что человеческий интеллект больше движим утверждениями, чем отрицаниями: успехи фиксируются, в то время как неудачи исчезают из записей.
Математическое описание во время Второй мировой войны (1943): Меморандумы Абрахама Вальда для Группы статистических исследований Колумбийского университета предоставили первую строгую математическую основу для учета ошибки выжившего: способ оценивать уязвимость каждой части самолета по повреждениям вернувшихся машин. Меморандумы оставались неопубликованными, пока Центр военно-морского анализа не переиздал их в 1980 году, а обзор Мангела и Саманьего 1984 года в журнале Journal of the American Statistical Association ввел их в программу обучения статистике. Анекдот о броне, который сегодня связывают с именем Вальда, возник позже; проверка исторических документов Биллом Кассельманом в 2016 году для Американского математического общества показала отсутствие документальных подтверждений его драматических деталей (см. 2.3).
Революция в финансовой экономике (1990-е): Исследователи, включая Брауна, Гетцмана, Элтона, Грубера и Блейка, количественно оценили влияние искажения на данные о результативности паевых и хедж-фондов, продемонстрировав его глубокое влияние на инвестиционный анализ.
Популярная философия (2000-е): Нассим Николас Талеб возвел ошибку выжившего из статистической концепции в философское мировоззрение в книгах Одураченные случайностью (2001) и Черный лебедь (2007).
2.2. Ключевые исследователи
| Исследователь | Вклад | Год |
|---|---|---|
| Диагор Мелосский | Первое задокументированное наблюдение искажения (выжившие при кораблекрушении) | ~450 г. до н.э. |
| Фрэнсис Бэкон | Интеграция в теорию «Идолов разума» | 1620 |
| Абрахам Вальд | Математическое описание для анализа уязвимости самолетов | 1943 |
| Марк Мангел и Франсиско Саманьего | Обзор меморандумов Вальда для SRG, сделавший метод живучести самолетов широко известным | 1984 |
| Стивен Браун и Уильям Гетцман | Количественная оценка искажения в исследованиях результативности паевых фондов | 1992 |
| Эдвин Элтон, Мартин Грубер и Кристофер Блейк | Оценка величины ежегодного искажения (~0,9%) в паевых фондах | 1996 |
| Бертон Малкиел и Атану Саха | Оценка ошибки выжившего в хедж-фондах (~4,4% в год) по базе данных TASS | 2005 |
| Билл Кассельман | Проследил историю бронирования Вальда по источникам и выяснил, что драматические детали не задокументированы | 2016 |
| Нассим Николас Талеб | Философская популяризация через концепцию «немых свидетельств» | 2001-2007 |
| Джеймс Хекман | Работа над коррекцией Хекмана для ошибки отбора (Нобелевская премия) | 2000 |
2.3. Знаковые исследования
Анализ уязвимости самолетов (Вальд, 1943)
Во время Второй мировой войны Группа статистических исследований в Колумбийском университете работала над проблемой живучести боевых самолетов для военных США. Вклад Вальда в эту работу сохранился в виде серии меморандумов, написанных около 1943 года, опубликованных Центром военно-морского анализа в 1980 году и проанализированных Мангелом и Саманьего (1984). Проблема, которую они решали, была проблемой данных: отчеты о повреждениях поступали только от самолетов, сумевших вернуться, поэтому картина пробоин у вернувшихся машин преуменьшала урон тем частям, попадание в которые приводит к падению. Вальд предположил, что огонь противника распределяется по самолету относительно равномерно, и вывел уравнения, оценивающие для каждой секции вероятность того, что попадание в нее окажется фатальным. Секция, на которой мало пробоин у вернувшихся самолетов, оказывается именно той, попадания в которую смертельны, поскольку получившие их машины не вернулись. Наиболее часто цитируемый меморандум называется «Метод оценки уязвимости самолетов на основе повреждений выживших».
Что подтверждают и чего не подтверждают исторические документы: Популярная версия этой истории утверждает, будто военные предложили усилить броней фюзеляж, крылья и хвост, где было больше всего пробоин, а Вальд возразил им: бронируйте двигатели и кабину, где пробоин не было. Билл Кассельман, исследовавший этот вопрос для Американского математического общества в 2016 году, изучил меморандумы, воспоминания директора SRG У. Аллена Уоллиса и другие сохранившиеся архивы и не нашел подтверждений ни предложения военных, ни возражения Вальда, ни фразы о бронировании мест без пробоин. Меморандумы вообще не содержат рекомендаций: группа SRG отвечала на поставленные вопросы, а практические решения оставляла военным. Вердикт Кассельмана таков: история «вполне может быть правдой», в ней есть «прочное зерно истины», но «для самых ярких деталей свидетельств очень мало». Знаменитая схема самолета с красными точками, циркулирующая в интернете, является современной иллюстрацией, а не документом военных лет. Легенда о диалоге широко распространилась в 2010-х годах; книга Джордана Элленберга «Как не ошибаться» (2014) дает одну из наиболее аккуратных реконструкций и прямо подает ее как реконструкцию. Метод задокументирован, драма — нет.
Ошибка выжившего в паевых фондах (Браун, Гетцман и др., 1992)
Опубликованная в Review of Financial Studies, эта статья продемонстрировала, что стандартные финансовые базы данных систематически удаляли записи о ликвидированных или объединенных фондах. Поскольку фонды почти всегда ликвидируются из-за плохой результативности, это усечение создавало статистический мираж: в среднем показатели фондов казались лучше реальных, а ложные корреляции между волатильностью и доходностью имитировали «мастерство» там, где его не было.
Ошибка выжившего и результативность паевых фондов (Элтон, Грубер и Блейк, 1996)
В этом знаковом исследовании отслеживался каждый паевой фонд, существовавший на конец 1976 года. Ключевые выводы:
- Ошибка выжившего завышала годовую доходность примерно на 0,9% (90 базисных пунктов)
- Искажение было значительно больше для малых фондов, чем для крупных
- Фонды, которые объединялись (часто скрывая плохие результаты в более крупных фондах), и те, что ликвидировались, оба вносили свой вклад в искажение
Эти результаты предоставили сильную эмпирическую поддержку Гипотезе эффективного рынка после корректировки искажения.
2.4. Нейробиологические основы
Ошибка выжившего возникает из фундаментальных особенностей человеческого познания:
Система 1 (быстрое мышление): «Быстрая» система мышления Даниэля Канемана смешивает «легкость вспоминания» с «частотой возникновения». Поскольку успешные примеры (Стив Джобс, Билл Гейтс) легко вспомнить, мы интуитивно приписываем аналогичным исходам более высокую вероятность, чем это оправдано базовыми ставками.
Эвристика доступности: Мозг полагается на немедленно доступные примеры при оценке решений. Успехи по своей природе более «доступны»: успешные компании котируются на биржах, а обанкротившиеся исключаются из листинга; уцелевшие здания стоят, а разрушенные заменяются новыми.
Ограничения распознавания образов: Человеческий мозг эволюционировал для извлечения причинно-следственных связей из воспринимаемых данных, но не может обрабатывать данные, которые отсутствуют. Это фундаментальное ограничение (наш мозг может анализировать только то, что видит) лежит в нейробиологической основе ошибки выжившего.
Взаимодействие со склонностью к оптимизму: Нейронные цепи, связанные с самооценкой, тяготеют к оптимизму. При просмотре данных, подверженных ошибке выжившего, эти цепи побуждают идентифицировать себя с победителями, а не с безмолвным большинством неудачников, подкрепляя рискованное поведение.
3. Эволюционные истоки
Ошибка выжившего глубоко укоренена в нашем эволюционном наследии как механизмов распознавания образов, работающих в средах, где скорость часто была важнее точности.
Адаптивная ценность в условиях предков: Для наших предков сосредоточение внимания на успешных стратегиях имело смысл. Если метод охоты, маршрут миграции или источник пищи приносили выживших, их стоило имитировать. Неудачники (те, кто пробовал другие подходы и погиб) были недоступны для консультаций. Обучение на видимом успехе служило быстрой и эффективной эвристикой.
Энергосбережение: Мозг потребляет около 20% нашей метаболической энергии. Анализ отсутствующих данных (моделирование всех неудач, которых мы не видим) когнитивно слишком затратен. Эволюция благоприятствовала мозгу, эффективно обрабатывавшему доступную информацию, а не моделировавшему невидимые альтернативы.
Особенность, а не ошибка: В условиях предков с относительно стабильными условиями и немедленно наблюдаемыми исходами обучение с ошибкой выжившего часто было достаточно хорошим. Если ваш сосед пережил зиму, используя определенную конструкцию укрытия, ее копирование было разумным. Искажение становится проблематичным только в сложных современных условиях, где неудачи систематически скрываются, а выборка «выживших» крайне нерепрезентативна.
Несоответствие доступности: Наш мозг эволюционировал в небольших группах, где большинство значимых событий можно было наблюдать непосредственно. В современном обществе мы сталкиваемся с информацией, которая прошла через множество уровней отбора (СМИ, рынки, история), что делает наши интуиции, основанные на доступности, систематически ошибочными.
4. Как проявляется это искажение
4.1. В повседневной жизни
«Раньше делали лучше»: Римский Пантеон, викторианская мебель из красного дерева и техника 1950-х годов, которая «все еще работает», — это статистические выбросы, пережившие столетия разрушений. Небрежно построенные римские многоквартирные дома, которые рухнули, дешевая викторианская мебель, которая сгнила, и сломанная техника 1950-х на свалках невидимы. Мы сравниваем лучшее из прошлого со средним из настоящего.
Заблуждение «классической» музыки: Люди утверждают, что музыка 1960-70-х годов была лучше, потому что «все песни той эпохи считаются классикой». Это игнорирует тот факт, что были выпущены тысячи вторичных, неудачных песен, а радиостанции крутят лишь уцелевший 1% хитов. Мы сравниваем отфильтрованное лучшее из прошлого со всей сегодняшней продукцией.
Советы об отношениях от счастливых пар: Ища советы об отношениях, мы обычно консультируемся с парами, которые все еще вместе. Мы редко слышим от тех, кто пробовал те же подходы и закончил разводом, возможно, следуя советам, которые способствовали их неудаче.
Рекомендации ресторанов: Популярные рестораны в городе по определению являются выжившими. Тысячи закрывшихся ресторанов (возможно, с теми же самыми стратегиями) не могут предупредить нас о том, что не работает.
4.2. На рабочем месте
Миф о бросивших колледж: СМИ освещают истории миллиардеров, таких как Гейтс, Джобс и Цукерберг, как свидетельство того, что уход из колледжа ведет к успеху. При этом игнорируются десятки тысяч отчисленных с долгами и более низким заработком в течение жизни. Базовая ставка успеха бросивших учебу статистически ниже, чем у выпускников; известные примеры являются крайними выбросами.
Литература «Как я добился успеха»: Как отмечает Нассим Талеб, неудавшиеся предприниматели не пишут книг под названием «Как я обанкротил свой стартап». Успешные предприниматели пишут «Как я добился успеха», и их советы (идите на большие риски, игнорируйте критиков) могут быть именно тем поведением, которое привело к краху неудачников.
Наем на основе «успешных» профилей: Компании часто создают профили найма на основе характеристик своих лучших сотрудников. Но у них нет данных об отвергнутых кандидатах, которые могли бы работать так же хорошо, или о тех, кто был нанят с аналогичными чертами, но потерпел неудачу и ушел.
Ошибки атрибуции эффективности: При анализе того, почему определенные проекты увенчались успехом, организации изучают успешные команды. Они не изучают неудачные проекты, которые были закрыты, реорганизованы или распущены, хотя именно там могли обнаружиться те же самые предполагаемые факторы успеха.
4.3. В бизнесе и маркетинге
«Формулы успеха» в предпринимательстве: Индустрия советов — это монополия, управляемая выжившими. «Тяжелая работа», «настойчивость» и «одержимость качеством» фигурируют в историях успешных предпринимателей, но опросы неудачливых предпринимателей, скорее всего, выявили бы идентичные черты. Отличительным фактором часто является удача, время или внешние события.
Отзывы о продуктах: Маркетинг демонстрирует довольных клиентов. Недовольные клиенты, которые ушли, потребовали возврат средств или просто исчезли, отсутствуют в повествовании, искажая воспринимаемую эффективность продукта.
Конкурентный бенчмаркинг: Компании сравнивают себя с успешными конкурентами, изучая их стратегии. Но компании, применявшие похожие стратегии и потерпевшие крах, были поглощены, ликвидированы или сменили профиль, поэтому их неудачный опыт невидим для анализа.
4.4. В политике и СМИ
Создание исторического нарратива: История, написанная выжившими, представляет их точку зрения как окончательную. Точки зрения, предупреждения и альтернативы, предложенные теми, кто проиграл, умер или был маргинализован, систематически недопредставлены.
Выживание новостей: СМИ освещают события, которые проходят редакторский отбор. Тысячи столь же достойных новостей событий остаются неосвещенными, формируя общественное восприятие того, какие проблемы существуют и какие решения работают.
«Уроки» политических стратегий: Политические аналитики изучают победившие кампании для выявления факторов успеха. Но кампании, которые использовали идентичные стратегии и проиграли, получают меньше внимания, что потенциально ведет к ошибочным стратегическим рекомендациям.
4.5. В здравоохранении
Парадокс каски в Первой мировой войне: Когда во время Первой мировой войны были введены стальные каски, полевые госпитали сообщили о резком увеличении числа травм головы. Некоторые предположили, что каски имеют недостатки. Реальность: до появления касок осколки, попадающие в голову, убивали солдат мгновенно (они записывались как убитые в бою, так и не добравшись до госпиталя). Каски превратили смертельные случаи в поддающиеся лечению травмы, сделав ранения головы видимыми в данных впервые.
Высотный синдром у кошек: Ветеринарное исследование 1987 года показало, что у кошек, упавших с высоты более 7 этажей, было меньше травм, чем у тех, кто упал с 5-7 этажей, что позволило предположить, что падения с большей высоты «безопаснее». Искажение: набор данных включал только кошек, принесенных к ветеринару. Кошек, разбившихся насмерть при падении с 30-го этажа, хоронили, а не лечили. Так возникала иллюзия, что падать с большой высоты безопаснее.
«Эффект здорового рабочего»: Исследования часто показывают, что у промышленных рабочих уровень смертности ниже, чем у населения в целом — не потому, что работа на фабрике полезна для здоровья, а потому, что рабочая сила исключает инвалидов, прикованных к постели и смертельно больных. Рабочие — это предварительно отобранные выжившие.
Статистика смертности от травм: Жертвы аварий в отдаленных районах иногда демонстрируют более низкую внутрибольничную смертность, чем жертвы в городах. Реальность: тяжело раненные пациенты в отдаленных районах умирают во время длительной транспортировки, прибывая «мертвыми по прибытии» и исключаясь из больничной статистики. Городские больницы принимают критических пациентов живыми, которые затем умирают в больнице, что завышает показатели городской смертности.
4.6. В финансах и инвестировании
Результативность паевых фондов: Стандартные базы данных удаляли записи о ликвидированных фондах. Поскольку фонды ликвидируются из-за плохой результативности, базы данных удаляли неудачи, из-за чего средняя результативность фондов казалась на ~0,9% выше в год, чем в реальности.
Данные хедж-фондов: Хедж-фонды отчитываются добровольно, внося двойное искажение: ошибка выжившего (неудачные фонды перестают отчитываться) и ошибка ретроспективного включения/заполнения (успешные фонды начинают отчитываться и добавляют свои удачные ранние годы; неудачные ранние фонды никогда не отчитываются и распускаются). Малкиел и Саха (2005), работая с базой данных TASS, оценили составляющую ошибки выжившего примерно в 4,4% в год: из 604 хедж-фондов, отчитывавшихся в 1996 году, менее четверти продолжали существовать в 2004 году, а закрывшиеся фонды заработали гораздо меньше выживших.
Бэктестинг S&P 500: Состав индекса меняется по мере исключения обанкротившихся компаний и добавления растущих. Бэктестинг по текущему составу S&P 500 показывает нереалистичную доходность из-за искусственного стопроцентного выживания: каждая компания, обанкротившаяся за тестовый период, оказывается исключенной.
Иллюзия «Горячей руки»: Ранние исследования предполагали, что управляющие фондами могут стабильно опережать рынок. Когда Браун и Гетцман ввели поправку на ошибку выжившего, большая часть кажущегося мастерства исчезла: эффект «горячей руки» в значительной мере оказался крайним хвостом случайного распределения.
5. Практические примеры из реальной жизни
Пример 1: Решение о броне бомбардировщиков (Вторая мировая война)
-
Контекст: Тяжелые потери бомбардировщиков союзников от огня противника побудили военных предложить усиление самолетов броней. Однако броня увеличивает вес, снижая дальность полета, маневренность и бомбовую нагрузку. Ее требовалось разместить оптимально.
-
Что произошло: Военные собрали данные о повреждениях самолетов, вернувшихся с боевых заданий, и передали задачу Группе статистических исследований. В популярном пересказе командиры хотели бронировать фюзеляж, крылья и хвост, куда приходилось больше всего попаданий, а Вальд их остановил. Ни один сохранившийся документ не содержит записей о таком предложении военных или о возражении Вальда; Кассельман (2016) установил, что меморандумы не содержат никаких рекомендаций.
-
Действие искажения: Меморандумы Вальда действительно содержат ту логику, которую драматизирует легенда. Данные представляли только выжившие самолеты. Борты, пораженные в жизненно важные узлы, не возвращались, поэтому попадания в эти зоны были недопредставлены в выборке. Вальд воспринял «отсутствующие» пробоины как информацию и построил уравнения, оценивающие летальность попадания в каждую секцию по тому, насколько редко такие пробоины встречаются у вернувшихся машин.
-
Последствия: Меморандумы были переизданы Центром военно-морского анализа в 1980 году и обобщены Мангелом и Саманьего в 1984 году; сегодня они служат классическим учебным примером корректировки выборки выживших. Какие именно решения по бронированию последовали за этим на практике, в документах не зафиксировано.
-
Извлеченные уроки: Анализируя результаты, всегда спрашивайте себя: «Что произошло со случаями, которых я не вижу?» Отсутствие свидетельств само по себе может служить свидетельством важнейшего феномена.
Пример 2: Открытие в индустрии паевых фондов (1990-е годы)
- Контекст: Десятилетиями велись споры о том, могут ли активные управляющие фондами стабильно опережать рынок («генерировать альфу»). Ранние исследования предполагали, что могут.
- Что произошло: Исследователи Браун, Гетцман, Элтон, Грубер и Блейк обнаружили, что финансовые базы данных регулярно удаляли записи о ликвидированных или объединенных фондах. Поскольку фонды почти всегда закрываются из-за плохой результативности, базы данных систематически удаляли неудачи.
- Действие искажения: Это усечение создавало статистический мираж, в котором оставшиеся «выжившие» фонды казались имеющими более высокую среднюю доходность и демонстрировали видимую связь между волатильностью и результативностью, которая имитировала мастерство.
- Последствия: Как только была внесена поправка на ежегодное искажение в 0,9%, видимое превосходство многих активных управляющих исчезло, что оказало сильную поддержку Гипотезе эффективного рынка и революционизировало то, как финансовые исследования работают с историческими данными.
- Извлеченные уроки: Любой набор данных с выбытием, закрытием или исчезновением должен быть проанализирован на предмет ошибки выжившего. То, что выглядит как мастерство или превосходство, может быть артефактом цензурированной выборки.
Исторический пример: Диагор и храмовые таблички
Древнегреческому поэту Диагору Мелосскому показали в храме обетные таблички: картины, заказанные моряками, которые молились богам и пережили кораблекрушение. Его друг представил это как доказательство божественной защиты.
Ответ Диагора стал основополагающим текстом в философии вероятности: «Я вижу тех, кто был спасен, но где нарисованы те, кто потерпел кораблекрушение?»
Утонувшие моряки не могли заказать картины. Наблюдатель, изучающий только доказательства в храме, пришел бы к выводу, что молитва гарантирует спасение. Такой вывод строился исключительно на цензурированной выборке, где сама возможность оставить свидетельство зависела от выживания.
Этот анекдот 2500-летней давности инкапсулирует, почему ошибка выжившего так пагубна: выжившие — единственные, кто может рассказать свою историю.
6. Цена этого искажения
6.1. Личные издержки
Искаженная оценка риска: Видя только успешных рисковых людей, индивидуумы недооценивают вероятность неудачи. Бросивший колледж студент, который не стал миллиардером, предприниматель, обанкротившийся, «делая все правильно», инвестор, потерявший капитал на «верном деле», — весь их опыт скрыт, что толкает других на плохо просчитанные риски.
Неверно атрибутированные факторы успеха: Люди перенимают поведение выживших (настойчивость, склонность к риску, уверенность), не осознавая, что те же черты присутствовали и у потерпевших неудачу. Годы могут быть потрачены на стратегии, которые никогда не были фактическими отличительными факторами.
Потраченные впустую ресурсы на имитацию: Следование «формулам успеха», выведенным из данных, подверженных ошибке выжившего, приводит к вложению усилий в подходы, которые на самом деле не определяют успех, а лишь коррелируют с ним в видимой выборке.
Поврежденная самооценка: Когда следование советам выживших не приводит к успеху, люди могут винить себя, а не признавать, что совет был основан на ошибочных данных.
6.2. Профессиональные издержки
Инвестиционные потери: В финансах ошибка выжившего оценивается примерно в 0,9-4,4% завышения годовой доходности. Инвесторы, принимающие решения на основе нескорректированных исторических данных, систематически переоценивают ожидаемую доходность и недооценивают риски.
Стратегическое заблуждение: Бизнес-стратегии, выведенные из изучения успешных компаний, упускают компании, которые использовали идентичные стратегии и потерпели неудачу. Ресурсы направляются на подходы, которые кажутся проверенными, но могут быть случайными.
Решения о найме и талантах: Профили, основанные на успешных сотрудниках, упускают потенциально отличных кандидатов, которые отличаются от видимого паттерна, в то время как наем тех, кто соответствует профилю, может копировать черты, не связанные с фактической эффективностью.
Неудачи в разработке продуктов: Изучение успешных продуктов без изучения аналогичных неудачных продуктов приводит к инвестициям в функции или подходы, которые на самом деле не были факторами успеха.
6.3. Общественные издержки
Историческое недопонимание: История, написанная выжившими, представляет искаженные точки зрения. Утраченные перспективы, альтернативные подходы и предупреждения побежденных систематически исключаются из коллективной памяти.
Ошибочные политические решения: Политика, основанная на изучении успешных исходов (экономических, социальных, военных) без учета неудач с аналогичными характеристиками, ведет к ошибочным вмешательствам.
Создание культурных мифов: Нарратив «селф-мейд успеха», усиленный ошибкой выжившего, скрывает роль удачи, времени и обстоятельств, формируя отношение к неравенству и социальной мобильности.
Ошибки в медицинских протоколах: Решения о лечении, основанные на данных выживших, могут упустить из виду, что некоторые пациенты недополучили лечение, или что успешные исходы были вопреки, а не благодаря конкретным вмешательствам.
6.4. Статистическое влияние
| Сфера | Оцененное влияние искажения | Источник |
|---|---|---|
| Паевые фонды | ~0,9% завышения годовой доходности | Элтон, Грубер, Блейк (1996) |
| Хедж-фонды | ~4,4% завышения годовой доходности | Малкиел и Саха (2005) |
| «Травмы» от касок (ПМВ) | 100%+ увеличение зарегистрированных травм головы (на самом деле спасенные жизни) | Военные медицинские записи |
| «Мастерство» активных фондов | Существенное: большая часть видимой альфы устранена после корректировки | Браун, Гетцман и др. (1992) |
7. Скрытые преимущества
Ошибка выжившего не является исключительно негативной: она выполняла адаптивные функции и по-прежнему полезна в определенных контекстах.
Эффективная эвристика обучения: В стабильных средах с непосредственно наблюдаемыми результатами обучение у выживших происходит быстро и достаточно точно. Если большинство конструкций укрытий, которые сработали у ваших соседей, сработают у вас, копирование выживших эффективно.
Мотивационная функция: Некоторое знакомство с историями успеха обеспечивает мотивацию и модели для подражания. Полное осознание всех неудач может парализовать. Ключ кроется в калибровке воздействия, а не в его устранении.
Быстрое принятие решений: Когда скорость важнее точности, использование доступных примеров (по своей сути подверженных ошибке выжившего) может быть лучше, чем отложенный анализ. Не каждое решение заслуживает полного исследования.
Легитимное обнаружение паттернов: Иногда черты выживших действительно являются причинными, а не просто коррелируют. В областях, где режимы неудач случайны, а факторы успеха систематичны, выжившие действительно несут реальную информацию.
Нежелательная крайность: Полное устранение ошибки выжившего потребовало бы исчерпывающего анализа всех возможных неудач до принятия любого решения. Это когнитивно невозможно и практически парализует. Цель состоит в осознании и соразмерной коррекции, а не в полном устранении.
8. Самооценка: Подвержены ли вы этому искажению?
8.1. Контрольный список тревожных признаков
- Вы часто приводите успешных людей (Джобс, Гейтс, Маск) в качестве доказательства жизненных/карьерных стратегий
- Вы верите, что прошлые продукты/музыка/мастерство были в целом лучше сегодняшних
- Вы принимали важные решения, основываясь на изучении только успешных примеров
- Вы редко спрашиваете: «Что случилось с теми, кто попробовал это и потерпел неудачу?»
- Вы принимаете исторические данные о результативности фондов/инвестиций за чистую монету
- Вы верите, что «успех оставляет следы», которые можно надежно извлечь у победителей
- Вы отвергаете удачу/время как значимые факторы в историях успеха, которыми восхищаетесь
- Вы давали советы на основе того, что сработало для вас, не рассматривая других, для кого это не сработало
- Вы находите книги/подкасты «Как я добился успеха» весьма убедительными
- При анализе решений вы концентрируетесь на результатах, а не на процессе, который к ним привел
Оценка:
- 0-2 отмечено: Низкая подверженность
- 3-5 отмечено: Умеренная подверженность
- 6-8 отмечено: Высокая подверженность
- 9-10 отмечено: Очень высокая подверженность
8.2. Вопросы для саморефлексии
- Когда в последний раз вы активно искали истории неудач, прежде чем принять важное решение?
- Вспомните достигнутый вами успех: сколько других людей пробовали аналогичные подходы и потерпели неудачу? Знаете ли вы это наверняка?
- В какие «очевидные» факторы успеха вы верите? Как бы вы проверили, присутствуют ли эти факторы также в неудачах?
- Получая советы от успешных людей, задумываетесь ли вы, сколько неуспешных людей давали те же советы?
- Указывал ли кто-нибудь когда-либо, что вы делаете выводы на основе неполных данных? Как вы отреагировали?
8.3. Быстрый диагностический сценарий
Сценарий: Вы рассматриваете возможность открытия бизнеса и прочитали, что 60% компаний в вашей отрасли, которые фокусировались на обслуживании клиентов, пережили свои первые 5 лет. Это кажется сильным доказательством того, что фокус на обслуживании клиентов является ключом к выживанию.
Как бы вы это интерпретировали?
- A) «Отлично! Мне точно следует сосредоточиться на обслуживании клиентов: данные ясно показывают, что это работает». → Высокая подверженность
- B) «Интересно, но мне интересно, какой процент обанкротившихся компаний также ставил обслуживание клиентов в приоритет.» → Умеренная подверженность
- C) «Это мне ничего не говорит, если я не знаю показателей обслуживания клиентов среди обанкротившихся компаний. Если 60% неудачников также фокусировались на обслуживании клиентов, этот фактор не имеет предсказательной ценности.» → Низкая подверженность
9. Выявление этого искажения у других
9.1. Поведенческие индикаторы
В речи:
- Частое использование известных историй успеха в качестве универсального доказательства
- Обобщения на основе небольших выборок видимых победителей
- Игнорирование факторов удачи/времени в нарративах успеха
- Экстраполяция из «того, что работает» без признания невидимых неудач
В принятии решений:
- Чрезмерная зависимость от тематических исследований успешных компаний/людей
- Недооценка базовых ставок и частот неудач
- Бенчмаркинг исключительно по успешным конкурентам
- Доверие историческим данным о результативности без сомнения в сборе данных
В спорах:
- Использование наличия успешных примеров как доказательства обоснованности стратегии
- Аргументация "X сработал для Y" без учета Z, для которых X не сработал
- Интерпретация отсутствия доказательств (нет известных неудач) как доказательства отсутствия
9.2. Разговорные красные флаги
Фразы, которые люди произносят, находясь под влиянием этого искажения:
- «Посмотри на [известный пример успеха]: они сделали X, и это сработало!»
- «Все знакомые мне успешные люди обладают чертой Y.»
- «Данные показывают, что у этого подхода отличный послужной список.»
- «Раньше делали лучше.»
- «Каждая великая компания обладает этой характеристикой.»
Типы аргументов, которые они приводят:
- Индукция из видимого успеха без учета доли неудач
- «Доказательство на примере» с использованием исключительно выживших случаев
Вопросы, которых они избегают задавать:
- «Сколько людей попробовали этот подход и потерпели неудачу?»
- «Какова базовая ставка успеха для этой стратегии?»
- «Почему мы можем не видеть неудач в этом наборе данных?»
9.3. Ситуационные триггеры
Обстоятельства, активирующие искажение:
- Доступ к отобранным историям успеха (СМИ, книги, конференции)
- Анализ баз данных с механизмами выбытия/закрытия/удаления
- Любая оценка, где неудачи исчезают из поля зрения
- Ретроспективный анализ текущих лидеров рынка
Эмоциональные состояния, повышающие уязвимость:
- Оптимизм по поводу уже принятого решения
- Желание оправдать подход
- Восхищение успешной фигурой
Нехватка времени:
- Срочность снижает вероятность поиска опровергающих (неудачных) данных
- Дедлайны благоприятствуют доступным примерам, а не исчерпывающему поиску
10. Стратегии когнитивного дебиасинга
10.1. Немедленные методы
Вопрос Диагора: Перед любым решением, основанным на примерах успеха, прямо спросите: «Где потерпевшие кораблекрушение?» Кто попробовал это и потерпел неудачу? Почему я их не вижу?
Инверсия данных: При предъявлении характеристик выживших мысленно сконструируйте «кладбище неудач». Будут ли неудачные случаи иметь те же черты? Если неизвестно, данные неполны.
Проверка базовой ставки: Перед экстраполяцией из успехов оцените знаменатель. «Из всех, кто пробовал этот подход, какая часть преуспела?» Если неизвестно, признайте неопределенность.
Инвентаризация режимов отказов: Перечислите все способы, которыми анализируемые примеры могли потерпеть неудачу и исчезнуть. Обанкротившиеся автоконцерны, закрывшиеся рестораны, ликвидированные фонды: куда они делись?
Подвергание сомнению источника: Для любого набора данных спросите: «Каков механизм выбытия/удаления/выживания?» Как удаляются неудачи? Это раскрывает структуру искажения.
10.2. Долгосрочные стратегии
Намеренное изучение неудач: Ищите постмортемы, анализы банкротств, истории неудачных стартапов. Ресурсы вроде «Постмортемов отказов стартапов» CB Insights предоставляют немые свидетельства, которых обычно не хватает.
Практика пре-мортема: Перед началом проектов проводите «пре-мортемы»: представьте, что проект уже провалился, и двигайтесь в обратном направлении, выявляя скрытые причины. Это развивает навык визуализации неудач.
Калибровка вероятности: Практикуйтесь в оценке базовых ставок, прежде чем смотреть данные. Отслеживайте свою точность. Это развивает интуицию относительно того, как часто видимые показатели успеха завышают истинные показатели.
Исторические контрфактуалы: При изучении истории активно рассматривайте альтернативные сценарии: что могло произойти, кто почти добился успеха, какие другие исходы были вероятны. Нассим Талеб называет это «альтернативными историями».
10.3. Дизайн среды
Инфраструктура данных: Используйте «моментальные» наборы данных, которые сохраняют записи о неудачах на тот момент, когда они существовали, а не базы данных текущего состояния, которые показывают только выживших.
Библиотеки неудач: Управление организационными знаниями должно архивировать неудачные проекты, а не только успешные. Постмортемы должны быть так же доступны, как и примеры успешных кейсов.
Протоколы «адвоката дьявола»: Институционализируйте роли, которые специально ищут опровергающие доказательства и недостающие данные о неудачах в стратегических решениях.
Разнообразные консультационные сети: Включайте в свой круг советников людей, которые потерпели неудачу. Их перспектива предоставляет «немое свидетельство», которого обычно не хватает.
10.4. Когда искать внешнее мнение
Типы решений, требующие внешней валидации:
- Крупные инвестиции на основе исторических данных о результативности
- Стратегические решения на основе анализа конкурентов
- Решения о карьере/жизни на основе историй успеха
- Медицинские решения на основе данных об исходах лечения
К кому обращаться:
- Статистики, знакомые с ошибкой отбора
- Люди, которые потерпели неудачу в подходе, который вы рассматриваете
- Исследователи, изучающие уровень неудач в конкретной области
- Адвокаты дьявола, которым поручено найти недостающие данные
Как формулировать запросы:
- «Каков здесь знаменатель?»
- «Что случилось с теми, кто пробовал это и потерпел неудачу?»
- «Как собираются эти данные, и что заставляет случаи исчезать?»
11. Практические упражнения
Упражнение 1: Прогулка по кладбищу неудач
- Цель: Развить интуицию относительно невидимых неудач
- Требуемое время: 45 минут
- Необходимые материалы: Доступ в интернет, блокнот
- Уровень сложности: Начальный
- Инструкции:
- Выберите область, которая вам интересна (стартапы, рестораны, продукты и т.д.)
- Определите 5 известных успехов в этой области
- Для каждого успеха найдите 3 современников, которые пробовали аналогичные подходы и потерпели неудачу
- Отметьте, какие черты/стратегии неудачи разделяли с успехами
- Задокументируйте, почему неудачи обычно невидимы (банкротство, приобретение, удаление и т.д.)
- Вопросы для рефлексии:
- Насколько сложно было найти неудачи?
- Какие «факторы успеха» появились как в успехах, так и в неудачах?
- Как это меняет ваш взгляд на то, что вызвало успех?
- Частота: Ежемесячно, особенно перед принятием важных решений
Упражнение 2: Вскрытие набора данных
- Цель: Научиться выявлять ошибку выжившего в источниках данных
- Требуемое время: 60 минут
- Необходимые материалы: Доступ к набору данных, который вы используете (финансовые, бизнес, данные об эффективности)
- Уровень сложности: Средний
- Инструкции:
- Выберите набор данных, на который вы полагаетесь при принятии решений
- Задокументируйте методологию сбора данных
- Определите все механизмы, с помощью которых записи могут быть удалены (закрытие, слияние, удаление, отсутствие отчетности)
- Оцените, какой процент исходной популяции может отсутствовать
- Подумайте, чем отсутствующие данные могут отличаться от сохранившихся
- Вопросы для рефлексии:
- Что изменилось бы, если бы вы могли видеть недостающие данные?
- Насколько вы должны быть уверены в выводах, сделанных на основе этих данных?
- Какие корректировки могли бы быть уместны?
- Частота: При каждом использовании исторических данных для принятия решений
Упражнение 3: Ритуал пре-мортема
- Цель: Систематическая визуализация неудачи до того, как она станет невидимой
- Требуемое время: 30 минут
- Необходимые материалы: Бумага, таймер
- Уровень сложности: Продвинутый
- Инструкции:
- Перед началом проекта соберите команду
- Установите таймер на 20 минут
- Представьте, что прошел один год с сегодняшнего дня, и проект полностью провалился
- Каждый человек записывает все причины его провала (сначала самостоятельно)
- Поделитесь и консолидируйте режимы отказов
- Вопросы для рефлексии:
- Какие режимы отказов наиболее вероятны?
- Какие неудачи не оставили бы никаких доказательств для будущих аналитиков?
- Как вы можете предотвратить превращение в невидимые неудачные данные?
- Частота: В начале каждого значимого проекта
Ежедневная практика
Вечерний вопрос о неудаче: Каждый вечер анализируйте одно принятое вами решение и спрашивайте: «Каких неудач я не вижу, которые должны повлиять на это?»
- Рекомендуемая продолжительность: 5 минут
- Лучшее время дня: Вечер
- Как отслеживать прогресс: Записывайте одно озарение о «скрытой неудаче» в день
Еженедельное испытание
Охота за немыми свидетельствами: Каждую неделю выбирайте одно убеждение, которое вы разделяете на основе видимых доказательств, и активно ищите «немое свидетельство», которое может ему противоречить.
- Ожидаемые результаты через 4 недели: Значительно улучшенная интуиция в отношении вопроса «чего не хватает» и снижение уверенности в выводах из данных, доступных только для видимости
- Вопросы для дневника для рефлексии:
- Какое убеждение я исследовал на этой неделе?
- Какие немые свидетельства я обнаружил?
- Как их обнаружение изменило мой уровень уверенности?
12. Для конкретных аудиторий
Для лидеров и менеджеров
Стратегическое планирование: При анализе успехов конкурентов поручите стратегическим командам также изучать конкурентов, которые использовали аналогичные стратегии и потерпели неудачу. Неудачи могут показать, что наблюдаемые «факторы успеха» не являются причинными.
Постпроектный анализ: Архивируйте и изучайте неудачные проекты так же тщательно, как и успешные. Обучение на неудачах часто более ценно, и без намеренного сохранения оно исчезает.
Решения о найме: Будьте осторожны с профилями, полученными от лучших сотрудников. Рассмотрите, какие кандидаты были отвергнуты, но могли бы преуспеть, и какие сотрудники соответствовали профилю, но потерпели неудачу и ушли.
Документирование решений: Записывайте не только результаты, но и информацию и аргументацию во время принятия решения. Это позволяет проводить честную оценку, даже когда неудачи «исчезают» из-за увольнений, реструктуризации или пересмотра.
Создание культуры: Празднуйте и открыто обсуждайте неудачи. Это сохраняет их видимыми в памяти организации, а не безмолвными.
Для родителей и педагогов
Обучение концепции: Используйте историю Диагора: она понятна детям. Спросите: «Если мы слышим голоса только тех, кто победил, чего мы не замечаем?»
Баланс историй успеха: Делясь вдохновляющими историями, также делитесь историями неудач. «Многие люди пробовали именно то, что сделала она, и это не сработало. Что могло иметь значение?»
Естественнонаучное образование: Ошибка выжившего служит отличным путем к пониманию выборки, отбора и планирования эксперимента. Используйте пример с бомбардировщиками времен Второй мировой войны. Он яркий и парадоксальный, а также несет второй урок: расскажите учащимся, что история об изменении решения о бронировании — это легенда, основанная на реальном методе, и спросите их, как бы они это проверили.
Моделирование открытости неудач: Делитесь собственными неудачами и тем, чему они вас научили. Делайте неудачу обсуждаемой, а не невидимой.
Для медицинских работников
Интерпретация клинических испытаний: Будьте внимательны к паттернам выбытия. Пациенты, прекращающие лечение, могут систематически отличаться от тех, кто продолжает. Анализ по намерению лечить частично решает эту проблему.
Оценка исторических методов лечения: «Традиционные» методы лечения, выдержавшие «испытание временем», могут быть просто выжившими. Неэффективные методы лечения, от которых отказались, не оставляют доказательств.
Диагностическое распознавание образов: Запоминающиеся случаи (выжившие в памяти) могут не отражать базовые ставки. Активно вспоминайте случаи с другими исходами при сопоставлении с паттернами.
Статистика смертности: Поймите, как исключения «мертвых по прибытии», паттерны перевода и практики документирования создают ошибку выжившего в данных об исходах.
Для финансовых специалистов
Гигиена баз данных: Всегда используйте базы данных без ошибки выжившего, когда они доступны. Для стандартных баз данных применяйте известные поправочные коэффициенты (например, ~0,9% для паевых фондов).
Коммуникация с клиентами: При демонстрации исторической результативности объясняйте, чего не хватает. «Этот индекс показывает компании, которые существуют сегодня. Компании, потерпевшие неудачу, не включены, что делает прошлые показатели лучше, чем они были.»
Скептицизм к бэктестингу: Моментальные данные (point-in-time) имеют решающее значение. Любой бэктест по текущему составу индекса фактически предполагает стопроцентное выживание, что в реальности заведомо невозможно.
Комплексная проверка хедж-фондов: Учитывайте как ошибку выжившего, так и ошибку ретроспективного заполнения. Совокупный эффект (~4,4% ошибки выжившего по оценке Малкиела и Сахи плюс ошибка ретроспективного заполнения) означает, что заявленная средняя результативность хедж-фондов существенно завышает реальность.
13. Взаимодействие с другими искажениями
Искажения, усиливающие ошибку выжившего
| Искажение | Как оно взаимодействует |
|---|---|
| Эвристика доступности | Делает выживших еще более заметными в памяти; неудачи невидимы вдвойне (удалены из данных И из легкого воспоминания) |
| Склонность к оптимизму | Побуждает идентифицировать себя с выжившими, а не реалистично оценивать вероятность неудачи |
| Предвзятость подтверждения | Приводит к поиску историй успеха, которые подтверждают существующие убеждения, при игнорировании опровергающих доказательств неудач |
| Ошибка ретроспекции | Делает успех выжившего «очевидным» задним числом, скрывая роль удачи и правдоподобность неудачи |
| Нарративное заблуждение | Создает убедительные истории из данных о выживших, которые кажутся объясняющими, но упускают фактические (невидимые) причинные факторы |
Искажения, противодействующие ошибке выжившего
| Искажение | Как оно помогает |
|---|---|
| Склонность к пессимизму | Естественная тенденция ожидать негативных исходов может уравновесить чрезмерное внимание к видимым успехам |
| Неприятие потерь | Повышенное внимание к потенциальным потерям может мотивировать поиск примеров неудач |
Распространенные цепочки искажений
Каскад подражания успеху: Ошибка выжившего (видим только победителей) → Эвристика доступности (победители доминируют в памяти) → Нарративное заблуждение (создание причинно-следственной истории из черт победителя) → Чрезмерная уверенность (вера в то, что история объясняет успех) → Предвзятость подтверждения (поиск доказательств, подтверждающих историю) → Неправильная оценка риска (недооценка вероятности неудачи)
Точка прерывания: Цепочку можно разорвать на раннем этапе, прямо спросив «Где неудачи?», прежде чем сформируется нарратив. Как только создается убедительная история, ее становится гораздо сложнее разрушить.
14. Культурные перспективы
Ошибка выжившего проявляется во всех культурах, но может усиливаться или сглаживаться культурным контекстом.
Индивидуалистические и коллективистские культуры: В высокоиндивидуалистических культурах (например, в США) нарратив «селф-мейд успеха» особенно заметен, что потенциально усиливает ошибку выжившего в контексте личных достижений. В коллективистских культурах неудачи могут быть более видимыми внутри групп, что частично сглаживает искажение.
Культуры с высокой дистанцией власти: В культурах с высокой дистанцией власти успехи могут отмечаться еще больше, в то время как неудачи скрываются во избежание позора, что потенциально увеличивает видимость исходов только для выживших.
Отношение к риску: Культуры с более высокой толерантностью к риску могут быть более склонны извлекать уроки от видимых любителей риска, в то время как культуры, не склонные к риску, могут естественным образом искать больше данных о неудачах.
| Тип культуры | Проявление |
|---|---|
| Индивидуалистические культуры | Сильные нарративы «селф-мейд успеха»; фокус на знаменитых предпринимателях усиливает искажение |
| Коллективистские культуры | Истории успеха группы на видном месте; знание о неудачах внутри группы может сгладить искажение |
| Культуры с высоким контекстом | Неявное знание о неудачах может циркулировать неформально, частично компенсируя искажение видимого успеха |
| Культуры с низким контекстом | Доминируют явные, задокументированные случаи успеха; неудачи требуют намеренного документирования, чтобы быть видимыми |
15. Мифы и заблуждения
| Миф | Реальность |
|---|---|
| «Это искажение влияет только на статистику и финансы» | Ошибка выжившего влияет на историю, медицину, дизайн продуктов, планирование карьеры, советы по отношениям и практически любую область, где результаты варьируются, а неудачи исчезают |
| «Наблюдение за успехами безвредно: в худшем случае вы изучаете хорошие практики» | Опасно неверно. Успешные случаи могут иметь общие черты с неудачами, что приводит к ложной атрибуции и рискованной имитации факторов, которые не влияют на результат |
| «Если что-то прослужило долго, оно должно быть хорошим» | Долговечные выжившие могут быть просто удачливыми исключениями. Тысячи современных им продуктов, зданий и практик, потерпевших неудачу, невидимы |
| «Успешные люди служат лучшим источником советов» | Они являются единственным видимым источником, но не обязательно лучшим. Их советы могут описывать особенности, присущие и проигравшим, которым просто меньше повезло |
| «Ошибку выжившего можно исправить, просто зная о ней» | Осведомленность помогает, но ее недостаточно. Для точного анализа часто необходимы количественные поправки (Хекман, IPW, Каплан-Мейер) |
| «Вальд посоветовал военным ставить броню туда, где нет пробоин» | Его меморандумы 1943 года оценивают летальность попадания в каждую часть самолета по повреждениям выживших машин; они не содержат никаких рекомендаций. Кассельман (2016) не нашел записей о предполагаемом предложении военных или о возражении Вальда. Математический метод реален, но эффектный диалог добавлен позднее |
16. Мнения экспертов
Цицерон рассказывает, как Диагору Мелосскому показали обетные картины с моряками, пережившими бури, в доказательство того, что боги отвечают на молитвы, а Диагор спросил, где картины тех, кто потерпел кораблекрушение и утонул. — Краткое изложение: Cicero, О природе богов (De Natura Deorum, 45 BCE), Book III, sec. 89
Нассим Николас Талеб утверждает, что мы видим успешных и упускаем из виду тех, кто потерпел неудачу и не оставил следа, и называет это немыми свидетельствами, поэтому заметные успехи искажают наше представление о том, что работает. — Краткое изложение: Nassim Nicholas Taleb, Черный лебедь (The Black Swan: The Impact of the Highly Improbable, 2007), Chapter 8
«...особое и вечное заблуждение человеческого разума состоит в том, что он больше движим и возбуждается утверждениями, чем отрицаниями, тогда как ему следовало бы относиться к тем и другим одинаково беспристрастно». — Фрэнсис Бэкон, Новый Органон (1620), Book I, Aphorism 46, англ. пер. Spedding, Ellis & Heath
«[SRG была] самой выдающейся группой статистиков, когда-либо собранной». — W. Allen Wallis, "The Statistical Research Group, 1942-1945," Journal of the American Statistical Association 75(370) (1980), pp. 320-330 https://doi.org/10.1080/01621459.1980.10477469
17. Ключевые выводы
-
Ошибка выжившего универсальна и стара как мир: распознана Диагором 2 500 лет назад, формализована Вальдом во время Второй мировой войны и количественно оценена в современных финансах (0,9% в год для паевых фондов, около 4,4% для хедж-фондов по оценке Малкиела и Сахи).
-
Искажение создает систематически обманчивые данные: не просто неполные, но активно вводящие в заблуждение, потому что отсутствие неудач меняет форму видимого распределения.
-
Отсутствующие сведения часто оказываются самыми важными. Метод Вальда, который трактует «отсутствующие» пробоины как попадания в самолеты, которые так и не вернулись, служит эталоном для любого анализа ошибки выжившего; история об изменении решения о бронировании не подтверждена документами, поэтому ссылайтесь на метод, а не на легенду.
-
Финансовое влияние поддается количественной оценке: примерно 0,9% в год для паевых фондов, 4,4% для хедж-фондов и неизвестное, но существенное завышение при ошибках бэктестинга.
-
Противоядием служит активный поиск невидимого: постоянный вопрос «Где погибшие при кораблекрушении?» и есть та дисциплина, которая защищает от этого искажения.
-
Методы коррекции существуют: коррекция Хекмана, обратное взвешивание вероятности (IPW), оценка Каплана-Мейера и базы данных с историческим срезом (point-in-time) позволяют частично устранить искажение.
-
Видимость не означает обоснованность: легкость, с которой мы наблюдаем успешные примеры, ничего не говорит о том, насколько они репрезентативны для генеральной совокупности.
18. Дополнительные ресурсы
Академические статьи
- Brown, S. J., Goetzmann, W., Ibbotson, R. G., & Ross, S. A. (1992). Survivorship Bias in Performance Studies. Review of Financial Studies, 5(4), 553-580. https://doi.org/10.1093/rfs/5.4.553
- Elton, E. J., Gruber, M. J., & Blake, C. R. (1996). Survivorship Bias and Mutual Fund Performance. Review of Financial Studies, 9(4), 1097-1120. https://doi.org/10.1093/rfs/9.4.1097
- Wald, A. (1943). A Method of Estimating Plane Vulnerability Based on Damage of Survivors. Statistical Research Group Memorandum (reprinted by the Center for Naval Analyses, 1980).
- Mangel, M., & Samaniego, F. J. (1984). Abraham Wald's Work on Aircraft Survivability. Journal of the American Statistical Association, 79(386), 259-267. https://doi.org/10.1080/01621459.1984.10478038
- Malkiel, B. G., & Saha, A. (2005). Hedge Funds: Risk and Return. Financial Analysts Journal, 61(6), 80-88. https://doi.org/10.2469/faj.v61.n6.2775
- Casselman, B. (2016). The Legend of Abraham Wald. AMS Feature Column, American Mathematical Society, June 2016.
Книги
- Taleb, N. N. (2001). Fooled by Randomness: The Hidden Role of Chance in Life and in the Markets. Random House.
- Taleb, N. N. (2007). The Black Swan: The Impact of the Highly Improbable. Random House.
- Kahneman, D. (2011). Thinking, Fast and Slow. Farrar, Straus and Giroux.
Главы из книг
- Bacon, F. (1620). Idols of the Tribe. In Novum Organum.
- Cicero. (45 BCE). De Natura Deorum [On the Nature of the Gods]. Book III (contains the Diagoras anecdote).
19. Сводная карточка
| Элемент | Содержание |
|---|---|
| Название искажения | Ошибка выжившего |
| Определение | Ошибка концентрации только на выживших примерах при игнорировании исчезнувших неудач |
| Категория | Недостаточно смысла |
| Ключевой признак | Формулирование выводов исключительно на основе историй видимого успеха |
| Главная причина | Неудачи систематически исчезают из поля зрения (из-за гибели, банкротства, удаления и т.д.) |
| Наибольший риск | Масштабная недооценка вероятности провала и ложное определение факторов успеха |
| Быстрое решение | Спрашивать: «Где погибшие при кораблекрушении?» перед каждым выводом из данных об успехе |
| Долгосрочная стратегия | Создавать системы сохранения и учета данных о неудачах; использовать статистические методы коррекции |
| Помните | «Самые важные данные почти всегда отсутствуют». |
20. Глоссарий используемых терминов
| Термин | Определение |
|---|---|
| Усечение (Truncation) | Когда наблюдения полностью исключаются из выборки, если они попадают ниже или выше определенного порога |
| Цензурирование (Censoring) | Когда значение измерения известно лишь частично (например, известно, что пациент умер, но не известно, сколько бы он прожил) |
| Немое свидетельство (Silent Evidence) | Точки данных, которые невозможно наблюдать, потому что их отсутствие вызвано изучаемым явлением |
| Базовая ставка (Base Rate) | Базовая частота события в популяции до учета какой-либо конкретной информации |
| Эвристика доступности (Availability Heuristic) | Ментальный ярлык, который опирается на немедленные примеры, приходящие на ум при оценке темы |
| Коррекция Хекмана (Heckman Correction) | Двухэтапный статистический метод для коррекции ошибки отбора в неслучайно отобранных выборках |
| Обратное взвешивание вероятности (IPW) | Взвешивание выживших наблюдений обратно пропорционально их вероятности выживания для представления потерянных аналогов |
| Оценка Каплана-Мейера (Kaplan-Meier Estimator) | Статистический метод оценки вероятности выживания, который работает с цензурированными данными |
| Ошибка ретроспективного заполнения (Backfill Bias) | Когда фонды отчитываются только после достижения раннего успеха, «заполняя» задним числом хорошие данные и скрывая ранние неудачи |
| Лудическое заблуждение (Ludic Fallacy) | Неправильное использование статистических моделей в областях, где граничные условия неизвестны или скрыты искажением |
21. Вопросы для обсуждения
Для книжных клубов, учебных классов или саморефлексии:
-
Можете ли вы вспомнить важное жизненное решение, которое вы приняли, основываясь преимущественно на видимых историях успеха? Какие неудачи вы не могли увидеть?
-
Согласно легенде, Вальд рекомендовал бронировать места, где пулевых отверстий не было; его меморандумы лишь оценивали, какие попадания были фатальными. В любом случае, каким современным проблемам пошел бы на пользу анализ того, где повреждения не появляются?
-
Как социальные сети, которые подчеркивают успехи и скрывают неудачи, могут усиливать ошибку выжившего при принятии решений о карьере и жизни?
-
Есть ли какой-либо способ по-настоящему «увидеть» неудачи, или мы всегда работаем с данными, подверженными ошибке выжившего? Каковы пределы методов коррекции?
-
Талеб утверждает, что советы успешных людей могут быть не более валидными, чем советы неудачников. Как нам следует думать о наставничестве и обучении у других с учетом этого искажения?