Предвзятость выжившего

Предвзятость выжившего (англ. survivorship bias) — это разновидность систематической ошибки отбора, при которой выводы делаются на основе данных только о тех объектах или явлениях, которые «выжили» или прошли некий отбор, при этом игнорируются объекты, исчезнувшие или не прошедшие отбор. Данная когнитивная искажённость приводит к неверным обобщениям и переоценке вероятности успеха, поскольку статистически значимая информация о «неудачниках» остаётся за пределами анализа.

История открытия и происхождение термина

Термин «предвзятость выжившего» получил широкое распространение после Второй мировой войны, хотя само явление было известно задолго до этого. Классический пример, иллюстрирующий эту ошибку, связан с анализом повреждений самолётов, возвращавшихся с боевых заданий.

Исследование Абрахама Вальда

В 1943 году венгерско-американский математик Абрахам Вальд, работавший в Статистической исследовательской группе (SRG) при Управлении военно-морских операций США, получил задачу: как усилить бронирование бомбардировщиков B-17 и B-24, чтобы снизить потери от огня немецкой зенитной артиллерии. Военные инженеры проанализировали пробоины на самолётах, вернувшихся на базы, и обнаружили, что наибольшее количество повреждений приходится на крылья, фюзеляж и хвостовую часть. Логичным решением казалось усилить броню именно в этих местах.

Однако Вальд указал на фундаментальную ошибку: анализировались только те самолёты, которые вернулись. Машины, получившие критические попадания в двигатели, кабину пилота или топливные баки, не возвращались и не были представлены в выборке. Таким образом, пробоины на «выживших» самолётах указывали на те зоны, где повреждения не были фатальными. Вальд предложил усиливать броню именно там, где пробоин не было, — то есть в тех местах, повреждение которых гарантированно приводило к гибели самолёта. Его рекомендации были приняты, что позволило значительно сократить потери бомбардировочной авиации США.

Этот случай стал классическим примером предвзятости выжившего и впоследствии многократно цитировался в учебниках по статистике, теории вероятностей и военной истории.

Механизм возникновения ошибки

Предвзятость выжившего возникает из-за неполноты данных. В большинстве реальных ситуаций информация о «неудачниках» (погибших, разорившихся, провалившихся) недоступна, неполна или сознательно скрывается. Человеческий мозг, склонный к поиску закономерностей, опирается на видимые успешные примеры, формируя искажённую картину реальности.

Ключевые факторы, способствующие ошибке:

1. Асимметрия доступности данных: Информация об успешных случаях (выживших) всегда более заметна и широко освещается. Неудачи, особенно катастрофические, часто замалчиваются или не документируются.
2. Эффект «выжившего» в выборке: Исследователь невольно формирует выборку только из тех элементов, которые прошли естественный отбор. Это приводит к смещению оценок средних значений, дисперсии и корреляций.
3. Игнорирование базового уровня: Ошибка усугубляется, когда не учитывается общее количество попыток. Например, если 1000 человек начали бизнес, а выжили только 10, то успех этих 10 не является статистически значимым для оценки вероятности успеха в целом.

Примеры проявления в различных областях

Военное дело и техника

Помимо истории с Вальдом, предвзятость выжившего проявляется при анализе эффективности вооружений. Например, изучение трофейной техники противника, захваченной в исправном состоянии, может дать искажённое представление о её надёжности, так как неисправные или уничтоженные образцы не попали в руки аналитиков.

Финансы и инвестиции

В сфере инвестиций предвзятость выжившего проявляется при анализе доходности паевых инвестиционных фондов (ПИФов) или хедж-фондов. Статистика, публикуемая управляющими компаниями, часто включает только те фонды, которые продолжают существовать. Фонды, закрывшиеся из-за убытков или показавшие низкую доходность, исключаются из расчётов, что искусственно завышает среднюю доходность по отрасли. Аналогичная ошибка возникает при анализе успешных трейдеров: публикуются только прибыльные сделки, а убыточные скрываются.

Предпринимательство и стартапы

Книги и статьи об успешных предпринимателях (Стив Джобс, Илон Маск, Ричард Брэнсон) создают иллюзию, что определённые черты характера (рискованность, нестандартное мышление, упорство) гарантируют успех. При этом игнорируются миллионы предпринимателей, обладавших теми же качествами, но потерпевших неудачу. Статистика показывает, что около 90% стартапов закрываются в течение первых трёх лет, однако истории их крахов редко становятся предметом массового изучения.

Медицина и фармакология

В клинических исследованиях предвзятость выжившего может проявляться, если из анализа исключаются пациенты, выбывшие из исследования (например, из-за смерти или тяжёлых побочных эффектов). Если анализировать только тех, кто завершил курс лечения, можно сделать ошибочный вывод о высокой эффективности и безопасности препарата. В онкологии это явление известно как «ошибка выжившего» при оценке выживаемости: пациенты, умершие от других причин, могут быть исключены из расчётов, что искажает истинную картину.

Спорт

В профессиональном спорте предвзятость выжившего проявляется при анализе карьерных траекторий. Например, изучение биографий успешных хоккеистов, которые начинали заниматься в определённой спортивной школе, не учитывает тысячи детей, которые не прошли отбор, получили травмы или бросили спорт. Аналогично, статистика по баскетболистам НБА, имеющим рост выше 200 см, не учитывает всех высоких людей, которые не стали профессиональными спортсменами.

Культура и искусство

В музыке и литературе предвзятость выжившего проявляется в феномене «классики». Мы знаем произведения Моцарта, Бетховена, Шекспира и Толстого, но не знаем тысячи их современников, чьи работы были забыты. Это создаёт ложное впечатление, что в прошлом создавались только шедевры, а современное искусство — «деградирует». На самом деле, соотношение гениальных и посредственных произведений во все времена было примерно одинаковым, но время отсеивает слабые работы.

Повседневная жизнь

В быту предвзятость выжившего проявляется в советах «как добиться успеха» от людей, которые уже добились успеха. Например, миллиардер, утверждающий, что успех пришёл благодаря тому, что он бросил колледж, игнорирует миллионы людей, которые бросили колледж и остались без работы. Аналогично, советы по знакомству от успешного в личной жизни человека не учитывают тех, кто использовал те же методы, но потерпел неудачу.

Критика и ограничения концепции

Хотя предвзятость выжившего является широко признанной когнитивной ошибкой, её применение на практике требует осторожности. В некоторых случаях данные о «неудачниках» действительно недоступны, и исследователь вынужден работать с тем, что есть. В таких ситуациях важно чётко указывать на ограничения выборки и не делать категоричных выводов.

Критики также отмечают, что в ряде областей (например, в эволюционной биологии) «выжившие» — это единственный объект для изучения, так как вымершие виды не оставили прямых потомков. Однако и здесь палеонтологи стараются учитывать тафономические искажения (неполноту летописи окаменелостей).

Методы предотвращения ошибки

Для минимизации влияния предвзятости выжившего в исследованиях и аналитике используются следующие подходы:

1. Сбор полных данных: Необходимо стремиться к получению информации обо всех элементах генеральной совокупности, включая «неудачников». В исторических исследованиях это означает работу с архивами, а не только с мемуарами победителей.
2. Учёт базового уровня: При оценке вероятности события следует учитывать общее количество попыток. Формула Байеса позволяет скорректировать апостериорную вероятность с учётом априорной.
3. Использование контрольных групп: В экспериментальных исследованиях необходимо сравнивать результаты «выживших» с контрольной группой, которая не подвергалась воздействию.
4. Критическое мышление: При чтении историй успеха или рекомендаций «как повторить» следует задавать вопрос: «А что случилось с теми, кто делал то же самое, но не добился успеха?»
5. Мета-анализ: Объединение данных из нескольких независимых исследований позволяет выявить и скорректировать систематические ошибки отбора.

Источники

1. Wald, A. (1943). A Method of Estimating Plane Vulnerability Based on Damage of Survivors. Statistical Research Group, Columbia University.
2. Kahneman, D. (2011). Thinking, Fast and Slow. Farrar, Straus and Giroux.
3. Taleb, N. N. (2007). The Black Swan: The Impact of the Highly Improbable. Random House.
4. Tversky, A., & Kahneman, D. (1974). Judgment under Uncertainty: Heuristics and Biases. Science, 185(4157), 1124–1131.
5. Shermer, M. (2014). The Science of Good and Evil: Why People Cheat, Gossip, Care, Share, and Follow the Golden Rule. Henry Holt and Company.
6. Материалы лекций по статистике и теории вероятностей (МГУ им. М. В. Ломоносова, НИУ ВШЭ).