Confoundle · a reasoning trap

Ошибка выжившего

Легко изучать победителей, выживших, успехи, то, что всё ещё держится, и копировать то, что у них общего. Но неудачи невидимы: они выбыли из данных. Всё, что помогло выжившим уцелеть, выглядит куда более действенным, чем оно есть, потому что вы никогда не видите всех тех, кого оно не спасло. Прежде чем копировать победителей, спросите, кого не хватает.

The rule

Когда вы смотрите только на победителей, неудачи становятся невидимыми, а ведь именно в них часто и заключён настоящий урок.

What it looks like

Бомбардировщики возвращаются изрешечённые пробоинами. Куда добавить броню?Во время Второй мировой войны возвращавшиеся бомбардировщики были усеяны повреждениями, сильнее всего на крыльях и фюзеляже, тогда как двигатели и кабина возвращались почти нетронутыми. Броня тяжёлая, поэтому усилить можно лишь несколько участков.
Броня там, где пробоин нет.Это самолёты, которые добрались домой. Те, кому попали в двигатель или кабину, не вернулись, поэтому их повреждения вообще не попадают в данные. Пробоины на выживших в точности показывают, куда бомбардировщик можно поразить и всё же лететь дальше. Чистые участки, вот они смертельные: их и нужно бронировать.

Why it works

Ошибка выжившего закрадывается всякий раз, когда ваши данные незаметно отфильтрованы так, что в них остаётся лишь то, что «уцелело»: вернувшиеся самолёты, фонды, всё ещё торгующиеся на бирже, компании, всё ещё существующие. Вы никогда не видите тех, кто провалился и выбыл, а поскольку у выживших есть общее то, что помогло им уцелеть, этот признак кажется куда более распространённым или более эффективным, чем он есть на самом деле. Решение, это выискивать недостающую группу и спрашивать, что показала бы полная картина. (Настоящий Вальд сделал больше, чем просто указал на схему: он построил статистический метод, позволяющий оценить уязвимость каждой части по повреждениям выживших.)

Источник

Wald A. A Method of Estimating Plane Vulnerability Based on Damage of Survivors. Statistical Research Group, Columbia University, 1943 (reprinted by the Center for Naval Analyses, 1980). The “armour the clean spots” story popularises Wald's actual statistical method.

See if it fools you

This page gives the answer away. The puzzle version shows you the same figures first and asks you to commit before the reveal.

Play this one