O problema das amostras ou o viés de sobrevivência.

Recebi por aplicativo de mensagens uma tirinha sobre um problema que teria acontecido na segunda guerra. Não sei se o exemplo é real (de acordo com a wikipedia, é), mas vale pela ilustração e poder anedótico.

Diz-se que na segunda guerra mundial os aliados decidiram analisar aviões alvejados para decidir onde aplicar mais reforços/blindagem.

A figura acima ilustraria os pontos mais atingidos. Segundo o causo conta, decidiu-se então reforçar essas áreas. Contudo, o que se observou não foi um aumento no retorno de aviões, pelo contrário. Esse é um exemplo de erro de coleta, tratamento e interpretação de amostras: os aviões que retornavam à base demonstravam, na realidade, os locais onde poderiam ser atingidos sem que isso causasse falhas críticas. Reforçar as áreas marcadas na figura provavelmente não resultaria em incremento na taxa de retorno à base e, possivelmente, pioraria o desempenho das aeronaves sem se traduzir em maior resistência – o que poderia diminuir a quantidade de aviões retornando à base.

Eu, como totalmente leigo, vejo duas questões:

Amostras. Para resolver o problema em questão (diminuir o número de aeronaves perdidas em combate por conta de avarias causadas por tiros) seria preciso ter acesso também a outra amostragem: a dos aviões abatidos. Seria necessário recuperá-los e analisar os poucos que estivessem em condição para tal (os que não explodiram ou espatifaram) mapeando os pontos em que foram atingidos. Bastaria agora cruzar os novos dados com os dados já coletados para tentar chegar a uma conclusão sobre os pontos vitais da aeronave.

Interpretação. No caso exposto, as áreas que precisariam de reforço seriam as que não foram atingidas. Os pontos alvejados nas aeronaves que retornaram à base, apesar de poderem demonstrar quais os pontos mais fáceis de serem atingidos, não se traduzem em avarias que derrubam os aviões. Parece que Abraham Wald foi o estatístico que corrigiu essa falha interpretativa no causo.01

Busquei rapidamente no Google e o caso aparece na Wikipedia como Viés de Sobrevivência.