A diferença entre o público em geral e os profissionais de decisão é que o público (enviesado) julgará a Suécia com base em “como as coisas vão acontecer”, enquanto os profissionais de decisão não o farão. Embora os cientistas da decisão possam diferir em nossas avaliações da situação, apenas julgaremos a Suécia com base no que era conhecido no momento em que as decisões foram tomadas.
O viés de resultado é uma forma socialmente aceitável de irracionalidade em massa.
Muitos de vocês ficarão surpresos ao ouvir isso, pois o viés de resultado é uma forma socialmente aceitável de irracionalidade em massa. Você pode até sentir o início da raiva, principalmente se for educado a acreditar que “como as coisas acontecem” é exatamente a maneira de avaliar a qualidade da decisão *.
Isso é uma ilusão.
Por que coisas ruins acontecem com boas decisões
Quando a vida o força a tomar decisões com informações incompletas, uma boa decisão pode ter um resultado ruim.
Por exemplo, você pode optar por dirigir com segurança (boa decisão) e ainda se encontrar em uma colisão surpresa com um idiota imprudente (mau resultado). Ou você pode optar por dirigir como um idiota imprudente (má decisão) e chegar ao seu destino sem riscos (bom resultado). *
Obter um resultado ruim não significa que você tomou uma decisão ruim.
Qual o sentido de avaliar uma decisão depois de observar o resultado? Você não pode mudar o passado. O melhor que você pode esperar é aprender algo que o ajude no futuro, por exemplo:
Existe algum problema com a maneira como abordo as decisões? Devo mudar meu processo de decisão da próxima vez?
A pessoa responsável é incompetente? Devo substituir o tomador de decisão por alguém mais qualificado?
Ótimo! Nesse caso, a análise de decisão é o campo acadêmico para você … e a primeira regra da análise de decisão é: evitar viés de resultado. Não deixe a retrospectiva mexer com você! A qualidade de uma decisão deve ser avaliada usando apenas as informações disponíveis para o tomador de decisão no momento em que a decisão foi tomada.
Não deixe a retrospectiva mexer com você! Se você avaliar a qualidade de uma decisão pelo resultado, aprenderá as lições erradas.
Se você avaliar a qualidade de uma decisão pelo resultado, aprenderá as lições erradas. Lições como: “Da próxima vez, devo dirigir como um idiota imprudente”. Ou talvez você vote para demitir um tomador de decisão qualificado cujas boas decisões levaram a um resultado ruim, reduzindo assim o suprimento da sociedade de líderes competentes. Escrevi aqui uma explicação detalhada para quem precisa convencer.
Avaliando a política de coronavírus
Como a maneira correta de avaliar a qualidade da decisão é observar apenas as informações disponíveis para os tomadores de decisão no momento em que atuaram, há boas notícias para os entusiastas da política COVID-19: se você deseja analisar a qualidade das principais decisões tomadas em março de 2020 , não há necessidade de esperar!
Não precisa esperar!
Você pode começar imediatamente. O que você precisa descobrir é:
O que esses líderes sabiam no momento em que tomaram suas decisões?
Quais eram seus objetivos?
Eles fizeram a lição de casa? Eles fizeram um esforço adequado para coletar informações?
Como eles raciocinaram sobre seus dados e suposições?
Em outras palavras, você só precisa saber sobre as coisas que aconteceram no passado.
Se você esperar para ver como as coisas acabam antes de avaliar a qualidade da decisão, estará punindo os líderes por não terem uma bola de cristal.
Aí vem as más notícias: você provavelmente não conseguirá colocar esses dados em suas mãos. O mais próximo de tudo disponível para a maioria de nós é a informação comprometida com o registro público no momento da decisão, o que raramente fornece uma imagem verdadeira de como a decisão foi realmente tomada.
Mais más notícias
Se você está lendo isso em 2020, vive em uma sociedade que tolera o viés de resultado. Isso significa que sua sociedade não força seus tomadores de decisão a se comprometerem com estratégias de decisão (por exemplo, “se o número de casos de COVID-19 por dia em nossa jurisdição for x, faremos…”) ou a manter / compartilhar registros de como eles realmente tomaram algumas de suas decisões mais importantes. Afinal, se esses registros não existirem, como você responsabilizará alguém?
Se esses registros não existirem, é difícil responsabilizar alguém.
Depois que os resultados aparecem, os líderes podem fazer exatamente o que vemos as pessoas fazendo em experimentos de laboratório de psicologia: assumir o crédito por bons resultados e culpar os maus por má sorte ou bons bodes expiatórios. (Isso é chamado de viés de autoatendimento.) Os líderes mais experientes sempre encontrarão dados para fazer backup de uma história inventada. Todos os cientistas de dados experientes conhecem esse segredo: se você não pode torturar dados exploratórios até que eles confessem, entregue-os a um profissional para que você possa assistir e aprender, garoto.
“Se você torturar os dados por tempo suficiente, eles confessarão.” -Ronald Coase
Portanto, se você estiver interessado em refletir sobre uma política ou estudar uma estratégia, não espere até ver como as coisas acabam; comece agora mesmo! Fica mais difícil avaliar a qualidade da decisão não documentada quanto mais você espera.
Obter uma conta verdadeira daqueles que não documentaram seu processo de decisão se torna menos provável a cada minuto que passa.
Não se esqueça de adicionar uma data ao lado dos seus rabiscos. Caso contrário, você sofrerá um viés retrospectivo (aquele em que você ajusta sua memória depois de aprender a resposta, dizendo “eu sabia o tempo todo”, embora você não tenha).
Não seja ingênuo
Não sejamos ingênuos o suficiente para supor que as pessoas nos digam mais do que precisam.
Não estou prendendo a respiração durante o dia em que todas as decisões importantes são documentadas em um padrão que deixa os professores de análise de decisão satisfeitos.
“O viés de resultado ameaça a capacidade da sociedade de promover e reter líderes competentes.”
No entanto, alguns de vocês estão em posição de influenciar os tomadores de decisão. Talvez você esteja procurando aumentar suas próprias habilidades de tomada de decisão. Ou talvez você seja um líder que tem o poder de promover ou rebaixar tomadores de decisão subordinados. Nos dois casos, você tem um forte incentivo para insistir que os processos de decisão sejam meticulosamente documentados.
Muitos de vocês têm um forte incentivo para insistir que os processos de decisão sejam meticulosamente documentados.
A memória humana é um balde com vazamento e nem mesmo pessoas com as melhores intenções podem se lembrar de como tomaram uma decisão empoeirada do passado. É para isso que servem lápis e discos. Para reduzir o viés da retrospectiva pela raiz e evitar tropeçar no viés do resultado, siga esta regra simples:
Mantenha um registro com data e carimbo do processo de decisão.
O que você pode aprender com os resultados?
Estou dizendo que os resultados não podem te ensinar nada? Não é bem assim, mas tome cuidado para não aprender as lições erradas.
Cada novo momento é uma oportunidade para uma nova decisão com base nas informações disponíveis para você.
Não me interpretem mal. Não estou dizendo para você ignorar completamente os resultados, pois isso lhe daria uma visão irreal do presente. Estou dizendo para você usar os dados do resultado presente para decisões presentes / futuras, evitando o viés do resultado: uma visão irreal do passado e uma avaliação incorreta das habilidades de tomada de decisão.
Seguir a boa decisão de ontem pode ser uma decisão ruim de hoje.
Cada novo momento é uma oportunidade para uma nova decisão com base nas informações disponíveis para você. À luz de um novo resultado, acompanhar a boa decisão de ontem pode ser uma decisão ruim de hoje. Os dados de resultados que precedem sua nova decisão são justos – apenas certifique-se de acertar os tempos. Nunca penalize um tomador de decisão por falta de uma bola de cristal.
O truque é aprender com o passado (e não com o futuro).
Se você estiver curioso para saber mais sobre como usar os resultados sem ser vítima de viés de resultados, informe-me retuitando este artigo. Quanto mais compartilhamentos / retweets, mais dos seguintes tópicos abordarei nos acompanhamentos:
Resultados como dados para futuras decisões.
Decisões iterativas versus decisões pontuais.
Inação, indecisão e responsabilidade negativa.
Comparando resultados reais com resultados esperados e a gama de potenciais resultados.
O papel da surpresa na exposição de pontos cegos.
Resultados surpreendentes versus fontes de dados surpreendentes.
O perigo de colocar muito peso nos dados recentes.
Por que é difícil avaliar a qualidade de sua própria decisão.
Avaliação colaborativa.
Como evitar o viés retrospectivo e o sentido contraproducente.