Como testar previsões com probabilidades e pontuação de Brier
Registre afirmações específicas antes do prazo, preserve a incerteza e compare probabilidades com resultados observados sem inventar evidências.
Defina um evento verificável
A afirmação de que algo importante acontecerá em breve é difícil de refutar. Uma entrada útil define um evento observável, um prazo e a regra para decidir se ocorreu. Escreva isso antes. Mudar a definição depois para combinar com o resultado significa testar outra afirmação. Registre a ambiguidade em vez de contá-la como sucesso.
Taxas básicas importam. Uma probabilidade alta para um evento comum pode superar uma previsão rara e dramática. Este rastreador armazena somente suas entradas. Não há classificação coletiva nem alegação sobre a precisão de outros visitantes.
Avalie a probabilidade, não a certeza retrospectiva
Para um evento binário com resultado conhecido, a pontuação de Brier é (p − o)²: p é a probabilidade entre 0 e 1; o vale 1 se aconteceu e 0 se não. Uma previsão de 50% recebe 0,25 em ambos os casos. Uma previsão certa e correta recebe 0; uma certa e errada recebe 1. Uma média menor é melhor.
Eventos sem resolução ficam fora da média e das contagens de calibração. Ausência de evidência não é evidência de fracasso. A tabela agrupa probabilidades em cinco faixas, com 100% incluído na última. Menos de cinco casos resolvidos em uma faixa recebem um aviso. Mesmo uma amostra grande pode estar enviesada pela escolha das afirmações registradas.
Observe como as evidências foram selecionadas
O viés de confirmação pode nos levar a procurar correspondências e ignorar erros. O viés de seleção pode surgir quando apenas previsões impressionantes são registradas. Uma profecia autorrealizável muda comportamentos de maneira a favorecer o resultado; isso não estabelece conhecimento sobrenatural do futuro. Distinguir essas possibilidades exige mais que uma pontuação pessoal.
Defina a redação antecipadamente, mantenha todos os resultados, compare com uma referência simples e aceite mudar de opinião. O exercício é útil tanto para quem gosta de adivinhação quanto para quem é cético. Seu objetivo é tornar o raciocínio examinável, não rotular alguém como crédulo.
Como funciona
Fontes
- Brier (1950): verificação de previsões expressas em probabilidades
- Dicionário da APA: viés de confirmação
Para entretenimento e reflexão; não é previsão científica nem orientação profissional.