Tester honnêtement des prévisions avec probabilités et score de Brier
Écrire des affirmations précises avant l’échéance, conserver l’incertitude et comparer probabilités et résultats observés sans inventer de preuves.
Définir un événement vérifiable
L’affirmation « quelque chose d’important arrivera bientôt » est difficile à réfuter. Une entrée utile précise un événement observable, une échéance et la règle permettant de décider s’il a eu lieu. Écrivez-les avant l’événement. Changer ensuite la définition pour l’adapter au résultat revient à tester une autre affirmation. Notez l’ambiguïté au lieu de l’assimiler à une réussite.
Les fréquences de base comptent. Une forte probabilité attribuée à un événement fréquent peut surpasser une prédiction rare et spectaculaire. Ce suivi ne contient que vos entrées. Il n’existe ni classement collectif ni affirmation sur l’exactitude des autres visiteurs.
Évaluer une probabilité, pas une certitude rétrospective
Pour un événement binaire dont l’issue est connue, le score de Brier vaut (p − o)² : p est une probabilité de 0 à 1 et o vaut 1 si l’événement s’est produit, 0 sinon. Une prévision à 50 % obtient 0,25 dans les deux cas. Une prévision certaine correcte obtient 0 ; une prévision certaine incorrecte obtient 1. Un score moyen plus faible est préférable.
Les événements non résolus sont exclus de la moyenne et des comptes de calibration. Un manque de preuve n’est pas une preuve d’échec. Le tableau regroupe les probabilités en cinq plages, la dernière incluant 100 %. Un avertissement apparaît en dessous de cinq cas résolus dans une plage. Même un grand échantillon peut être biaisé par les affirmations que vous avez choisi de consigner.
Examiner la sélection des preuves
Le biais de confirmation peut pousser à chercher les correspondances et à négliger les erreurs. Un biais de sélection apparaît si seules les prédictions impressionnantes sont notées. Une prophétie autoréalisatrice modifie les comportements de façon à favoriser son résultat ; cela ne démontre pas une connaissance surnaturelle du futur. Distinguer ces explications exige davantage qu’un score individuel.
Fixez la formulation à l’avance, conservez chaque résultat, comparez avec une référence simple et acceptez de réviser votre avis. L’exercice est utile que vous appréciez la divination ou que vous soyez sceptique. Il rend le raisonnement vérifiable sans traiter une personne de crédule.
Comment ça marche
Sources
- Brier (1950) : vérification des prévisions exprimées en probabilités
- Dictionnaire de l’APA : biais de confirmation
Pour le divertissement et la réflexion ; sans prédiction scientifique ni conseil professionnel.