Voorspellingen toetsen met kansen en de Brier-score
Leg toetsbare beweringen vooraf vast, behoud onzekerheid en vergelijk kansen met waargenomen uitkomsten zonder bewijs te verzinnen.
Bepaal een toetsbare gebeurtenis
Binnenkort gebeurt iets belangrijks is moeilijk te weerleggen. Een bruikbare registratie omschrijft een waarneembare gebeurtenis, een einddatum en een beslisregel voor wat als gebeurd telt. Leg die vóór de gebeurtenis vast. De omschrijving achteraf aanpassen aan de uitkomst toetst een andere bewering. Benoem onduidelijkheid in plaats van die automatisch als succes te tellen.
Basisfrequenties doen ertoe. Een hoge kans voor iets gewoons kan beter scoren dan een opvallende zeldzame voorspelling. Dit overzicht bewaart alleen je eigen registraties. Er is geen algemene ranglijst of bewering over de nauwkeurigheid van andere bezoekers.
Beoordeel de kans, niet zekerheid achteraf
Voor een afgehandelde ja-neevraag is de Brier-score (p − o)². Daarbij ligt de kans p tussen 0 en 1; o is 1 als de gebeurtenis plaatsvond en anders 0. Een kans van 50% krijgt bij beide uitkomsten 0,25. Volledige zekerheid die klopt krijgt 0; volledige zekerheid die niet klopt krijgt 1. Een lager gemiddelde is beter.
Onbesliste gebeurtenissen tellen niet mee in het gemiddelde of de kalibratie. Ontbrekend bewijs is geen bewijs van mislukking. De kalibratietabel verdeelt kansen in vijf groepen, met 100% in de laatste groep. Bij minder dan vijf afgehandelde gevallen in een groep staat een waarschuwing. Ook een grote steekproef kan vertekend zijn door de keuze van geregistreerde beweringen.
Let op hoe het bewijs werd gekozen
Bevestigingsvooroordeel kan ons treffers laten zoeken en missers laten negeren. Selectievertekening ontstaat bijvoorbeeld als alleen indrukwekkende voorspellingen worden vastgelegd. Een zichzelf vervullende voorspelling verandert gedrag en bevordert zo de uitkomst; dat bewijst geen bovennatuurlijke voorkennis. Verklaringen onderscheiden vraagt meer dan één persoonlijke score.
Leg bewoordingen vooraf vast, bewaar iedere uitkomst, vergelijk met een eenvoudige referentie en wees bereid je mening aan te passen. De oefening is bruikbaar voor liefhebbers van waarzeggerij én sceptici. Ze maakt het redeneren controleerbaar zonder iemand goedgelovig te noemen.
Hoe het werkt
Bronnen
Voor vermaak en reflectie; geen wetenschappelijke voorspelling of professioneel advies.