Як чесно перевіряти прогнози з імовірностями й оцінкою Браєра
Записуйте конкретні твердження до строку, зберігайте невизначеність і порівнюйте ймовірності зі спостережуваними результатами без вигаданих доказів.
Сформулюйте перевірювану подію
Твердження «незабаром станеться щось важливе» складно спростувати. Корисний запис визначає спостережувану подію, строк і правило рішення, чи відбулася вона. Зробіть це заздалегідь. Якщо потім змінити визначення під результат, перевірятиметься вже інше твердження. Неоднозначність краще позначити, ніж автоматично зарахувати як успіх.
Базова частота важлива. Висока ймовірність звичайної події може давати кращий результат, ніж ефектний рідкісний прогноз. Цей трекер зберігає лише ваші записи. Тут немає загального рейтингу й тверджень про точність інших відвідувачів.
Оцінюйте ймовірність, а не впевненість заднім числом
Для бінарної події з відомим результатом оцінка Браєра дорівнює (p − o)²: p — імовірність від 0 до 1, o — 1, якщо подія відбулася, і 0, якщо ні. Прогноз 50% отримує 0,25 за будь-якого результату. Упевнений правильний прогноз отримує 0, упевнений хибний — 1. Що нижча середня оцінка, то краще.
Події з невстановленим результатом виключаються і з середнього, і з підрахунків калібрування. Брак доказів не означає невдачу. Таблиця об'єднує ймовірності в п'ять діапазонів; останній включає 100%. Якщо визначених випадків у діапазоні менше п'яти, показується попередження. Навіть велика вибірка може бути зміщена вибором тверджень, які ви вирішили записати.
Помічайте, як відбиралися свідчення
Схильність до підтвердження допомагає знаходити збіги й пропускати промахи. Зміщення відбору виникає, наприклад, коли записують лише вражаючі прогнози. Самоздійснюване пророцтво змінює поведінку так, що сприяє результату; це не доводить надприродного передбачення. Щоб розрізнити ці пояснення, недостатньо одного особистого бала.
Фіксуйте формулювання заздалегідь, ураховуйте кожен результат, порівнюйте з простою базовою стратегією та будьте готові змінювати думку. Вправа корисна і прихильникам символічних практик, і скептикам. Її мета — зробити міркування перевірюваним, а не навісити на людину ярлик довірливості.
Як це працює
Джерела
- Браєр (1950): перевірка прогнозів, виражених імовірностями
- Словник Американської психологічної асоціації: схильність до підтвердження
Для розваги та роздумів; не науковий прогноз і не професійна порада.