Матрица ошибок прогноза: как читать четыре группы результатов
· Автор: Линия Форы
Почему общий процент скрывает разные способы ошибиться.
Определите событие
Для бинарной задачи сначала назовите положительный исход, например победу выбранной команды в установленное время. Затем разделите записи по предсказанию и факту. Получаются правильные положительные, ложные положительные, правильные отрицательные и ложные отрицательные случаи. Без определения события названия этих групп остаются неоднозначными.
Проверьте учебный набор
Из ста прогнозов двадцать верно указали событие, десять указали его ошибочно, пять пропустили, шестьдесят пять верно отрицали. Сумма равна ста. Такая таблица позволяет восстановить несколько метрик, которые отвечают разным вопросам. Один общий процент правильных ответов не показывает, как распределены два типа ошибок.
Сохраните правила решения
Если исходный ответ был вероятностью, нужно указать порог превращения её в положительный или отрицательный выбор. Пользователю спортивной аналитики полезны исходные количества рядом с метриками. Матрица описывает выбранный набор и правило, но не устанавливает будущую точность автоматически. Для сравнения систем нужны одинаковые события, условия времени и полный список записей, включая неудачные случаи.