Команда лучше в каждой группе, но хуже в общем итоге: как это возможно
· Автор: Линия Форы
Учебный пример влияния состава выборки на сравнение процентов.
Посмотрите размеры групп
Общий процент зависит не только от долей внутри групп, но и от того, сколько наблюдений приходится на каждую. Если команды имеют разное распределение условий, сводная таблица может изменить направление сравнения. Это арифметический эффект смешивания, а не обязательная ошибка источника или доказательство неправильного расчёта.
Проверьте числа
В условной лёгкой группе команда А имеет девять успехов из десяти, Б — восемьдесят из ста. В сложной А имеет двадцать из ста, Б — один из десяти. А лучше в обеих группах: 90% против 80% и 20% против 10%. Но в сумме А получает 29/110, Б — 81/110.
Сделайте вывод по задаче
Пример показывает, почему нужно читать состав набора и не выбирать универсально «лучшую» команду по одному общему проценту. Для будущего матча важна группа условий, к которой он относится, и основания такого отнесения. Разбиение тоже нельзя подбирать после просмотра результата ради нужного вывода. Сохраните определения групп, объёмы и все исходные количества рядом со сводной долей.