Новая модель лучше в каждом сегменте, но хуже в целом
Сравнивают долю одобренных заявок, оказавшихся хорошими, для старой и новой скоринговых моделей. И среди клиентов с зарплатным проектом, и среди остальных новая модель лучше. Но по всей выборке новая модель хуже. Новую модель применяли в основном к клиентам без зарплатного проекта, у которых качество ниже.
Как это объяснить?
- Парадокс Симпсона из-за разного состава групп
- Ошибка в расчётах — так не бывает
- Новая модель хуже, сегменты врут
- Нужно смотреть только на общий итог