Тест скоринговой модели. Анализ итогового теста и его значений

После завершения создания теста модели необходимо его проанализировать и определить достаточно ли хорошая модель или необходимо ее еще дорабатывать и перестраивать, а также определить какие решения можно принимать на основании данной модели.
Детальнее о процессе проведения тестирования здесь.

В первую очередь необходимо обратить внимание на итоговый Индекс Джини. Он показывает прогнозную и постепенную силу модели. А именно на сколько сильна зависимость модели по отношению того, что чем больше баллов набирает клиент, тем выше вероятность, что он будет хороший.
Если индекс Джини ниже, чем 30%, то такая модель считается некачественной совершенно. И есть смысл попробовать еще перестроить ее.
Если индекс Джини выше 30%–40%, то такая модель считается уже достойной и возможна к использованию.
Если индекс Джини у вас больше 60%, то можете смело быть уверенным, что модель очень и очень сильная.
Следующим этапом необходимо определить порог накопления баллов, до которого система будет отказывать в том или другом процессе по клиенту.Больше зависит от того, какие цели преследовались для создания скоринговой модели, как правило, необходимо определить порог плохих клиентов, которых пользователь готов пропускать исходя из своих требований и дальше уже из этой строки брать минимальное количество баллов как минимальны порог для прохождения скоринговой модели.
Через колонки с префиксом «Накопленное…» можно просмотреть сколько и каких клиентов всего будет уходить в отказ в количественном или лучше в процентном соотношении при выбранном минимальном пороге.
Анализировать модель для большинства пользователей проще в excel. Для этого можно экспортировать как скоринговую модель, так и тест в файл excel.Детальнее о данных экспортируемых в excel можно ознакомиться здесь.
Как только будет создана скоринговая модель, которая подошла по своей прогнозной силе, выбран минимальный порог прохождения, можно реализовывать и внедрять скоринговую модель в свою систему.
Калибровка любой скоринговой модели периодически все равно нужна. Как правило раз в 3 месяца, потому что могут меняться продукты, маркетинговые стратегии, сегменты клиентов, макроэкономические особенности и не только это. Многие факторы могут изменить поведение клиента и именно поэтому не забывайте проверять скоринговую модель на актуальность через то же тестирование и калибровать или полностью ее менять и создавать новую модель.
Scoring Machine Вам в этом поможет.
Если возникают какие-либо вопросы по использованию системы смело обращайтесь в поддержку.