3.4K字，让老板对你的模型稳定性不再质疑

对风控模型分类能力强弱的评估有一个前提条件，那就是风控模型的性能是稳定的，脱离了这个前提条件，分类能力再强的风控模型实用性也不高。

既然稳定性非常重要，那么什么样的模型才算表现稳定的模型？如何衡量模型的稳定性呢？影响模型稳定性的因素有哪些呢？如果模型不稳定了该采取什么措施呢？

本文带大家一探究竟！

1、什么样的模型才算表现稳定的模型

模型稳定性高是指模型的预测能力在时间维度上是一致的，即模型在测试集、时间外样本集、线上测试和正式使用的时候有同样的区分度；而模型预测能力不稳定的直观表现是原本评分为500分的客户大概率是个好。

2、如何确信模型稳定性是否发生了变化

实践中常用PSI指标衡量模型的稳定性。

PSI指标是指群体稳定性指数（Population Stability Index），PSI反映了不同样本在各分数段的分布的稳定性。

PSI的计算公式如下：

其中，A表示实际样本，E表示预期样本。

公式的意思是分别计算每一分箱内的实际样本占比减预期样本占比之差和实际样本占比除以预期样本占比的对数的乘积，然后将每个分箱内的这个乘积求和，这个求和值就是PSI。下表表示PSI值的变动范围所代表的意义。

需要注意的是，PSI指标变化只反映两类群体变化大小，但不反映变化的方向。

下面以案例说明PSI的计算方式（数据不代表实际意义）：

我们将评分卡开发时的样本和当前的样本进行比对。用同一个模型对两个样本打分后按照信用评分升序排序，并