接上篇:

模型评估与模型监控——混淆矩阵

模型评估与模型监控——AUC 计算示例

KS曲线及KS值

实际上,KS曲线的数据来源及本质和ROC曲线是一致的。只是ROC曲线把TPR、FPR分别做为纵轴和横轴,而KS曲线把TPR、FPR均做为纵轴,横轴由选定的不同阈值来充当。

模型预测控制基本内容(模型评估与模型监控)(1)

从KS曲线衍生出KS值,即是两条曲线之间的最大间隔距离。KS值越大表示模型 的区分能力越强。

KS计算步骤

KS统计量用于评价模型对好坏客户的区分能力。其将模型预测坏客户概率降序排列并进行分段,每一段内统计处好坏客户的累计占比,再绘制出KS曲线。KS的计算步骤如下:

GINI基尼系数

基尼系数是另一个常用的区分度指标。GINI计算的是坏客户数在好客户数上的累计分布与随机分布曲线之间的面积,好客户数与坏客户分布之间的差异越大,GINI越高,模型的区分能力越强。

模型预测控制基本内容(模型评估与模型监控)(2)

GINI系数的计算步骤计算示例

模型预测控制基本内容(模型评估与模型监控)(3)


碎片时间,关注收藏。

,