
模型评估
炼丹师666
要学神仙,驾鹤飞天,点石成金,妙不可言!
展开
-
F1值
为了能够评价不同算法的优劣,在Precision和Recall的基础上提出了F1值的概念,来对Precision和Recall进行整体评价。F1的定义如下: F1值 = 正确率 * 召回率 * 2 / (正确率 + 召回率)参考:https://www.jiqizhixin.com/graph/technologies/82aeeeba-b738-4a05-b9c2-7ec567c401fe...原创 2020-01-08 15:07:30 · 7390 阅读 · 1 评论 -
lift曲线
二、lift曲线在营销推广活动(例如DM信)中,我们的首要目标并不是尽可能多地找出那些潜在客户,而是提高客户的响应率。客户响应率是影响投入产出比的重要因素。此时,我们关注的不再是TPR(覆盖率),而是另一个指标:命中率。计算距离:例如,若经验告诉我们10000个消费者中有1000个是我们的潜在客户,则我们向这10000个消费者发放传单的效率是10%(即客户的响应率是10%),k=(c+d)/...原创 2020-01-08 11:38:04 · 1847 阅读 · 0 评论 -
PSI值
群体稳定性指标(population stability index)意义就是如果模型更稳定,那么在新的数据上预测所得类概率应该更建模分布一致,这样落在建模数据集所得的类概率所划分的等分区间上的样本占比应该和建模时一样,否则说明模型变化,一般来自预测变量结构变化。通常用作模型效果监测。一般认为PSI小于0.1时候模型稳定性很高,0.1-0.2一般,大于0.2模型稳定性差,建议修复。PS...原创 2020-01-08 11:24:09 · 2469 阅读 · 0 评论