零基础入门金融风控之建模与调参

1 学习目标

1. 学习在金融风控领域常用的机器学习模型
2. 学习机器学习模型的建模过程与调参流程

2 如何建模

一，了解通用的几个模型：
逻辑回归模型、决策树模型、集成GBDT模型（随机森林、XGBOOST、LightGBM、CatBOOST）

逻辑回归

1. 优点
   a. 训练速度较快，分类的时候，计算量仅仅只和特征的数目相关；
   b. 简单易理解，模型的可解释性非常好，从特征的权重可以看到不同的特征对最后结果的影响；
   c. 适合二分类问题，不需要缩放输入特征；
   d. 内存资源占用小，只需要存储各个维度的特征值；
2. 缺点
   a. 逻辑回归需要预先处理缺失值和异常值【可参考task3特征工程】； b. 不能用Logistic回归去解决非线性问题，因为Logistic的决策面是线性的；
   c. 对多重共线性数据较为敏感，且很难处理数据不平衡的问题；
   d. 准确率并不是很高，因为形式非常简单，很难去拟合数据的真实分布；

决策树模型

1. 优点
   a. 简单直观，生成的决策树可以可视化展示
   b. 数据不需要预处理，不需要归一化，不需要处理缺失数据 c. 既可以处理离散值，也可以处理连续值
2. 缺点
   a. 决策树算法非常容易过拟合，导致泛化能力不强（可进行适当的剪枝）
   b. 采用的是贪心算法，容易得到局部最优解

集合模型

通过组合多个学习器来完成学习任务，通过集成方法，可以将多个弱学习器组合成一个强分类器，因此集成学习
的泛化能力一般比单一分类器要好。
集成方法主要包括Bagging和Boosting，Bagging和Boosting都是将已有的分类或回归算法通过一定方式组合起来，
形成一个更加强大的分类。两种方法都是把若干