机器学习(二) —— 机器学习基础

机器学习(二) —— 机器学习基础

大家可以关注知乎或微信公众号的share16，我们也会同步更新此文章。

一、补充知识

1.1 xgboost

   xgboost和LightGBM等，是目前数据挖掘中最常用的预测算法。xgboost是GBDT(梯度提升树)算法的工程实现，其逻辑是：首先训练一颗树，然后计算出每个样本的误差(也叫梯度)，通过去拟合误差训练下一颗树，一直拟合直到训练结果符合要求。

import xgboost as xgb 
# from xgboost.sklearn import XGBClassifier
xgb.XGBClassifier()
# objective="binary:logistic" 目标函数,代表是二分类,损失函数是logistic

1.2 LightGBM

   LightGBM可以说是xgboost上的延续，在xgboost上做了一些优化&#x