GerHard 的博客

linux 解压缩 压缩 命令 备忘

· 传统GBDT以CART作为基分类器，xgboost还支持线性分类器 · xgboost工具支持自定义代价函数，只要函数可一阶和二阶求导 · 传统GBDT在优化时只用到一阶导数信息，xgboost则对代价函数进行了二阶泰勒展开，同时用到了一阶和二阶导数。（详解见后面） · xgboost在代价函数里加入了正则项，用于控制模型的复杂度。 · Shrinkage（缩减），相当于学习速率（xg...