blinkyou001-优快云博客

GBDT，全称Gradient Boosting Decision Tree，梯度提升决策树。该算法于1999年由Friedman最早提出。GBDT算法的基本思路是通过对负梯度的不断拟合，实现学习器的更新，得到最终的强学习器。GBDT算法支持回归算法和分类算法，其分类算法支持二分类和多分类。本文介绍其中的二分类算法。对于二分类算法，得到最终的强学习器后，将其转化为正样本事件发生的概率。

2024-01-22 23:59:41 1891 1

原创 GBDT算法之回归算法

GBDT，全称Gradient Boosting Decision Tree，梯度提升决策树。GBDT算法的基本思路是通过对负梯度的不断拟合，实现学习器的更新，得到最终的强学习器。当损失函数为平方损失函数时，负梯度正好等于残差，此时可通过对残差的不断拟合实现学习器的更新。本文详细讲解了GBDT回归算法的原理。

2024-01-18 21:02:36 2195

原创 Adaboost算法原理与实例

本文详细讲解了adboost算法的基本原理，并通过实例讲解了算法过程。

2024-01-13 21:01:21 3216

原创 CART算法之回归树

本文详细介绍了CART回归算法的原理。

2023-11-28 23:37:14 870

原创 CART算法之分类树

本文介绍CART分类算法的原理。

2023-11-26 23:46:06 1112

原创 C4.5算法原理详解

本文详细讲解了C4.5算法的基本原理，本举例进行了说明。

2023-10-28 17:38:27 1945

原创 ID3算法原理详解

本文介绍了ID3算法详细原理，并举例说明。

2023-07-26 13:43:09 7891 5

blinkyou001的博客

原创奇异值分解(SVD)

原创主成分分析(PCA)

原创 k-means算法原理

原创随机森林算法

原创支持向量机(SVM)的基本原理

原创 K邻近算法

原创 CatBoost算法的一些说明

原创 LightGBM算法的一些说明

原创 XGBoost之二分类算法

原创 XGBoost之回归算法

原创 GBDT之二分类算法