from sklearn.model_selection import train_test_split
# 将'features'和'result'数据切分成训练集和测试集
X_train, X_test, y_train, y_test = train_test_split(features, target, test_size = 0.2, random_state = 0, stratify = target)
代码中stratify的作用:保持测试集与整个数据集里target的数据分类比例一致。
举个栗子:
整个数据集有1000行,target列的数据也是1000个,而且分两类:0和1,其中0有200个,1有800个,即数据分类的比例为2:8。
那么现在把整个数据split,因为test_size = 0.2,所以训练集分到800个数据,测试集分到200个数据。
重点来了
那么由于stratify = target,则训练集和测试集中的数据分类比例将与target一致,也是2:8,结果就是在训练集中,有160个0和640个1;测试集中有40个0和160个1。
本文介绍了在机器学习中使用`train_test_split`函数时,`stratify`参数的重要性。该参数确保训练集和测试集在目标变量分布上保持一致。例如,如果原始数据集中类别比例为2:8,那么在划分后的训练集和测试集中,这一比例也会得到保留。这对于保持模型评估的公正性和避免偏差至关重要。
1112

被折叠的 条评论
为什么被折叠?



