Scikit-Learn 与 TensorFlow 机器学习实用指南 读书笔记(一)

本文介绍了机器学习实践中数据预处理的重要步骤,包括下载并解压Housing数据集,使用Pandas读取CSV文件,通过head()、info()、value_counts()和describe()等方法分析数据,以及如何使用Scikit-Learn库的train_test_split函数正确地划分训练集和测试集,确保模型泛化能力的评估。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一、下载数据

下载并解压数据:housing.tgz

数据地址:https://github.com/ageron/handson-ml/tree/master/datasets/housing

二、读取数据

import pandas as pd

housing=pa.read_csv('./housing.csv')

三、观察数据

head()输出前5个数据和表头


info()输出每个特征的元素总个数,因此可以查看特征是否存在缺失值。还可以查看类型及内存占用情况。

value_counts()统计特征中每个元素的总个数

describe()可以查看实数特征的统计信息(最大值、最小值、平均值、方差、总个数、25%、50%、75%小值)

hist()输出实数域直方图

四、分开训练集和测试集

为了最终验证模型是否具有推广泛化能力,需要分开训练集于测试集,假设将数据集分为80%训练,20%测
试。下面为一种普遍的分开数据集的代码:
import numpy as np

def 
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值