pandas 学习（四）—— 数据处理（清洗）、缺失值的处理

最新推荐文章于 2025-03-28 15:57:17 发布

转载最新推荐文章于 2025-03-28 15:57:17 发布 · 371 阅读

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/mtcnn/p/9421731.html

文章标签：

本文介绍了使用Python的Pandas库进行DataFrame操作的方法，包括创建DataFrame、添加新列、数据类型处理、基本统计分析及缺失值处理等内容。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

创建 DataFrame：

df = pd.DataFrame(np.random.randint(0, 10, (2, 4)), columns=list('ABCD'))

>> df['total'] = df['A'] + df['B'] + df['C'] + df['D']
    # 等价于 df['total'] = df.A + df.B + df.C + df.D

df.values ⇒ 返回的是 numpy 下的多维数组；
- df.column_name.values ⇒ 返回的也是 numpy 下的数组类型；
df.dtypes：返回的是各个属性列的类型；
- df.select_dtypes([np.object])
- df.select_dypes([bool])

统计某一属性可能的取值：df.column_name.unique()
统计出现的次数：df.column_name.value_counts()
- column_name 对应的是该 DataFrame 中某列的列名；
- 也即 pandas 下的 DataFrame 对象直接支持点+列名的方式进行索引；

所有缺失值字段填充为 0：df.fillna(0)，一定要十分注意的一点是，df.fillna() 操作默认（inplace=False）不是 inplace，也即不是对原始 data frame 直接操作修改的，而是创建一个副本，对副本进行修改；
- df.fillna(0, inplace=True)
- df = df.fillna(0)
舍弃：
- 舍弃那些全行为 NaN 的行，以及全列为 NaN 的行：
  - df.dropna(axis=[0, 1], how=’all’)
- 删除某些行和列：
  - df.drop([], axis=1, inplace=True) ⇒ axis = 1，删除列；
  - df.drop([], axis=0, inplace=True) ⇒ axis = 0，删除行；

均值填充

age_mean = data.Age.mean()      # age_mean = data['Age'].mean()
data.Age[data['Age'].isnull()] = age_mean   # data['Age'] == data.Age 二者是等效的

转载于:https://www.cnblogs.com/mtcnn/p/9421731.html