因为工作中经常会遇到使用excel表的场景,excel适合处理逻辑简单,数据量较小的场景。有些复杂场景,excel很难处理,所以我们会使用python的第三方库pandas来进行数据处理操作,pandas的功能超级强大,内置的很多属性和方法也都非常全面,但是不能为了学习而学习,一定是有目的地去学习。如果只是按部就班地去学pandas,花了几个月时间把pandas的所有用法都学会了,但是工作中用不到,很快就忘了。所以最好的学习方法应该是:1.先学个基础,了解能干什么。2.根据需求去学相应的细分内容。
学习不是为了考试,无需面面俱到,不会的东西去查就好了。
对某列元素进行筛选
比如某一列中有我不想要的元素,那我可以这样写:
df = df [df['商品名称'] != 商品名称 ]
上述代码的功能是将数据框df中'商品名称'列不等于"商品名称"的行删除。
对数据进行去重
df = df.drop_duplicates()
检查df是否已经去重成功。
df.duplicated().sum()
输出为0,表明已经没有重复值。