本文介绍了如何使用PySpark的DataFrame功能，包括给所有值指定固定值('aaaabbbb')和处理缺失值（替换为0或'0'）。重点在于数据清洗的实践操作。
1.全部赋指定的值
import pyspark.sql.functions as F
new_df = df.withColumn("activityType",F.lit("aaaabbbb"))2.给所有null赋值为0或’0‘
#赋值为0
new_df = df.na.fill(0)
#赋值为'0'
new_df = df.na.fill(0).na.fill('0')pyspark 给DataFrme赋值
1.全部赋指定的值
import pyspark.sql.functions as F
new_df = df.withColumn("activityType",F.lit("aaaabbbb"))2.给所有null赋值为0或’0‘
#赋值为0
new_df = df.na.fill(0)
#赋值为'0'
new_df = df.na.fill(0).na.fill('0')
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
扫一扫
