Pyspark判断日期是否为休息日并做成日历表udf

使用PyCharm安装chinesecalender库来判断日期是否为休息日,并结合另一篇博文关于Hive日历表的知识,创建基础日历表。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

pycharm安装chinesecalender ,file-setting-python interpreter加号找chinesecalender 然后安装

from pyspark.sql import SparkSession
from pyspark.sql.types import IntegerType
import sys
from datetime import datetime
from chinese_calendar import is_workday

def judge_workday(a):
  # str转date类型  如果是date类型可直接传入
  a=datetime.strptime(a, '%Y-%m-%d').date()
  duration = 0  # 初始化  工作日
  if is_workday(a):
    duration=1
  else:
    duration=0
  return duration

# date = datetime.datetime.now().date()
# date='2023-04-23'
# print(judge_workday(date))

if __name__ == "__main__":
    # .master("local") \
    spark = SparkSession.builder \
        .appName("makeCalender") \
        .enableHiveSupport() \
        .getOrCreate()

    spark.udf.register("udf_judge_workday", jud
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值