工作经验
文章平均质量分 68
cs16骑上最快的马
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
如何在python中执行shell脚本
如何在python中执行shell脚本 如何往shell字符串里传python参数? shell脚本的变量我们都知道,用${}即可。 如何向里面传递python变量呢? 以下的例子是一个shell脚本的模版(模版里还没有传递变量,即还不是一个完整的shell脚本)我在里面向kubernetes提交了一个spark-submit。 def get_shell_template(): return ''' app_name=%(app)s cos_env=%(env)s master=%(master)原创 2021-03-19 11:04:56 · 888 阅读 · 0 评论 -
test spark structured streaming with spark operator doc
test spark structured streaming with spark operator doc background: When migrating to delta lake, we are converting most of the batch jobs into streaming jobs In order to increase the stablity of streaming jobs on Kubernetes, we are planning to use spark原创 2021-03-05 11:04:36 · 827 阅读 · 0 评论
分享