python脚本中sparksql split |竖杠竖线

最新推荐文章于 2024-06-27 18:50:41 发布

花言简

最新推荐文章于 2024-06-27 18:50:41 发布

阅读量1.0k

点赞数

分类专栏： python shell spark-sql 文章标签： python spark split 竖线转义

本文链接：https://blog.youkuaiyun.com/m0_38014125/article/details/120855613

版权

python 同时被 3 个专栏收录

5 篇文章

订阅专栏

spark-sql

5 篇文章

订阅专栏

shell

1 篇文章

订阅专栏

本文介绍了在Python脚本中使用Spark SQL进行数据处理时，如何正确转义'|'字符。示例中展示了需要使用5个反斜杠进行转义的用法，如`select split('a|b','\|')[0]`，同时也提到了在Hive中执行相同操作的语法。此内容对于理解和解决数据处理中的字符串分隔问题具有指导意义。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

python脚本中sparksql split |竖杠竖线

python脚本中spark-sql -e 需要拆分 '|' 连接字段，需要5个 反斜杠 \转义
如： 
spark-sql -e 'select split('a|b','\\\\\|')[0]'


hive -e 执行也需要：
hive -e 'select split('a|b','\\\\\|')[0]'

参考到：
https://blog.youkuaiyun.com/weixin_33389310/article/details/112334476