
spark sql
刘sir--
这个作者很懒,什么都没留下…
展开
-
spark的df.na.fill()填充值注意的地方
//用法df.na.fill(value,Array("ranges"))//注意点//填充ranges这一列的时候,填充值和这一列的数据类型一致才会生效,否则忽略无效原创 2020-03-16 09:58:22 · 5212 阅读 · 0 评论 -
不可见字符'\001'在java程序中表示
\001作为分隔符的日志,从linux终端复制出来用notePad打开时看到的SOH,而\002分隔的,从终端复制到编辑器是里STX。项目中需要将含'\001'的字符串做一个替换,结果在写程序的时候,却不知怎么写来匹配'\001',最后上网搜了半天,找到了解决办法。对,你没看错,就是这样,需要4个\,4962\\\\001亚洲龙 去匹配文件中的 4962\001亚洲龙ASCI...原创 2019-12-18 18:51:12 · 11749 阅读 · 0 评论 -
spark sql脚本
############### 客户基本属性模型表脚本开发###############!/bin/shyesterday=`date -d '-1 day' "+%Y-%m-%d"`if [ $1 ];then yesterday=$1fiSPARK_SUBMIT_INFO="/var/local/spark/bin/spark-sql --master spark:/...原创 2018-10-28 09:50:05 · 4446 阅读 · 1 评论