
Hive
Winner941112
这个作者很懒,什么都没留下…
展开
-
hive优化(1)
Hive在map端存在三个配置参数:set mapred.max.split.size=256000000;set mapred.min.split.size.per.node=256000000;set mapred.min.split.size.per.rack=256000000;set hive.input.format=org.apache.hadoop.hive.ql.io...原创 2018-10-10 10:36:16 · 290 阅读 · 0 评论 -
hive获取字符串指定位置之前的字符串
在数据表中有一个字段 PROC_DEF_ID_ 数据如下:AfterSaleWorkSheetProgress:1:3ReturnToPSPProgress:17:965022pspOrderCancelWork:15:965017现在要截取的字段为:AfterSaleWorkSheetProgressReturnToPSPProgresspspOrderCancelW...原创 2019-10-23 15:46:20 · 6382 阅读 · 2 评论 -
使用shell脚本输出文件后缀多个问号(?)
在使用shell脚本输出文件后,文件后缀出现问号,导致文件无法使用sz下载:原因时该脚本是在window下编写的,一般shell都是用重定向向新文件输出内容时随便创建这个文件的。也就是在命令的最后是 >> filename 或 > filename在linux下看的话,后面就会多一个 ^M, 然后显示的时候不能识别这个符号,就显示问号了。解决方法就是删除多...原创 2019-10-23 15:43:02 · 1705 阅读 · 0 评论 -
hive COALESCE 的使用
COALESCE(expr1, expr2, expr3)当expr1为空时使用expr2为结果值,若expr2也为空,使用expr3为结果值SELECT COALESCE (u.u_date, o.o_date, r.r_date, 'no_time') AS result_date,COALESCE (u.na, o.na, r.na, 'no_netflow') AS resu...原创 2019-09-30 10:48:07 · 773 阅读 · 0 评论