- 博客(5)
- 收藏
- 关注
原创 get_json_object(string json_string, string path) 用法说明&举例
get_json_object(string json_string, string path) 用法说明&举例get_json_object(string json_string, string path)说明:第一个参数填写json对象变量,第二个参数使用$表示json变量标识,然后用 . 或 [] 读取对象或数组;如果输入的json字符串无效,那么返回NULL。每次只能返回一个数据项。例如:取出json字符串 {“history”:false,“idList”:[{“orderId
2021-08-03 10:21:18
1026
原创 hadoop修改配置方式及优先级
hadoop修改配置方式及优先级hadoop修改配置方式xxx-default.xmlconf/etc/hadoop/xxx-site.xml项目的类路径下可以xxx-site.xml通过conf.set来设置优先级1 < 2 < 3 < 4
2020-11-19 11:29:54
260
原创 CentOS7版本下如何卸载MySQL5.7
CentOS7版本下如何卸载MySQL5.71. 查看是否安装了MySQL[root@hadoop102 software]# rpm -qa | grep mysqlmysql-community-libs-5.7.28-1.el7.x86_64mysql-community-client-5.7.28-1.el7.x86_64mysql-community-common-5.7.28-1.el7.x86_64mysql-community-libs-compat-5.7.28-1.el7.x
2020-09-06 16:18:07
287
原创 hive 中常用的函数
一、hive 中常用的函数1. 空字段赋值NVL( value,default_value):如果value为NULL,则NVL函数返回default_value的值,否则返回value的值,如果两个参数都为NULL ,则返回NULL。2. case when then else end例如:case sex when ‘男’ then 1 else 0 end3. 行转列(1)函数说明CONCAT(string A/col, string B/col…):返回输入字符串连接后的结果,支持任意
2020-08-23 17:07:17
1572
1
原创 MapReduce优化方法的常用调优参数
MapReduce优化方法常用的调优参数1 )资源相关参数(1)以下参数是在用户自己的MR应用程序中配置就可以生效(mapred-default.xml)配置参数参数说明mapreduce.map.memory.mb一个MapTask可使用的资源上限(单位:MB),默认为1024。如果MapTask实际使用的资源量超过该值,则会被强制杀死。mapreduce.reduce.memory.mb一个ReduceTask可使用的资源上限(单位:MB),默认为1024。如果Re
2020-08-14 21:10:26
182
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人