qq_37321741的博客

创建一个分区表 create table comm( id int, comment String, dt String ) partitioned by (year String) row format delimited fields terminated by '\t' ; 数据导入 load data inpath '/data/d1' into table comm parti...

create database 数据库名 大部分命令和sql命令一样 其创建出来的数据库在hdfs文件系统中的/user/hive/warehouse 可以通过下面这个命令查看 hdfs dfs -ls /user/hive/warehouse 创建表 create table hivetable3 (id bigint,name String,sex tinyint) row...

这句话是将已经有内容的表comm3添加到分区表comm4中去 需要设置  set hive.exec.dynamic.partition.mode=nonstrict; 此时插入数据不需要设置成nonstrict只需要设置成strict 插入了2016这个数据...

select split(rand()*100,'\\.')[0];随机取整数 select round(rand()*100);随机取整数 select round(rand()*100,2);//后面跟的是小数的位数 select substring(rand()*100,0,2); select regexp_replace("a.jpg","jpg","png");//jpg替换成...

package com.udf; import org.apache.hadoop.hive.ql.exec.UDF; public class MyConcatUdf extends UDF{ public String evaluate(String word) { if(word == null) { return "NULL"; } return word+"_...

在插入的数据中对中文数据进行解码和转码 string= new String(string.getBytes("unicode"),"iso-8859-1"); 再插入数据就不再乱码了

一、为啥分区 hive 为了避免全表查询，从而引进分区，将数据按目录进行划分，减少不必要的查询，从而提高效率 二、hive的分区和mysql分区的区别 mysql的分区字段用的是表内字段，hive的分区字段采用表外字段，也就是使用伪字段，分区字段在创建表的时候指定 分区的关键字：partitioned by(字段) 三、静态分区练习 create table if not exist...