迷茫君的博客

Map 输出阶段 开启 map 输出阶段压缩可以减少 job 中 map 和 reduce task 之间数据传输量。 具体配置如下： #开启 hive 中间传输数据压缩功能 hive (bigdata)> set hive.exec.compress.intermediate=true; #开启 mapreduce 中 map 输出压缩功能 hive (bigdata)> se...

Hive的自定义的函数的步骤： 1、创建自定义函数类继承 org.apache.hadoop.hive.ql.exec.UDF类 2、实现evaluate函数 3、把程序打包放到目标节点上去 先从eclipse导出jar包 上传到集群目标节点lib库 [root@master ~]# cd /opt/app/Hive/hive-2.3.3/ [root@master hi...

HQL的DQL操作基本与SQL相同 基本查询 hive (bigdata)> select * from student; hive (bigdata)> select name from student; 常用函数 hive (bigdata)> select score+10 from score; hive (bigdata)> sel...

Data Manipulation Language：数据操纵语言 数据导入 1、load模式 LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename [PARTITION(partcol1=val1,partcol2=val2 ...)] load data:表示加载数据 local:表示从本地加...