
hive
文章平均质量分 82
leveretz
多年潜水,回馈社会
展开
-
Hive sql 常用命令2
原文地址:https://zhuanlan.zhihu.com/p/132720059基本概念外部表EXTERNAL:删除表并不会删除数据,但描述表的元数据信息会被删除掉。 分区表:使用分区来水平分散压力,将数据以一种符合逻辑的方式进行组织,比如分层存储。创建分区表的语法如下:CREATE TABLE IF NOT EXISTS employees ( name STRING, salary FLOAT, subordinated ARRAY<STRING>转载 2021-06-22 11:21:48 · 165 阅读 · 0 评论 -
Hive sql 常用命令1
原文地址:https://zhuanlan.zhihu.com/p/176989230基本语法创建数据库:create database if not exists database_name查看数据库:show databases;查看数据库存在的描述以及路径:describe database database_name;修改数据库路径:create database database_name location 'path';删除空数据库:d.转载 2021-06-22 11:20:45 · 262 阅读 · 0 评论 -
Hive 存储文件格式
原文地址:https://blog.youkuaiyun.com/yangshaojun1992/article/details/85124287hive文件存储格式包括以下几类:1、TEXTFILE2、SEQUENCEFILE3、RCFILE4、ORCFILE(0.11以后出现)5、PARQUET其中TEXTFILE为默认格式,建表时不指定默认为这个格式,导入数据时会直接把数据文件拷贝到hdfs上不进行处理;SEQUENCEFILE,RCFILE,ORCFILE,PARQUET格式的表不能转载 2021-06-22 10:24:56 · 558 阅读 · 0 评论 -
Hive sql 中 over 总结
原文地址:https://blog.youkuaiyun.com/qq_28289405/article/details/81326767转载 2021-06-20 12:14:46 · 2119 阅读 · 0 评论 -
Hive sql 中 order by、sort by、distribute by、cluster by用法
名词解释:order by Hive中的order by和数据库中的order by 功能一致,按照某一项或者几项排序输出,可以指定是升序或者是降序排序。它保证全局有序,但是进行order by的时候是将所有的数据全部发送到一个Reduce中,所以在大数据量的情况下可能不能接受,最后这个操作将会产生一个文件。sort by sort by只能保证在同一个reduce中的数据可以按指定字段排序。使用sort by 你可以指定执行的reduce个数 (set mapreduce.job.re转载 2021-06-19 13:11:29 · 3764 阅读 · 0 评论 -
Hive bucket 总结2
原文地址:https://blog.youkuaiyun.com/u013850277/article/details/65937122?locationNum=8&fps=1转载 2021-06-19 12:54:43 · 216 阅读 · 0 评论 -
Hive bucket 总结1
原文地址:https://www.cnblogs.com/end/archive/2013/01/09/2852413.html转载 2021-06-19 12:52:59 · 232 阅读 · 0 评论 -
Hive sql 常用命令总结
原文地址:https://bigdata.51cto.com/art/201908/600847.htm转载 2021-06-19 12:45:14 · 1022 阅读 · 0 评论 -
Hive sql 总结-Dual
Dualdual表的概念来自oracle,数据库建立时即与数据字典一起初始化,该表只有一个varchar2类型名为dummy的字段,表数据只有一行“X”,用来查询一些系统信息,如select sysdate from dual;select user from dual;select seq.nextval from dual123等。为了能在hive中测试一些时间、数学、聚合函数,可以仿照oracle创建dual表。hive>create table dual (d...转载 2021-06-18 16:32:45 · 723 阅读 · 0 评论 -
Hive SQL调优
https://blog.youkuaiyun.com/weixin_39885067/article/details/111249913转载 2021-06-14 22:08:01 · 441 阅读 · 0 评论 -
Hive数据倾斜
https://mp.weixin.qq.com/s/E7e85l36u3TbR1gGirR0ag转载 2021-06-14 21:54:51 · 122 阅读 · 0 评论 -
Hive性能调优
https://blog.youkuaiyun.com/weixin_39790738/article/details/111249900转载 2021-06-14 21:53:22 · 75 阅读 · 0 评论 -
hive2.1安装
切换用户su hadoop 下载wget http://mirror.bit.edu.cn/apache/hive/hive-2.1.0/apache-hive-2.1.0-bin.tar.gz 移动mv apache-hive-2.1.0-bin.tar.gz /usr/local/ 解压tar zxf apache-hive-2.1.0-bin.tar.原创 2016-11-02 03:05:49 · 567 阅读 · 0 评论