qq_45798620的博客

Hive 优化并行优化小文件优化矢量化查询读取零拷贝优化数据倾斜优化JOIN的时候的倾斜方案一方案二方式1：运行时判断方式2：编译时判断Union优化GROUP BY分组统计的倾斜处理优化1:优化2：MapReduce迭代计算的概念（补充）MapReduce的计算模型MR的迭代Hive优化小总结并行优化并行编译Hive默认情况下，只能同时编译一个SQL到MapReduce代码的转换，并对这个过程上锁。为了提高效率，同时减少死锁发生的可能性，我们需要将这个一次只能编译一个的操作，优化为并行执行。

基本操作数据库基本操作数据库表基本操作管理表外部表分区表分桶表修改表hive表中加载数据hive表中的数据导出hive查询语法select常用函数LIMIT语句WHERE语句数据库基本操作创建数据库create database if not exists 数据库名;use 数据库名;说明：hive的表存放位置模式是由hive-site.xml当中的一个属性指定的<name>hive.metastore.warehouse.dir</name><val

hive 常用运算和函数关系运算逻辑运算与数学运算数值运算日期函数条件函数字符串函数关系运算Hive支持的关系运算符：•常见的关系运算符•等值比较: =•不等值比较: <>•小于比较: <•小于等于比较: <=•大于比较: >•大于等于比较: >=•空值判断: IS NULL•非空判断: IS NOT NULL•LIKE比较: LIKE•JAVA的LIKE操作: RLIKE•REGEXP操作: REGEXP•等值比较: =语法：A=B操作

Hive安装使用mysql共享hive元数据安装解压hivecd /export/soft/tar -zxvf hive-1.1.0-cdh5.14.0.tar.gz -C ../servers/直接启动 bin/hivecd ../servers/hive-1.1.0-cdh5.14.0/bin/hivehive> create database mytest;缺点：多个地方安装hive后，每一个hive是拥有一套自己的元数据，大家的库、表就不统一使用mysql共享hive

Hive什么是Hive为什么使用HiveHive的特点Hive架构基本组成Hive与Hadoop的关系Hive与传统数据库对比Hive的数据存储什么是HiveHive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能（HQL）。其本质是将SQL转换为MapReduce的任务进行运算，底层由HDFS来提供数据的存储，hive可以理解为一个将SQL转换为MapReduce的任务的工具。为什么使用Hive直接使用hadoop所面临的问题：人员