WandaZw的博客

  HIVE 基本概念 Hive 简介 什么是Hive hive 是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。 为什么用Hive 难点：学习成本太高；项目周期要求太短；MapReduce实现复杂逻辑开发难度大； 优势：接口采用类SQL语法，提供快速开发能力；不需要写MapReduce，减少学习成本；功能扩...

1：内置函数 hive 内置函数有很多，如同mysql自带的一系列函数：如 nvl(),sum(),avg()等等   2：Hive 自定义函数 UDF开发 UDF  作用于单个数据行，产生一个数据行作为输出。（数学函数，字符串函数） UDAF（用户定义聚集函数）：接收多个输入数据行，并产生一个输出数据行。（count，max） 开发实例 1、先开发一个java类，继承UDF，并重载...

DDL 操作 建表语法 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT table_comment] [PARTITIONED BY (col_name data_type [COMMENT col...

桶表的介绍 对于每一个表（table）或者分区，Hive 可以进一步组织成桶，也就是说，桶时更为细粒度的数据范围划分。Hive 也是针对某一列进行桶的组织。Hive 采用对列值哈希，然后除以桶的个数求余的方式决定记录存放在哪个桶当中。 把表或者分区组织成桶有两个理由： （1）或者更高的查询处理效率。桶表为表加上了额外的结构，Hive在处理有些查询时能利用这个结构。具体而言，连接两个在（包含连...