Hive,数据仓库,是基于Hadoop的一个数据仓库工具,它可以将结构化的数据文件映射在一直数据库表中,使用HQL(类SQL)开发,是一款很好的离线处理数据工具,在Hadoop中,用来进行离线批处理的事MapReduce,但是MapReduce比较难,新手不太好上手,所以利用Hive,Hive可以将sql语句转换为mapreduce任务运行,所以既保证了效率,又不会让新人难以接受,它同MapReduce一样,不支持实时查询。
Hive的体系结构如下:

用户接口,包括 CLI,JDBC/ODBC,WebUI
元数据存储,通常是存储在关系数据库如 mysql, derby 中
Driver:解释器、编译器、优化器、执行器
Hadoop:用 HDFS 进行存储,利用 MapReduce 进行计算
Hive基本数据类型:
Integers(整型数字类型):TINYINT 1 byte、SMALLINT 2 byte、INT 4 byte、BIGINT 8 byte、Boolean 、BOOLEAN 、Floating point numbers(浮点数):FLOAT –单精度、DOUBLE – 双精度
String type(字符串类型):STRING
Hive作为基于Hadoop的数据仓库工具,提供了一种类SQL的查询语言HQL,用于处理大规模数据集。它通过将SQL语句转换为MapReduce任务,简化了数据处理流程,特别适合离线批处理。Hive的架构包括用户接口、元数据存储、Driver及Hadoop组件。
3974

被折叠的 条评论
为什么被折叠?



