
hive
文章平均质量分 96
匆匆z2
没有银弹
展开
-
hive on tez集成完整采坑指南(含tez-ui及安全环境)
hive on tez 介绍使用版本hadoop 3.1.1hive 3.1.0tez 0.9.2timeline v1安装过程注意点官网上文档并不能完整的搭建,需要参考源码中的文档部分配置官网文档没有写出来,需要查看源代码排查前置条件hadoop安全集群hive已安装tez搭建tez打包编译tez需要根据hadoop环境的版本,使用对应的脚本编译生成对应的...原创 2020-03-10 23:18:47 · 11809 阅读 · 10 评论 -
hive实战读书笔记(第9章)Hive性能优化
hive用户面临的一个比较大的问题是,用户需要等待较长的响应时间,与传统关系数据库查询的性能相比,hive响应速度慢的令人发指本章介绍一套诊断改进hive查询性能的系统方法,通过这个过程,将单个hive查询的执行时间从475秒缩短到49s执行引擎hive目前支持3种执行引擎,每种引擎都各有优缺点,默认的引擎由hive-site.xml文件中的hive.execution.engine属性控制...原创 2019-12-25 22:21:20 · 622 阅读 · 0 评论 -
hive实战读书笔记(第4章)hive表DDL
schema-on-readhadoop提供了存储和处理任何结构化,半结构化,非结构化数据的能力,hive允许用户在这些数据上创建一个元数据层,并使用sql接口来访问该层.hive并不是一个数据库,而是一个友好的接口,可以查询hdfs上的底层数据文件,是一种读取数据的模式,因而叫做schema-on-readhive的数据模型hive的数据模型与关系型数据库非常类似,由表,列,行和分区组成...原创 2019-12-23 22:43:36 · 354 阅读 · 0 评论