Hive数据仓库
关注
分享
扫一扫
L先生AI课堂
李虎，联想集团PCSD业务UDS平台推荐算法团队开发负责人，曾获2018-2019年度联想集团中国区优秀员工。在联想内部，做过多次企业内训和技术支持，并在北京线下技术沙龙分享会上作为演讲嘉宾分享算法实战应用效果，拥有丰富的线上，线下培训经验。对机器学习，深度学习算法建模，推荐系统，大数据有多年的实际经验。优快云博客专家，著有大白话算法系列，以通俗生动的方式讲解人工智能前沿算法。愿景是打造全网AI最通俗教学，赠人玫瑰，手有余香，在人工智能前行的路上一起前行，以通俗简洁详细的方式，让每一位热爱着深入其中。空间有形、梦想无限！加油！
展开
-
Hive篇--搭建Hive集群
一.前述 Hive中搭建分为三中方式 a)内嵌Derby方式 b)Local方式 c)Remote方式 三种方式归根到底就是元数据的存储位置不一样。 二.具体实现 a)内嵌Derby方式 使用derby存储方式时，运行hive会在当前目录生成一个derby文件和一个metastore_db目录。这种存储方式的弊端是在同一个目录下同时只能有一个hive客户端能使用数据库。 b)本地模式原创 2018-01-15 23:22:01 · 883 阅读 · 0 评论 -
Hive篇--相关概念和使用二
一.基本概念 Hive分桶： 1.概念 分桶表是对列值取哈希值的方式，将不同数据放到不同文件中存储。 对于hive中每一个表、分区都可以进一步进行分桶。（可以对列，也可以对表进行分桶） 由列的哈希值除以桶的个数来决定每条数据划分在哪个桶中。 2.设置 set hive.enforce.bucketing=true; 默认：false；设置为true之后，mr运行时会根据bucket原创 2018-01-15 23:22:33 · 358 阅读 · 0 评论 -
Hive篇---Hive使用优化
========================================================声明：由于不同平台源码阅读格式不一致，所以获取更多阅读体验！！请关注本人博客园地址：http://www.cnblogs.com/LHWorldBlog/p/8299470.html个人网站地址：http://www.lhworldblog.com/2018/01/18/hive====原创 2018-01-17 21:27:43 · 837 阅读 · 0 评论