- 博客(2)
- 收藏
- 关注
RSS订阅
原创 Hive自定义分区器流程
Hive自定义分区器流程1. 环境说明当前环境采用Hadoop3.1.3以及Hive3.1.2版本!2. 自定义类自定义类实现org.apache.hadoop.mapred.Partitioner(必须为这个,Hive中使用的是老的API)接口，这里只是做测试，所以所有数据我现在全部发送至0号分区注意分区器中Key和Value类型！！！package com.wh;import org.apache.hadoop.hive.ql.io.HiveKey;import org.apach
2020-12-18 20:53:36
3849
18
原创 Hive中的多维分析函数
标题Hive中的多维分析函数众所周知，Hive是一个OLAP数据库，拥有着很强大的数据分析能力。但是当我们一张表的维度信息特别多，并且需要各种维度组合的统计分析结果时就很不方便。比如一张表有5个维度，所有的维度组合是2的5次方也就是32种，那也就意味着我们需要写32个查询的HQL解决我们的需求。同时不方便的点还存在于我们需要将32个HQL的查询结果写入到32张不同的表中，无形中给我们未来查询我们所需要的信息增加了一些难度。本篇文章就是介绍Hive中非常好用的多维分析函数帮助我们解决以上两个痛点问题。
2021-08-17 00:29:13
2997
5
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人