HIVE中纵表转横表

最新推荐文章于 2023-09-18 21:22:12 发布

原创

最新推荐文章于 2023-09-18 21:22:12 发布 · 1.4w 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #hive

这篇博客介绍了如何在Hive中将纵表转换为横表，针对一个具有详细信息的纵表table T1，提出了使用split和concat_ws等函数结合collect_list的转换方法，通过group by id实现数据重组。

最近在写hive脚本的时候，遇到一个问题就是，现在存在一个纵表（详细表），如下所示 table T1

id	bankname	cardname
1	中国银行	金卡
2	中国银行	白金卡
3	建设银行	普卡
4	工商银行	金卡
5	建设银行	钻石卡

想把上面的纵表变为横表便于观看，如下所示：

id	bankname1	cardname1	bankname2	cardname2
1	中国银行	金卡	中国银行	白金卡
2	建设银行	普卡

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

这孩子谁懂哈

关注关注

1
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Hive实现值列表横向展示（非列转行）

清平乐的技术专栏

06-10

226

当前有各个流程的节点名称和节点时间。数仓中的表存在的格式为纵向存储，分别为节点名称、接收时间。现数据分析过程中需要将每个流程的节点时间横向展示，如果没有该节点则置空。这种区别于行转列和列转行的操作。（具体可参考博主**

hive 宽表变竖表长表变宽表

qq_39674417的博客

03-01

1122

1.这是源数据以及需要转化的目标表. 我们的方法是 , 用 GROUP BY按照year分组 , 并且依次提取1月,2月,3月,4月的 num,具体实现 1 2 3 4 5 6 selectyear, max(casewhenmonth=1thenmoneyelse0end)asM1, max(casewhenmonth=2thenmoneyelse0end)asM...

参与评论您还未登录，请先登录后发表或查看评论

HIVE纵表变横表

qq_33660423的博客

10-19

1215

有这这样一张表t_buy_buyer_time_hongbao_asc 用户id 次序购买时间 25560 1 1325345254 25560 2 1331043510 25560 3 1331999999 25720 1 1320381121 25720 2 1320461154 25720 3 1320639271 26840 1 1337214675 26840 2

Hadoop MapReduce纵表转横表与横表转纵表

三分地

08-24

3348

输入数据如下：以\t分隔 0-3岁育儿百科书 23 0-5v液位传感器 5 0-5轴承 2 0-6个月奶粉 23 0-6个月奶粉c2c报告 23 0-6个月奶粉在线购物排名 23 0-6个月奶粉市场前景 23 0-6个月配方奶粉 23 0.001g电子天平 5 0.01t化铝炉 2 0.01吨熔铝合金炉 2 0.03吨化镁炉

hive分隔符引发的坑

weixin_49063354的博客

04-07

766

hive分隔符引发的坑这两天在做公司 BPM 系统数据分析的工作，前期需要将 BPM 系统的数据导入到 HDFS 上，BPM 系统数据存储在 SQL Server 上，导入数据工具选择 Sqoop ，按照 Sqoop 操作惯例，需要先下载相应的驱动 jar 包，这里是网上下载的 mssql-jdbc-7.4.1.jre8.jar（图示上为 sql server 的驱动 jar 包，下为 mysql 的驱动 jar 包）；然后将下好的 jar 包上传到 Sqoop 的 lib 目录下；

hive 列转行，纵表转横表

weixin_50599130的博客

09-18

576

hive 中行列转换一般选择爆炸函数explode和侧视图laterval view搭配使用。map()会将传入的值或字段转换为key:value形式。第一步使用map()函数将uv、pv、ip 转为键值对。第二步使用侧视图搭配爆炸函数把键值对炸开。

Hive纵向表转横向表

a805814077的博客

09-17

956

Hive纵向表转横向表的方式

ES6封装MongoDB的CRUD

jiwei_1234____5的博客

10-03

2801

node.js调用mangodb的操作还是有点繁琐的，为了简化底层操作，关注具体业务，我特意吧MongoDB封装了一下，话不多说直接看代码封装代码 let MongoClient = require('mongodb').MongoClient; const url = "mongodb://127.0.0.1:27017/" class Dbc { constructor(dataName,colName) { this.dataName = dataName this.col

将纵表转化成横表

冰狼的专栏

07-26

1025

select a as 'a', max(case b when 'name' then c else 0 end ) name, max(case b when 'sex' then c else 0 end ) sex, max(case b when 'age' then c else 0 end ) age, max(case

hive横转竖

09-06

1218

1.vi yongchun_job.txt This is my test 2.create table yongchun_job_1( col_1 string, col_2 string, col_3 string, col_4 string )

hive 使用笔记（table format；lateral view横表转纵表）

a45691316的博客

12-02

1134

hive 使用笔记（table format；lateral view横表转纵表） 1. create table 创建一张目标表，指定分隔符和存储格式： create table tmp_2 (resource_id bigint ,v int) R...

纵表与横表互转的SQL

水工鸟的专栏

12-10

829

1、纵表转横表：纵表结构 TableA Name Course Grade 张三语文 75 张三数学 80 张三英语 90 李四语文 95 李四数学 55

hive调优——竖表变横表

u014158708的博客

10-14

1774

转载自：http://gengu.iteye.com/blog/1696577 有这这样一张表t_buy_buyer_time_hongbao_asc 用户id 次序购买时间 25560 1 1325345254 25560 2 1331043510 25560 3 1331999

hive 高级数据类型使用之array（含横表转纵表）

热门推荐

dreamingfish2011的博客

04-26

1万+

hive 高级数据类型使用用了许久的hive，但是一直都是简单的sql join，sort， order by等，今天有一个业务场景需要使用array数据类型存储数据并进行横表转纵表的转换。mark下以后用了可以查询。数据样子是这样的。 ID type_flag tags 10001 3 11_20_30,11_22_34,12_23_30,13_24_36 10002

成绩单、业绩表SQL(一个纵表变横表一个用开窗函数)

shenghuiping2001的专栏

09-25

2221

原始表： name course score ----------------------------------------- 张三语文 80 张三数学 75 张三外语 60 李四

Hive hql纵向变横向

yeserumo的博客

08-21

643

数据表结构 HQL语句实现纵方变横向 select name as xingming, sum(case when subject = 'yuwen' then result end) as yuwen, sum(case when subject = 'shuxue' then result end) as shuxue, sum(case when subject = 'wuli' then result end) as wuli from table1 group by name; 转变结果

字符串分组相加 row_number() 纵表转横表

hechch的博客

11-17

269

--1.准备工作create table TEST( id VARCHAR2(10), mc VARCHAR2(50)); insert into test (ID, MC) values ('2', '11111'); insert into test (ID, MC) values ('2', '22222'); insert into test (ID, MC) values ('...

窄表变宽表方式

iteye_13422的博客

03-24

2109

1.使用decode,根据窄表某字段的值,来判断作为宽表的哪个字段. 2.使用union+group by. 每次取窄表的某一种值,作为宽表的一个字段,其他设为空,作为一个子表; union连接各各字表; group by 聚合; ...

hive长表转宽表

最自由的笑的博客

06-26

2581

需求分析本地原始数据 name message value tom age 18 tom sex 男 tom address 西安 jack age 25 jack sex 女 jack address 重庆转换后数据 name age sex address tom 18 男西安 jack 25 女重庆实现思路创建stu表导入数据 create table stu ( name string, message string, value string )