大数据(3f)HIVE拉链表

什么是拉链表

  • 数仓设计中的一种表,记录数据的历史状态和最新状态
    zip table亦可译作压缩表
  • 优点:和全量表相比,可大大节省存储空间
  • 应用场景:数据量大但变化量不大,且有查看历史快照的需求

拉链表制作

从拉链表取出快照

HIVE实现拉链表

1、建表

1、建库

DROP DATABASE IF EXISTS b0 CASCADE;
CREATE DATABASE b0;
USE b0;

2、新增和变化表(按天分区)

DROP TABLE IF EXISTS ods_user;
CREATE TABLE ods_user(i STRING,balance INT) PARTITIONED BY (ymd DATE);

3、拉链表

DROP TABLE IF EXISTS dwd_user;
CREATE TABLE dwd_user(i STRING,balance INT,start_date DATE,end_date DATE);

2、插入数据到 每天新增和变化表

此处为一次性插入,实际场景是每天插入

INSERT INTO ods_user (i,balance,ymd) VALUES
('a1',100,'2020-01-01'),
('a2',0,'2020-01-01'),
('a1',300
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小基基o_O

您的鼓励是我创作的巨大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值