hive 字段类型变更级联

最新推荐文章于 2025-01-14 14:31:01 发布

原创

最新推荐文章于 2025-01-14 14:31:01 发布 · 1k 阅读

6 ·

CC 4.0 BY-SA版权

文章标签：

#hive #大数据 #hadoop #sql #数据仓库

文章讲述了在数仓中对分区表进行字段类型变更时遇到的问题，如历史数据显示异常。解决方案是使用`ALTERTABLE`语句加上`CASCADE`选项，以级联更新所有分区的元数据。此外，还介绍了`CASCADE`在删除操作中的作用，以及`ALTERTABLE`命令用于更改列名称、类型、位置或注释的语法和示例。

一、问题描述

踩坑：数仓的分区表，由于需求需要进行字段类型变更、新增字段等，例如要把int类型的字段改为bigint，直接执行的以下语句：

alter table table_name change column id id bigint;

出现的问题：之后的分区数据可以正常的显示，历史数据查出来的数据为0或者null，无论insert overwrite重新导数据、把有问题的分区数据删掉都不能正常显示。

二、问题解决

在我们执行更改字段类型、增加字段时，在语句末尾加上cascade

alter table table_name change column id id bigint cascade;

三、知识扩展

1、cascade的中文翻译为“级联”，也就是不仅变更新分区的表结构（metadata），同时也变更旧分区的表结构。
2、对于删除操作也是，级联删除表中的信息，当表A中的字段引用了表B中的字段时，一旦删除B中该字段的信息，表A的信息也自动删除。（当父表的信息删除，子表的信息也自动删除）
3、标准语法如下：

3.1 更改列名称/类型/位置/注释

ALTER TABLE table_name [PARTITION partition_spec] CHANGE [COLUMN] col_old_name col_new_name column_type
  [COMMENT col_comment] [FIRST|AFTER column_name] [CASCADE|RES