HIVE 增加修改删除字段

非分区表

增加字段

增加字段可以使我们在所有字段之后和分区字段之间增加一个字段
在这里插入图片描述
使用格式

ALTER TABLE table_name 
  ADD|REPLACE COLUMNS (col_name data_type [COMMENT col_comment], ...)
  [CASCADE|RESTRICT]                         -- (Note: Hive 1.1.0 and later)

使用示例,在 user_info 中增加 user_addr 字段,现有的表数据如下:
在这里插入图片描述

ALTER TABLE user_info ADD COLUMNS (user_addr string COMMENT '用户地址');

在这里插入图片描述
当我增加新的字段 user_addr 后,新增字段前的数据该列显示为 NULL ,那么如果我们新增一条数据呢?

INSERT INTO TABLE user_info
SELECT '003' as user_id, 'jack' as user_name, '34' as age, '广东深圳' as user_addr
;

结论:非分区表新增字段后,原有数据的该字段会显示为 NULL,新增的数据会按新增的数据进行展示
在这里插入图片描述
还没结束,我们向 user_info 再新增 user_appr 字段的时候再加下这两个 CASCADE、RESTRICT 属性,看看会发生什么

ALTER TABLE user_info ADD COLUMNS (user_appr string COMMENT '用户偏好') CASCADE;

在这里插入图片描述
添加 CASCADE 后执行失败,说明非分区表再添加字段时不能加CASCADE

ALTER TABLE user_info ADD COLUMNS (user_appr string COMMENT '用户偏好') RESTRICT;

在这里插入图片描述
添加RESTRICT 后执行成功,该语法具体含义后面再述

修改字段(修改字段名称、类型、注释、顺序)

修改前
在这里插入图片描述

修改字段 user_addr 的字段名称为 user_address

ALTER TABLE user_info CHANGE user_addr user_address string;

Hive 中,外部表的设计初衷是为了让 Hive 不完全管理数据的生命周期,数据通常存储在 HDFS 上的指定路径,并且删除表时不会删除底层数据。Hive 不支持直接通过 `ALTER TABLE ... DROP COLUMN` 的方式删除字段列,尤其在外部表中这一限制更为严格。但可以通过以下方式间接实现删除字段列的效果。 ### 1. 使用 `ALTER TABLE ... REPLACE COLUMNS` 替换字段结构 Hive 提供了 `REPLACE COLUMNS` 的语法来重新定义表的字段结构。该方法适用于内部表,但在某些版本的 Hive 中也有可能对外部表支持,具体取决于 Hive 的版本实现。如果尝试在外部表中使用该语句失败,可以尝试如下替代方法: ### 2. 创建新表并筛选需要的字段Hive 中,若外部表无法使用 `REPLACE COLUMNS`,可以通过创建新表并选择性地保留所需的字段来模拟删除列的效果。具体步骤如下: - 创建一个与原外部表结构相同但仅包含所需字段的新表,并将数据插入新表中: ```sql CREATE EXTERNAL TABLE new_table_name ( a INT, b INT, c STRING ) LOCATION '/path/to/new/data'; INSERT INTO TABLE new_table_name SELECT a, b, c FROM old_table_name; ``` ### 3. 使用视图(View)隐藏不需要的字段 如果不想实际修改表结构或创建新表,还可以通过创建视图的方式隐藏某些字段,从而达到逻辑上“删除”列的效果: ```sql CREATE VIEW filtered_view AS SELECT a, b, c FROM external_table; ``` 通过查询 `filtered_view`,用户将只能看到指定的字段。 ### 4. 修改元数据并重建外部表 对于某些 Hive 版本,可能需要手动操作 Hive 元数据存储(如 MySQL 或 PostgreSQL 数据库)来修改字段定义,然后重建外部表指向原始数据路径。这种方式较为复杂且风险较高,建议在测试环境中验证后再操作生产数据。 ### 注意事项 - 在进行任何字段删除或结构调整前,建议对原始数据和元数据进行备份。 - Hive 的版本差异可能导致某些方法在特定环境中不可用,因此在实际操作前应验证所用 Hive 版本的支持情况。 - 对于外部表,建议优先考虑使用视图或创建新表的方式,以避免对原始数据和元数据造成不可逆的影响。
评论 4
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值