HIVE/IMPALA 按条件或按分区删除数据

Impala中按条件删除数据的技巧
Impala不支持直接的DELETE操作,删除数据通常通过INSERTOVERWRITE结合SELECT语句实现,保留满足条件的行。对于非分区表,可以使用WHERE子句配合NOTIN或<>。如果时间字段是分区字段,应使用ALTERTABLE语句的DROPIFEXISTSPARTITION方法来删除特定时间分区的数据。

impala按条件删除数据不支持delete,而是重写覆盖的形式来达成删除的目的。

具体语法:insert overwrite table 表名 select * from 表名 where 需要保留的数据;

注:where 后可以使用<>或者 not in 来筛选需要删除的数据。

如果按照时间批量删除数据,时间字段不是分区字段的情况按照以上方式可以删除,如时间字段是分区字段,则需要使用以下语法:

alter table 表名 drop if exists partition(时间=' ');

例:

alter table 表名 drop if exists partition(etl_dt=cast('2023-12-31' as varchar(90)));

 

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值