Hive的行级acid事务处理

最新推荐文章于 2025-01-22 09:11:59 发布

缘定三石

最新推荐文章于 2025-01-22 09:11:59 发布

阅读量1.9k

点赞数

CC 4.0 BY-SA版权

分类专栏： Hive实战文章标签： Hive 事务处理

本文链接：https://blog.youkuaiyun.com/tian_qing_lei/article/details/77461309

本文介绍了Hive从0.13.0版本开始支持的行级ACID事务处理，包括设置相关属性、显式事务命令、操作语法等。创建支持事务的桶表并使用ORC文件格式是关键，同时展示了INSERT、UPDATE和DELETE操作的示例。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

//事务,hive 0.13.0之后完全支持行级acid事务处理。
//所有事务都是自动提交，并且存储文件只能是orc文件,而且只能在桶表中使用。
1.设置相关属性
SET hive.support.concurrency = true;
SET hive.enforce.bucketing = true;
SET hive.exec.dynamic.partition.mode = nonstrict;
SET hive.txn.manager = org.apache.hadoop.hive.ql.lockmgr.DbTxnManager;
SET hive.compactor.initiator.on = true;
SET hive.compactor.worker.threads = 1;

2.显式事务命令:
SHOW TRANSACTIONS;

3.操作语法
INSERT INTO TABLE tablename [PARTITION (partcol1[=val1], partcol2[=val2]...)] VALUES values_row [, values_row …];
UPDATE tablename SET column = value [, column = value…] [WHERE expression]
DELETE FROM tablename [WHERE expression]

4.创建表时，使用桶表，orc文件格式，支持事务的属性
create table tx(id int ,name string , age int)
clustered by (id) into 2 buckets
stored as orc
TBLPROPERTIES('transactional'='true');

5.执行操作
insert into