Hive 创建 iceberg表

原创已于 2022-04-14 18:41:07 修改 · 3.7k 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#大数据

于 2022-04-14 18:37:03 首次发布

Iceberg 专栏收录该内容

2 篇文章

订阅专栏

本文介绍了如何开启Hive的Runtime参数，特别是针对Iceberg的相关配置，如添加Iceberg jar包，设置引擎启用及Catalog。随后展示了创建Iceberg表的步骤，使用HiveIcebergStorageHandler进行存储。

开启Hive runtime参数设置：

hive.security.authorization.sqlstd.confwhitelist=mapred.*|hive.*|mapreduce.*|spark.*|iceberg.*|engine.* 
hive.security.authorization.sqlstd.confwhitelist.append=mapred.*|hive.*|mapreduce.*|spark.*|iceberg.*|engine.*

添加iceberg jar包和设置运行参数：

add jar /data/iceberg-hive-runtime-0.13.1.jar;
SET engine.hive.enabled=true; 
SET iceberg.engine.hive.enabled=true;
SET iceberg.mr.catalog=hive;

创建iceberg表：

CREATE EXTERNAL TABLE icebergtest.testhive3(
  `name` TIMESTAMP WITH LOCAL TIME ZONE)
STORED BY 'org.apache.iceberg.mr.hive.HiveIcebergStorageHandler' ;