Hbase数据映射到hive

最新推荐文章于 2023-09-15 09:53:06 发布

原创

最新推荐文章于 2023-09-15 09:53:06 发布 · 2k 阅读

5 ·

CC 4.0 BY-SA版权

文章标签：

#hive #hbase #大数据

本文介绍了如何将Hbase数据映射到Hive的外部表，讨论了映射规则，包括字段类型对应、空cell处理和不匹配字段的处理。同时，解释了Hive外部表对Hbase数据的映射方式，强调了Hbase数据变化会实时反映到Hive表中，而删除Hive外部表不影响Hbase。下篇将探讨Hive内部表映射到Hbase的情况。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

今天同事过来问我hbase和hive字段类型之间的对应关系，我就顺带问了一下，她在干什么，她说要将hbase的数据映射到hive中去，建一个hbase的映射表，问我是建一个hive的内部表映射呢，还是外部表映射呢。我说当然是外部表啦。恰好最近正在做知识总结，我就来总结下这个映射关系吧。

外部表映射

现在看一下Hbase数据到hive外表的映射，代码如下：

create external table stu_info{
  key string comment '主键',
  name string comment '名字',
  age int comment'年龄'
}
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'   
WITH SERDEPROPERTIES