目录
1.前提环境
- 参考我的上一篇博客CDH Phoenix映射HBase_1
- https://blog.youkuaiyun.com/qq_36454119/article/details/118485863
2.表映射操作步骤
- phoenix中创建映射HBase表时不需要HBase中存在此表的,但是如果HBase中事先存在此表,则创建映射表时需要对应全部字段信息方可,这里测试,我们认为HBase中没有对应的表,开始创建映射表
-
首先是让phoenix连接zk,操作HBase,这里可以多台zk节点,也可以写一台;可以写出2181端口如“cm:2181”,也可以不写
#/opt/cloudera/parcels/APACHE_PHOENIX/bin/phoenix-sqlline.py cm
-
在命名空间test下创建bbb表(需要注意所有字段定义需要加上双引号且列需要带上所属列簇)
>create table "test"."bbb"( >"ROW" varchar PRIMARY KEY, >"info"."name" varchar, >"info"."age" varchar) column_encoded_bytes=0;
-
这是因为在 4.10 版本之后,Phoenix 对列的编码方式有所改变(官方文档地址:http://phoenix.apache.org/columnencoding.html)。就拿上面的例子来说,同样是"name"这个列,看起来列名是一样的,但是 Phoenix 对这个列名进行了编码,也就是说 Phoenix 创建的 name 列实际上和 HBase 里的 name 列不是一个列了,所以可能查不出来数据。
-
说白了就是将Phoenix列名与hbase列直接添加一个中间列名,进行一个映射关联
-
这样做的好处是:减少存储空间,提升性能
-
如果想要禁用列映射有两个办法
在hbase-site.xml中 phoenix.default.column.encoded.bytes.attrib = 0 来全局禁用列映射。 |
在创建表的时候添加 COLUMN_ENCODED_BYTES = 0 (create table tablename(列信息)COLUMN_ENCODED_BYTES = 0;)来指定某个表是否启用列映射(不影响其他表) |
-
所以这里我们创建表时使用了column_encoded_bytes=0,关闭列映射
-
这样我们就能成功映射到HBase中了,在HBase中查看,可以发现该表已自动创建并且没有数据只有phoenix的连接信息
>scan 'test:bbb' ... ... >desc 'test:bbb'
-
现在向HBase中插入数据
>put 'test:bbb','001',"info:name",'zhangsan' ... ... >scan 'test:bbb'
-
在phoenix中查看
>select * from "test"."bbb";
-
至此就完成了表映射啦!!!
-
对于HBase已存在的表进行映射也是一样的,就是需要将列一一对应上,而对于不存在的表phoenix这边你可以随便定义,只要你按照这个逻辑能插入数据就行
3.写在最后
- phoenix映射HBase表所创建的视图是可以随便删除的,不会影响源表
- 但是phoenix映射HBase表所创建的表如果删除,那么HBase中的源表也会被删除,请注意!
- 那么,如果我不小心建了一张映射HBase表的phoenix表,我该怎样在不删除源表的情况下删除掉呢?
- 操作如下:
- 首先删除phoenix中的SYSTEM.CATALOG表中的表信息,该表用于记录phoenix表的一些重要信息
>use "test"; >delete from SYSTEM.CATALOG where TABLE_NAME ='bbb';
-
这样在phoenix端就已经查看不到此表的信息了
-
接下来还需要删除HBase中的一些phoenix映射信息
>disable 'test:bbb' >alter 'test:bbb',METHOD=>'table_att_unset',NAME=>'coprocessor$1' >alter 'test:bbb',METHOD=>'table_att_unset',NAME=>'coprocessor$2' >alter 'test:bbb',METHOD=>'table_att_unset',NAME=>'coprocessor$3' >alter 'test:bbb',METHOD=>'table_att_unset',NAME=>'coprocessor$4' >alter 'test:bbb',METHOD=>'table_att_unset',NAME=>'coprocessor$5' >enable 'test:bbb'
-
重新查看一下HBase 的表结构
>scan 'test:bbb' >desc 'test:bbb'
-
这样我们就成功在不影响源表的情况下删除phoenix的映射表啦!
-
此文章参考了以下大佬的部分文章内容,有兴趣的同鞋可以去拜读一下:
- 首先删除phoenix中的SYSTEM.CATALOG表中的表信息,该表用于记录phoenix表的一些重要信息