
HBase
HBase基础和实战
浮云6363
这个作者很懒,什么都没留下…
展开
-
【spark】Spark读取HBase表(newAPIHadoopRDD方式)
hbase依赖于zookeeper和hadoop,spark读取hbase数据需要连接到zookeeper,通过zookeeper访问hbase:第一种是将hbase-site.xml文件加入classpath第二种是在HBaseConfiguration实例中设置如果不设置,默认连接的是localhost:2181会报错:connection refused本文使用的是第二种方式。maven中需要引入依赖<?xml version="1.0" encoding="UTF-8"?>原创 2020-10-11 20:27:35 · 3587 阅读 · 0 评论 -
phoenix和hbase表迁移
工作中有时因为沟通问题,在phoenix中新建的表和hbase导入数据到表名称不一样,需要将有数据的表名更改为线上有的表名。思路:在hbase中通过快照方式将有数据的表迁移到线上用的phoenix表先禁用旧表disable 'temp:old_table'再将旧表备份成快照snapshot 'temp:old_table', 'tableSnapshot'克隆快照数据到新表(注意:新表...原创 2020-05-06 23:30:04 · 767 阅读 · 0 评论 -
HBase Shell命令(DDL/DML等命令介绍)
文章目录启动HBase ShellHBase Shell相关命令通用命令help命令namespace操作create_namespacelist_namespacelist_namespace_tablesalter_namespacedescribe_namespacedrop_namespaceDDL操作createdescribeexistsalterdisableenabledropDM...原创 2020-04-12 02:10:47 · 1778 阅读 · 0 评论 -
HBase组成架构
文章目录HBase组成ZookeeperHMasterHRegionServerHDFSHBase架构MemStoreHLogStoreFile和HFileHBase组成HBase主要有以下四大组件:Zookeeper(高可用、元数据的统一入口地址、管理HRegionServer)、HMaster(管理HRegionserver、维护集群的元数据信息和负载均衡)、HRegionServer(...转载 2020-04-06 17:16:57 · 2937 阅读 · 0 评论 -
HBase概述(概念、数据模型、特点和优势)
目录HBase是什么?HBase与RDBMS对比数据模型NameSpaceTableRow KeyColumns FamilyTimeStampCellHBase的特点HBase是什么?HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,目标是存储并处理大型的数据,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。因此我们说HBase是大量廉价的机器解...原创 2020-04-05 00:42:05 · 4217 阅读 · 0 评论