
hbase
文章平均质量分 75
大鱼-瓶邪
工作已签,base杭州,专注毕业,后期更新可能会稍微少一点,还是会和大家一起探讨。
华中科技大学在读研究生。主要做核聚变模拟计算,管理着82个节点的集群,做大数据和机器学习,利用10多个老节点搭建各种环境钻研大数据知识,主要是Hadoop生态圈(HDFS+Spark+Sqoop+HIve+Hbase+Pig+Zookeeper)。<br>也用python做科研数据分析,机器学习。<br>熟悉scala开发<br>本科期间跟随导师做了两年的java web开发,熟悉ssh框架,mysql,oracle数据库
展开
-
搭建hbase伪分布式集群
将hbase下载解压到/usr/local修改配置文件,cd /usr/local/hbase-2.0.0/conf配置java配置hbase使用自带的zookeeper时:export HBASE_MANAGES_ZK=true设置为本地zookeepervim hbase-site.xml配置hbase存储文件的目录为HDFS 的/hbase目录(启动hdf...原创 2018-06-17 16:31:36 · 4728 阅读 · 1 评论 -
hbase数据库的一些基本操作(持续更新中)
进入到hbase安装目录的bin文件下,运行./start-hbase.sh 既可以启动,启动不了是因为配置原因,具体自己搜索,输入hbase shell 即可进入hbase'数据库的命令环境。1.创建表 create 'test','cf' ---------创建表test,并且创建列族cf。2.put 'test','row1','cf:a','va'--------为表test按...原创 2018-06-18 17:47:13 · 26427 阅读 · 3 评论 -
Hbase的体系知识及zookeeper搭建hbase集群
集群下的hbase安装见:https://blog.youkuaiyun.com/qq_25948717/article/details/80718580vim hbase-env.sh做如下修改:export HBASE_MANAGES_ZK=falseexport JAVA_HOME=/usr/local/jdk1.8.0_172--------------...原创 2018-07-14 22:35:53 · 2260 阅读 · 0 评论 -
Hbase和Hive以及传统数据库的区别
Hbase和HiveHBase 是一种类似于数据库的存储层,也就是说 HBase 适用于结构化的存储。并且 HBase 是一种列式的分布式数据库。HBase 底层依旧依赖 HDFS 来作为其物理存储,这点类似于 Hive。1.实时性:Hive 适合用来对一段时间内的数据进行分析查询,例如,用来计算趋势或者网站的日志。Hive 不应该用来进行 实时的查...转载 2018-10-08 22:16:41 · 26984 阅读 · 0 评论 -
Hbase数据库技术详细讲解
关于Hbase与其他数据的比较和简要介绍见:https://blog.youkuaiyun.com/qq_25948717/article/details/82974058HBase 相关的模块以及 HBase 表格的特性前面我们提到过 HBase 也是构建于 HDFS 之上,这是正确的,但也不是完全正确。HBase 其实也支持直接在本地文件系统之上运行,不过这样的 HBase 只能运行在一台机器...转载 2018-10-08 22:47:30 · 1077 阅读 · 0 评论