
Hbase
YZY_001
这个作者很懒,什么都没留下…
展开
-
hadoop之hbase数据分页查询
package page;import java.io.IOException;import java.util.Iterator;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.Ta...原创 2018-09-15 20:23:21 · 892 阅读 · 0 评论 -
hbase数据导入hdfs中之(使用MapReduce编程统计hbase库中的mingxing表中男女数量)
数据zhangfenglun,M,20,13522334455,zfl@163.com,23521472chenfei,M,20,13684634455,cf@gmail.com,84545472liyuchen,M,20,13522334255,lyc@163.com,84765472liuwei,M,20,13528734455,lw@qq.com,84521765liuyang,M...原创 2018-09-18 13:51:45 · 987 阅读 · 0 评论 -
Hbase之--------将Hdfs数据加载到Hbase数据库中
package Kaoshi;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;import org.apache.hadoop.hbase.HCol...转载 2018-09-18 22:01:29 · 876 阅读 · 0 评论 -
HBase的很强大,前提是你要会用
1.1、产生背景自 1970 年以来,关系数据库用于数据存储和维护有关问题的解决方案。大数据的出现后,好多公司实现处理大数据并从中受益,并开始选择像 Hadoop 的解决方案。Hadoop 使用分布式文件系统,用于存储大数据,并使用 MapReduce 来处理。Hadoop 擅长于存储各种格式的庞大的数据,任意的格式甚至非结构化的处理。Hadoop 的限制Hadoop 只能执行批量...原创 2018-12-28 23:23:39 · 401 阅读 · 0 评论 -
HdfsToHBase
package com.hdfs.hbase;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.hbase.HColumnDescriptor;import org.apache...原创 2018-12-23 17:42:10 · 304 阅读 · 0 评论 -
Hbase之文件压缩
hbase为什么压缩文件:1.节省HDFS的存储空间,缓解存储压力2.减少网络传输的数据,减轻网络传输负载HBase配置压缩前hadoop需要支持压缩,关于hadoop的压缩可以参考:第五记·Hadoop SSH免秘钥配置以及本地native配置hbase什么时候需要压缩:HBase压缩的三个阶段:1.在数据进入HDFS之前进行压缩2.在MapRecduce的shuffle过程...转载 2018-12-29 15:45:04 · 933 阅读 · 0 评论 -
Hbase为什么这么快
为何HBase速度很快?HBase能提供实时计算服务主要原因是由其架构和底层的数据结构决定的, 即由LSM-Tree(Log-Structured Merge-Tree) + HTable(region分区) + Cache决定——客户端可以直接定位到要查数据所在的HRegion server服务器,然后直接在服务器的一个region上查找要匹配的数据,并且这些数据部分是经过cache缓存的。...转载 2019-01-03 23:34:16 · 648 阅读 · 0 评论