HBase
文章平均质量分 68
BestbpF
在校大学生
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
sqoop将mysql中的表导入到HBase
需求:将MySQL中的emp表导入到HBase中emp表:(id int, name varchar(20))bin/sqoop import \--connect jdbc:mysql://BPF:3306/bpf \--table emp \--hbase-table emp \--column-family info \--hbase原创 2017-10-28 13:37:32 · 752 阅读 · 0 评论 -
HBase Hive整合
本次整合使用的是cdh5.5.0的版本(伪分布式环境下)首先 需要在$HIVE_HOME/lib下添加以下jar包guava-14.0.1.jarhbase-common-1.0.0-cdh5.5.0.jar hbase-server-1.0.0-cdh5.5.0.jar hbase-client-1.0.0-cdh5.5.0.jar hbase-protocol-1.0.0-cd原创 2017-10-28 13:50:16 · 360 阅读 · 0 评论 -
Hbase在HDFS上的目录树
一、0.94版本系统级别的一级目录如下,用户自定义的均在这个/hbase 下的一级子目录下/hbase/-ROOT-/hbase/.META./hbase/.archive/hbase/.corrupt/hbase/.hbck/hbase/.logs/hbase/.oldlogs/hbase/.snapshot/hba原创 2017-10-31 11:10:34 · 966 阅读 · 0 评论 -
HBase架构介绍
http://www.cnblogs.com/csyuan/p/6543018.html1. HBase框架简单介绍HBase是一个分布式的、面向列的开源数据库,它不同于一般的关系数据库,是一个适合于非结构化数据存储的数据库。另一个不同的是HBase基于列的而不是基于行的模式。HBase使用和 BigTable非常相同的数据模型。用户存储数据行在一个表里。一个数据行拥有一个可选转载 2017-10-24 12:40:54 · 446 阅读 · 0 评论 -
HBase-----JAVA API
package com.bpf.hbase;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.Cell;import org.apache.hadoop.hbase.CellUtil;import org.apache.hadoop.hbase.HBaseConfiguration;im原创 2017-10-24 12:52:24 · 237 阅读 · 0 评论 -
HBase数据导入----improttsv
需求:将HDFS中的每行以tab分隔的测试数据,使用importtsv导入到HBase的表中、在HBase中创建一个表:create 'student','info'准备的数据1001 zhangsan 35 male beijing 0108766231002 lisi 31 male hangzhou 0108762231003 zhaoliu 23 female shan原创 2017-10-25 11:12:13 · 621 阅读 · 0 评论 -
编写mapreduce实现HBase中数据的迁移
需求:将HBase中student表的列族为info,列名为name和age的数据迁移到另一个表basic中代码如下package com.bpf.hbase;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configured原创 2017-10-25 13:15:41 · 413 阅读 · 0 评论 -
HBase数据导入----improttsv&Bulk Load
使用importtsv直接导入时如果只指定一个输入目录,导出到HBase表中的数据都是存在内存中的,HDFS上并没有对应的数据(如有错误请指出,谢谢)在HBase中提供了一种BULK LOAD的方式进行:HBase 支持BULK LOAD的入库方式,它是利用HBase的数据信息按照特定格式存储在HDFS内这一原理,直接在HDFS中生成持久化的HFile数据格式文件,然后上传至合适位置,即完原创 2017-10-25 11:38:58 · 407 阅读 · 0 评论 -
Hbase java.lang.IllegalArgumentException: Wrong FS file://......expected:hdfs://...
在使用hbase中importtsv这个功能进行BULK LODING的时候,使用-Dimporttsv.bulk.output=hdfs://BPF:9000/user/bpf/hbase/hfileoutput这一参数,老是发生标题所说的错误,苦苦没有解决,后来突然在网上看到一位网友的帖子,将hadoop的core-site.xml配置文件中的hadoop.tmp.dir属性值由本地路径改原创 2017-10-25 19:57:39 · 919 阅读 · 0 评论
分享