云智禅师的专栏

1.Hadoop是什么？ 一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有着高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上。而且它提供高传输率（hig

hbase安装cankaohttp://blog.youkuaiyun.com/xanxus46/article/details/45133977http://mirror.bit.edu.cn/apache/hbase/hbase-1.0.3/hbase安装相对简单，就是把其整合hadoop 1.解压tar -zxvf hbase-1.0.0-bin.tar.gz

2017-04-07 02:32:01,081 ERROR [main] client.ConnectionManager$HConnectionImplementation: Can't get connection to ZooKeeper: KeeperErrorCode = ConnectionLoss for /hbaseERROR: KeeperErrorCode = Co

SLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/usr/local/hive/apache-hive-2.1.1-bin/lib/log4j-slf4j-impl-2.4.1.jar!/org/slf4j/impl/StaticLoggerBinder.class]S

1、安装ubuntu-16.10-server准备　　ubuntu系统ubuntu-16.10-server-amd64　　vmware workstation 112、安装ubuntu-16.10-server3、安装ubuntu-16.10-server

大数据架构师：hadoop、Storm该选哪一个？http://www.aboutyun.com/forum.php?mod=viewthread&tid=6858

阅读目录1、安装CentOS72、安装JDK1.7.03、安装Hadoop2.6.04、SSH无密码登录　　本文仅作为学习笔记，供大家初学Hadoop时学习参考。初学Hadoop,欢迎有经验的朋友进行指导与交流！1、安装Ubuntu16.10

阅读目录1、WordCount源码2、编译源码3、运行4、查看结果1、WordCount源码将源码文件WordCount.java放到Hadoop2.8.0文件夹中。import java.io.IOException;import java.util.StringTokenizer;import org.apache.hado

1、建立三个个测试的目录先切换到Hadoop下，创建input, output, test。mkdir ./inoutmkdir ./outputmkdir ./test2、建立测试文件 vim test.txt然后输入如下数据hello hadoophello WorldHello JavaH

import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.HColumnDescriptor;import org.apache.hadoop.

几个相关类与HBase数据模型之间的对应关系java类HBase数据模型HBaseAdmin数据库（DataBase)HBaseConfigurationHTable表（Table)HTableDescriptor列

Hbase基本使用示例：import java.io.IOException; import java.util.ArrayList; import java.util.List; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; impo

编辑文件如下列代码所示。注意项有2：1.其中首先需要注意hdfs://dm4:9000/hbase这里，必须与你的Hadoop集群的core-site.xml文件配置保持完全一致才行，如果你Hadoop的hdfs使用了其它端口，请在这里也修改。再者就是Hbase该项并不识别机器IP，只能使用机器hostname才可行，即若使用dm4的IP(192.168.0.10)是会抛出java错误

HBaseConfiguration是用来配置HBase的对象。意思是把HBase的配置文件添加到配置信息中，这个类继承自org.apache.hadoop.conf.Configuration，他只有两个过时的构造方法，这里不讲。他还有两个静态的创造配置文件的方法，create() 和create(org.apache.hadoop.conf.Configuration 

HBase基本命令下面我们再看看看HBase的一些基本操作命令，我列出了几个常用的HBase Shell命令，如下：名称命令表达式创建表create '表名称', '列名称1','列名称2','列名称N'添加记录      put '表名称', '行名称', '列名称:', '值'查看记录get '表名称', '行名称

1、需要的jar包：commons-codec-1.4.jarcommons-logging-1.0.4.jarhadoop-0.20.2-core.jarhbase-0.20.6.jarlog4j-1.2.15.jarzookeeper-3.2.2.jar 2、已有表结构：1、表名：scores2、列族：co

实现一个Hbase的java版本的客户端1、目的：实现URL get传入数据或者Post方式传输数据，进而操作Hbase2、实现客户端是引子，我们要实现的是如果通过这种方式，从而避开Thrift或者Rest 来对Hbase进行操作步骤：     1、可以建一个web工程，方便在应用服务器加载，并方便使用可以建一个jsp 或者servlet 来接受传入的数据，

[java] view plaincopypackage web;    import java.io.IOException;  import java.io.PrintWriter;  import java.util.ArrayList;  import java.util.List;    import javax.servlet

Table中Family和Qualifier的关系与区别就像用MySQL一样，我们要做的是表设计，MySQL中的表，行，列的在HBase已经有所区别了，在HBase中主要是Table和Family和Qualifier，这三个概念。Table可以直接理解为表，而Family和Qualifier其实都可以理解为列，一个Family下面可以有多个Qualifier，所以可以简单的理解为，HBas

上面的例子，我们用HBase可以按以下方式设计 HTable一些基本概念 Row key 行主键， HBase不支持条件查询和Order by等查询，读取记录只能按Row key（及其range）或全表扫描，因此Row key需要根据业务来设计以利用其存储排序特性（Table按Row key字典序排序如1,10,100,11,2）提高性能。 Column

Hbase的基本介绍　　今天公司进行了一样关于Hbase的培训，让我对Hbase有了基础的了解。和大家分享一样。自己的理解不是很深，如果有说的不对地方，希望大家斧正。　　什么是Hbase？　　HBase是一个分布式的、面向列的开源数据库。　　分布式：Hbase的分布式是依托于Hadoop的，那Hadoop又是什么？Hadoop 是一个能够对大量数据进行分布式处理的软

1.列出安装Hadoop流程步骤a) 创建hadoop账号b) 更改ipc) 安装Java 更改/etc/profile 配置环境变量d) 修改host文件域名e) 安装ssh 配置无密码登录f) 解压hadoopg) 配置hadoop  conf下面的配置文件h) Hadoop namenode -format  格式化i) Start 启动2.列出h