shatelang的专栏

备注：      搭建完(hadoop+hbase)整个集群是能够完美的运行，其中期间出过些小问题，如有一台机器和其他机器时间相差很远，结果是HRegionServer启动的时候超时，这个时候要么时间同步，或者在配置文件中添加相应的参数      我所在的实验室，整个集群是通过ccproxy代理来连接互联网，然后是远程连接整个集群

集群基本环境：        这个可以参考上一篇日志：http://blog.youkuaiyun.com/shatelang/article/details/7668885     在使用sqoop连接oracle时，也就是使用sqoop将oracle数据库中的数据导入到hdfs出的问题： ERROR tool.ImportTool: Imported Failed: Attempted to gen

集群环境：     hadoop1.0.0     hbase0.92.1     zookeeper3.4.3     hive0.8.1     sqoop-1.4.1-incubating__hadoop-1.0.0.tar        首先，当然前提是hadoop集群环境已经搭建好了。如没有搭建好，可以参考上期日志：http://blog.youkuaiyun.com/shatelan

hive的路径已经加载到/etc/profile 中 当前启动hive的路径是/home/hadoop/app/hive/hive0.8.1* 测试数据的地址为：/home/hadoop/app/testData/book.txt'    hive> load data local inpath '/home/hadoop/app/testData/book.txt'  overwrite

异常： hive> CREATE TABLE hbase_table_1(key int, value string)      > STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'     > WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,cf1:val")

本篇文章结构： 总共包括10个系列    ZooKeeper系列之一：ZooKeeper简介   ZooKeeper系列之二：ZooKeeper数据模型、命名空间以及节点的概念    ZooKeeper系列之三：ZooKeeper的安装 ZooKeeper系列之四：ZooKeeper的配置 ZooKeep

今年年初的时候，写了一篇ZooKeeper的入门文章《初识ZooKeeper》，一直到这一周，才有时间将ZooKeeper整个源码通读了一遍。不能说完全理解了ZooKeeper的工作原理与细节，但是之前心中一直关于ZooKeeper的疑问都得到了解释。 　　现在网上关于ZooKeeper的文章很多，有介绍Leader选举算法的，有介绍ZooKeeper Server内部原理的，还有介绍ZooKe

感觉这文章不错，特意转载过来 好让自己随时都可以翻来看看 ZooKeeper 是什么？   ZooKeeper 顾名思义 动物园管理员，他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig)  的管理员， Apache Hbase和 Apache Solr 以及LinkedIn sensei  等项目中都采用到了 Zookeeper。ZooKeep

记得在大约在2006年的时候Google出了Chubby来解决分布一致性的问题(distributed consensus problem)，所有集群中的服务器通过Chubby最终选出一个Master Server ，最后这个Master Server来协调工作。简单来说其原理就是：在一个分布式系统中，有一组服务器在运行同样的程序，它们需要确定一个Value，以那个服务器提供的信息为主/为准，当这

目前的集群环境，需要远程连接hdfs 在使用eclipse3.3 是可以连接到hdfs，不过很遗憾，每次在运行程序时，run on hadoop都会报异常 奇异常界面：          解决办法是：     我是使用eclipse3.7 可以完美使用，而且在linux系统下试了下连接hbase 也ok myeclipse 也能够运行 所使用的插件都是

eclipse 连接hbase 异常为： SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/D:/apache/hbase/hbase-0.92.1/hbase-0.92.1/lib/slf4j-log4j12-1.5.8.jar!/org/slf4j/impl/Sta

之前有一篇文章已经很详细介绍了如何安装hadoop+hbase+zookeeper  文章标题为：hadoop+hbase+zookeeper 分布式集群搭建完美运行 其网址：http://blog.youkuaiyun.com/shatelang/article/details/7605939         这篇文章要讲述的是hadoop1.0.0+hbase0.92.1+zookeeper3.3.

然后：