iteye_878的博客

1.概述 zookeeper是一个分布式协调系统，主要目的是为了减轻构建健壮的分布式系统的负担。应用场景有领导选举，崩溃检测，分布式队列和锁等。 zookeeper被应用在hbase/solr/kafka/dubbo等系统上。而且本人发现越来越多的分布式系统都开始采用zookeeper作为底层基础设施。 2.环境 Win7 64bit JDK 1.7.0_72 zookeeper ...

[i][b]2016/06/16更新[/b][/i] windows环境下需要额外下载winutils 1.环境 首先要注意不同版本的spark需要不同版本的scala,python。 我这里试验成功的版本如下： Windows 7 JDK 1.7.0_72 scala 2.10.5 python 2.7.8 spark 1.4.1 winutils 2.下载 ...

本文安装环境概述： windows7 64bit jdk1.7.0_72 64bit hadoop2.7.2 Hadoop从v2以后，单机模式已经可以在Windows上运行了，而且无需cygwin。而单机伪分布式模式理论上也是可以运行的，但是笔者在运行时遇到了形形色色的问题，所以这里就不讨论了。本文记录单机模式安装。 1.下载hadoop [url]http://hadoop....

初学hadoop，折腾了几天总算把hadoop0.20.2在windows上安装成功了。因为网上很多安装成功的资料都是用的hadoop0.20.2,所以我们初学就先用这个版本。 本文安装环境概述： windows7 jdk1.6.0_43 cygwin openssh hadoop0.20.2 hadoop0.20.2版本比较老，所以最好用jdk6，不要用jdk7，以免出现一...

之前折腾了几天，想让hbase的单机模式在cygwin上跑起来，都不成功。正当我气馁之时，我无意中发现hbase0.96.0的bin和conf目录下有一些扩展名为cmd的文件。这难道是给windows用的？难道现在hbase可以直接在windows上运行了？抱着这样的想法，我尝试了不用cygwin的方法运行hbase，还真成功了。特此记录下来，给需要的人做一个参考。 1. 环境： ...

之前以为hadoop安装很难，然后装了hbase以后才知道，hadoop其实是小菜一碟，装hbase才叫难。经过我一周的不懈努力和反复尝试，终于成功的试验出来一套在windows上安装hbase0.20.6单机伪分布式模式的方法。 环境 win7 32bit jdk 1.6.0_45 32bit zookeeper 3.4.3 hadoop 0.20.2 hbase 0.2...

首先解释一下标题，为什么叫“hive体验”，是因为windows上并不能运行hive。 本人想在win7，cygwin平台上把hive试验出来，尝试了2个星期，试验了好几种hadoop和hive的版本，均以失败而告终。google搜索出来的各种信息也均表示windows上并不能运行hive，就连一向解燃眉之急的stackoverflow上搜索之也都是只有问题，没有回答。所以本人经历了N次失败后，...