奔跑的羚羊

[b]1) 安装jdk[/b] 下载jdk-6u21-linux-i586.bin 然后修改/etc/profile： [code="java"]export JAVA_HOME=/usr/local/jdk export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH export PATH=$PATH:$JAVA_HOME/bi...

考虑到安全性，对Hadoop使用了Kerberos进行安全性验证 hbase需要运行在security-enabled Hadoop， 需要对hbase打个补丁,见附件 [code="java"] patch -p1 < ../HBASE-3582_2.patch[/code] 成功以后，会显示： [code="java"]patching file src/main/java/...

1。安装LZO sudo apt-get install liblzo2-dev 或者下载lzo2 http://www.oberhumer.com/opensource/lzo/download/. ./configure --enable-shared make make install 确认安装成功 [code="java"]% ls -l /usr/lib*/l...

集群部署在局域网内部，与外网隔离开来。 [size=large]第一步，下载安装包和相关文件。[/size] 其实 cloudera 就有一个 yum源，查看一下http://archive.cloudera.com/redhat/cdh/3/ ，yum源的结构就很清晰了。 [code="java"]wget -mc http://archive.cloudera.com/r...

[b]1.集群配置[/b] 修改[b]conf/hdfs-site.xml[/b]文件 [code="xml"] dfs.hosts.exclude /data/soft/hadoop/conf/excludes Names a file that contains a list of hosts that are not permitted to connect...

[b]1.部署hadoop[/b] 和普通的datanode一样。安装jdk，ssh [b]2.修改host[/b] 和普通的datanode一样。添加namenode的ip [b]3.修改namenode的配置文件conf/slaves[/b] 添加新增节点的ip或host [b]4.在新节点的机器上，启动服务[/b] [code="java"] [root@slave...

Hadoop回收站trash，默认是关闭的。 习惯了window的同学，建议最好还是把它提前开开，否则误操作的时候，就欲哭无泪了 1.修改[b]conf/core-site.xml[/b],增加 [code="xml"] fs.trash.interval 1440 Number of minutes between trash checkpoints. If z...

Namenode恢复 1.修改[b]conf/core-site.xml[/b],增加 [code="xml"] fs.checkpoint.period 3600 The number of seconds between two periodic checkpo...

1.修改conf/hbase-env.sh，添加jdk支持 [code="java"]export JAVA_HOME=/usr/local/jdk export HBASE_MANAGES_ZK=false[/code] 2.拷贝zookeeper的配置文件zoo.cfg到HBase的CLASSPATH（官方推荐的方式） [code="java"]root@master:/dat...

前提是安装完成hadoop [b]1）下载zookeeper-3.4.5.tar.gz[/b] 解压到每台服务器的/opt/soft 解压[code="java"]root@master:/opt/soft# tar zxvf zookeeper-3.4.5.tar.gz[/code] 建立软连[code="java"]root@master:/opt/soft# ln -s zookee...

Hbase配置手册 [b]1）下载hbase[/b] 解压到每台服务器的/data/soft 解压[code="java"]root@master:/data/soft# tar zxvf hbase-0.90.0.tar.gz[/code] 建立软连[code="java"]root@master:/data/soft# ln -s hbase-0.90.0 hbase[/code] ...

Ganglia 是 UC Berkeley 发起的一个开源监视项目，设计用于测量数以千计的节点。每台计算机都运行一个收集和发送度量数据（如处理器速度、内存使用量等）的名为 gmond 的守护进程。它将从操作系统和指定主机中收集。接收所有度量数据的主机可以显示这些数据并且可以将这些数据的精简表单传递到层次结构中。正因为有这种层次结构模式，才使得 Ganglia 可以实现良好的扩展。gmond 带来的...