hadoop集群批量快速安装

这篇博客详细介绍了如何批量快速安装Hadoop集群,包括配置SSH免登陆、拷贝安装文件、安装JDK并设置环境变量的脚本使用方法。通过这些步骤,可以高效地在多台机器上部署Hadoop和HBase。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

今天是我生日,在博客里放送出2份非常实用的文档。hadoop、hbase批量安装和ganglia安装配置详解。首先第一篇。

hadoop批量安装前先将namenode,Hmaster机器安装完毕。然后准备以下文件

1、hadoop-0.20.2-CDH3B4.tar.gz

2、hbase-0.90.1-CDH3B4.tar.gz

3、hosts

4、profile

5、hbaseconf(这个是hbase中的conf文件夹的拷贝)

6、hadoopconf(这个是hadoop中conf文件夹的拷贝)\

将这些打包成cdh3beta4.tar.gz

以hadoop用户来运行脚本。

脚本一:作用是配置ssh免登陆

confSSH.sh

#!/bin/bash

ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa

for((i=100;i<115;i++))
do
scp ~/.ssh/id_dsa.pub hadoop@192.168.4.$i:~/
ssh 192.168.4.$i 'mkdir .ssh;
chmod 755 .ssh;
cat id_dsa.pub >>.ssh/authorized_keys;
chmod 644 .ssh/authorized_keys;'
done

脚本二:拷贝安装hadoop,hbase

installHadoop.sh

#!/bin/bash
for((i=102;i<115;i++))
do
scp /home/hadoop/cdh3beta4.tar.gz  hadoop@192.168.4.$i:/home/hadoop/
ssh 192.168.4.$i 'tar zxvf cdh3beta4.tar.gz;
cd cdh3beta4;
tar zxzf hadoop-0.

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值