hadoop伪分布式搭建

加粗体为文件或目录的路径,应根据自己的路径不同而做适度的修改
1.设置IP地址
执行命令:service network restart
验证:ifconfig
2.关闭防火墙
执行命令:systemctl stop firewalld.service
3.关闭防火墙开机启动:
systemctl disable firewalld.service
4.验证防火墙状态
执行命令:systemctl status firewalld.service
5.设置主机名
执行命令:vi /etc/sysconfig/network
6.IP与主机名绑定
执行命令:vi /etc/hosts
在hosts文件最后加上虚拟机的IP地址和主机名
7.设置ssh免密码登陆
执行命令:(1)ssh-keygen -t rsa
(2)cp /.ssh/id_rsa.pub /.ssh/authorized_keys
安装jdk
1.执行命令cd /usr/local ——这里是你的jdk安装包所在的路径
chmod u+x jdk-7u79-linux-x64.tar.gz
tar -zxvf jdk-7u79-linux-x64.tar.gz //解压jdk
mv jdk1.7.0_79 jdk //将 jdk1.7.0_79改为jdk
2. 配置jdk环境变量
vi /etc/profile 增加如下内容:export JAVA_HOME=/usr/local/jdk
export PATH=.: J A V A H O M E / b i n : JAVA_HOME/bin: JAVAHOME/bin:PATH
执行命令source /etc/profile
安装hadoop
安装hadoop2.6.0
1.在 /usr/local( ——这里是你的hadoo安装包所在的路径)目录下解压hadoop2.6.0安装包
2.将解压后的文件夹改为hadoop
3.修改/etc/profile文件
export HADOOP_HOME=/usr/local/hadoop
export PATH=.: H A D O O P H O M E / b i n : HADOOP_HOME/bin: HADOOPHOME/bin:PATH

执行命令source /etc/profile
执行cd /usr/local/hadoop/etc/hadoop命令,更改配置文件。
更改配置文件
hadoop-env.sh
export JAVA_HOME=/usr/local/jdk

#core-site.xml文件



hadoop.tmp.dir
/usr/hadoop/tmp



fs.defaultFS
hdfs://zheng01:9000

#hdfs-site.xml文件



dfs.replication
1



dfs.namenode.name.dir
file:/usr/hadoop/dfs/name



dfs.datanode.data.dir
file:/usr/hadoop/dfs/data



dfs.permissions
false

#yarn-site.xml文件



yarn.nodemanager.aux-services
mapreduce_shuffle

#mapred-site.xml文件



mapreduce.framework.name
yarn

对namenode进行初始化(/usr/local/hadoop目录下)
命令:bin/hadoop namenode –format

启动namenode:
sbin/hadoop-daemon.sh start namenode

启动datanode:
sbin/hadoop-daemon.sh start datanode

启动Yarn
命令:sbin/start-yarn.sh

在sbin目录下启动hadoop: start-all.sh
停止所有的hadoop进程: stop-all.sh
执行命令jps查看进程
结果展示:
在这里插入图片描述
表示Hadoop搭建成功

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值