Hadoop单节点环境搭建

本文详细介绍了在CDH环境下搭建Hadoop单节点环境的步骤,包括安装Java、设置SSH无密码登录、上传并解压Hadoop安装包、配置环境变量、启动与停止HDFS服务,以及HDFS的命令行操作。通过这些步骤,读者可以学习到Hadoop的基本安装和管理知识。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Hadoop单节点环境搭建
使用的Hadoop相关版本:CDH
CDH相关软件包下载地址:http://archive.cloudera.com/cdh5/cdh/5/
Hadoop使用版本:hadoop-2.6.0-cdh5.15.1(版本一定要相互对应)
Hadoop下载:wget http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.15.1.tar.gz

Required software for Linux include:
1.Java™ must be installed. Recommended Java versions are described at HadoopJavaVersions.
2.ssh must be installed and sshd must be running to use the Hadoop scripts that manage remote Hadoop daemons.

一.安装Java

1.拷贝本地软件包到服务器:scp jdk-8u91-linux-x64.tar.gz hadoop@192.168.199.218:~/hadoop/app
2.解压jdk到~/app/:tar -zvxf jdk-8u91-linux-x64.tar.gz -C ~/app/
3.把jdk配置系统环境变量中: ~/.bash_profile
	export JAVA_HOME=/home/hadoop/app/jdk1.8.0_91
	export PATH=$JAVA_HOME/bin:$PATH
4.使得配置修改生效:source .bash_profile
6.验证:java -version

二.安装ssh无密码登陆
ls 命令
ls -a
1. ls -la 并没有发现一个.ssh的文件夹
2.生成钥:
ssh-keygen -t rsa 一路回车
3. cd ~/.ssh
查看

[hadoop@hadoop01 .ssh]$ ll
总用量 12
-rw------- 1 hadoop hadoop 1679 10月 15 02:54 id_rsa  私钥
-rw-r--r-- 1 hadoop hadoop  398 10月 15 02:54 id_rsa.pub 公钥
-rw-r--r-- 1 hadoop hadoop  358 10月 15 02
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值