CDH伪分布式Hadoop-2.6.0-cdh5.14.0环境搭建

最新推荐文章于 2020-11-13 02:39:30 发布

BigDataEngineer

最新推荐文章于 2020-11-13 02:39:30 发布

阅读量925

点赞数 1

分类专栏： Hadoop环境搭建文章标签： CDH版本伪分布式Hadoop环境搭建 Hadoop环境搭建

本文链接：https://blog.youkuaiyun.com/BigDataEngineer/article/details/103201645

版权

本文详细介绍了如何在CDH 5.14.0环境下搭建Hadoop-2.6.0的伪分布式系统，包括环境准备、配置文件修改、集群启动等步骤，并提供了关键命令和注意事项，如必须使用JDK1.7，以及各服务的启动和检查页面。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

CDH 伪分布式Hadoop环境搭建

注意：亲测证明hadoop-2.6.0-cdh5.14.0 这个版本的编译，只能使用jdk1.7，如果使用jdk1.8那么就会报错

hadoop-2.6.0-cdh5.14.0百度网盘下载地址：提取码：td8c
https://pan.baidu.com/s/1Gl-clYmrV32qjPCc-r6gtQ

第一步：

上传压缩包并解压
上传到我们的linux的/export/softwares路径下
cd /export/softwares
解压命令
mv hadoop-2.6.0-cdh5.14.0new.tar.gz hadoop-2.6.0-cdh5.14.0.tar.gz
tar -zxvf hadoop-2.6.0-cdh5.14.0.tar.gz -C …/servers/
在这里插入图片描述

第二步：

查看hadoop支持的压缩方式以及本地库
第一台机器执行以下命令
cd /export/servers/hadoop-2.6.0-cdh5.14.0
bin/hadoop checknative
在这里插入图片描述
如果出现openssl为false，那么所有机器在线安装openssl即可，执行以下命令，虚拟机联网之后就可以在线进行安装了
yum -y install openssl-devel

第三步：

修改配置文件
修改core-site.xml
第一台机器执行以下命令
cd /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoop
vim core-site.xml

<configuration>
<property>
		<name>fs.defaultFS</name>
		<value>hdfs://node01:8020</value>
	</property>
	<property>
		<name>hadoop.tmp.dir</name>
		<value>/export/servers/hadoop-2.6.0-cdh5.14.0/hadoopDatas/tempDatas</value>
	</property>
	<!--  缓冲区大小，实际工作中根据服务器性能动态调整 -->
	<property>
		<name>io.file.bu

最低0.47元/天解锁文章