Hadoop安装

最新推荐文章于 2025-12-05 18:39:43 发布

原创最新推荐文章于 2025-12-05 18:39:43 发布 · 197 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop

第一步：设置ssh免密码登录

①ssh-keygen -t rsa （一直回车就行）
②cp /root/.ssh/id_rsa.pub /root/.ssh/authorized_keys

---------------------------------
1.配置 hadoop-env.sh 修改JAVA_HOME /mnt/app/jdk1.8.0_161
2.配置core-site.xml

<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:8020</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/home/hadoop/app/</value>
</property>

</configuration>

配置hdfs-site.xml
//副本系统为1
<property>
<name>dfs.replication</name>
<value>1</value>
</property>

-----------------------------------
格式化
./hdfs namenode -format

-------------------------------------------
配置mapred-site.xml
①复制cp mapred-site.xml.template mapred-site.xml
②配置
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
③配置yarn-site.xml

<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>