【大数据】ARM-服务器下安装Hadoop（单机）

最新推荐文章于 2024-10-15 13:20:12 发布

苏书QAQ

最新推荐文章于 2024-10-15 13:20:12 发布

阅读量858

点赞数

分类专栏：大数据文章标签： hadoop 服务器大数据 pycharm arm

本文链接：https://blog.youkuaiyun.com/qq_44303766/article/details/128673729

版权

本文详细介绍了在ARM架构的服务器上安装部署Hadoop的步骤，包括环境准备（设置免密登录、关闭防火墙、删除原有JDK）、JDK的安装与配置、Hadoop的解压与配置，以及各个核心配置文件的详细设置，最终实现HDFS和YARN的启动，通过web页面展示了运行效果。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.安装部署

1.1安装环境准备

1.1.1 设置免密登录

ssh localhost
cd ~/.ssh
ssh-keygen -t rsa 
enter
enter
enter
enter

1.1.2关闭防火墙

systemctl status firewalld 查看防火墙
systemctl stop firewalld 关闭防火墙
systemctl disable firewalld 永久关闭防火墙

1.1.3删除原有的JDK

java -version
rpm -qa | grep jdk

1.2安装JDK

1.2.1配置环境变量

vim /etc/profile

export JAVA_HOME=/opt/module/jdk1.8.0_341
export PATH=$PATH:$JAVA_HOME/bin

source /etc/profile

1.2.2验证是否安装正常

java -versoin

![企业微信截图_16621091803219.png](https://img-blog.csdnimg.cn/img_convert/6ff4e34cf09cf2ed7ca50bf95567d5a0.png#clientId=u07ff871f-70e8-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=319&id=ud315c82c&margin=[object Object]&name=企业微信截图_16621091803219.png&originHeight=319&originWidth=1049&originalType=binary&ratio=1&rotation=0&showTitle=false&size=8958&status=done&style=none&taskId=udad6cb0d-dcbe-4b2e-ae99-0e695876b23&title=&width=1049)

1.3安装Hadoop

1.3.1 解压

解压:tar -zxvf Hadoop-3.3.1-aarch64.tar.gz
mv hadoop-3.3.1/ hadoop

1.3.2配置变量

vim /etc/profile

export HADOOP_HOME=/opt/moduel/hadoop
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin
export HADOOP_CONF_DIR=${HADOOP_HOME}/etc/hadoop

1.3.3验证环境变量

hadoop version

![企业微信截图_16621093818446.png](https://img-blog.csdnimg.cn/img_convert/5121144a28e1f40012b734d7ea0aa7b1.png#clientId=u07ff871f-70e8-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=143&id=u867c60bd&margin=[object Object]&name=企业微信截图_16621093818446.png&originHeight=143&originWidth=1206&originalType=binary&ratio=1&rotation=0&showTitle=false&size=12094&status=done&style=none&taskId=u8ea17129-6d73-4e38-9dc3-245847aeb0d&title=&width=1206)

1.3.4 配置hadoop环境脚本文件中的JAVA_HOME参数

cd ${HADOOP_HOME}/etc/hadoop
分别在hadoop-env.sh、mapred-env.sh和yarn-env.sh中添加如下参数：
export JAVA_HOME=/opt/module/jdk1.8.0_341

1.3.5配置core-site.xml文件（指定NameNode节点）

vim ${HADOOP_CONF_DIR}/core-site.xml 
加入以下配置

<configuration>
 <property>
    <name>fs.default.name</name>
    <value>hdfs://10.0.1.121:9310

最低0.47元/天解锁文章