MAC 下安装hadoop

最新推荐文章于 2025-10-16 16:34:25 发布
转载 最新推荐文章于 2025-10-16 16:34:25 发布 · 549 阅读 · 1 ·
CC 4.0 BY-SA版权
原文链接：https://juejin.im/post/5daeacb5518825048d147aee
文章标签：

#hdfs

本文详细介绍如何在伪分布式模式下安装配置Hadoop，包括从官网下载、解压到配置JAVA_HOME，修改核心配置文件如core-site.xml、hdfs-site.xml等，以及初始化和启动HDFS、YARN服务的步骤。

转自: https://juejin.im/post/5daeacb5518825048d147aee

  1. 官网下载hadoop: http://hadoop.apache.org/releases.html
  2. 文件下载后解压,将文件放入 /usr/local目录下
    伪分布式模式设置:
    进入目录: hadoop-3.2.1/etc/hadoop
  3. 在hadoop-env.sh文件中增加JAVA路径设置:
    export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.8.0_211.jdk/Contents/Home
  4. 打开core-site.xml文件,
    在这里插入图片描述
  5. 打开hdfs-site.xml文件:
    在这里插入图片描述
  6. mapred-site.xml文件
    在这里插入图片描述
  7. yarn-site.xml文件
    在这里插入图片描述
    JAVA_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME,HADOOP_CONF_DIR,CLASSPATH_PREPEND_DISTCACHE,HADOOP_YARN_HOME,HADOOP_MAPRED_HOME

配置完成
8. 在/bin执行: ./hdfs namenode -format 初始化hdfs
9. 启动hdfs : 进入目录hadoop-3.2.1/sbin，执行./start-dfs.sh
10. 进入目录hadoop-3.2.1/sbin，执行./start-yarn.sh启动yarn
11. 进入目录hadoop-3.2.1/sbin，执行./stop-all.sh即可关闭hadoop的所有服务

Mac 安装Hadoop
ricky_lyq的博客
10-12 361
1. SSH 首先在系统里打开远程登录，位置在 System Preference -> Sharing 中，左边勾选 Remote Login，右边选择 All Users。 ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys chmod 0600 ~/.ssh/authorized_keys ssh localhost用来测试 2. 安装hadoop br
Mac下安装Hadoop
尼古拉斯大树的博客
11-29 2006
hadoop安装，mac下安装hadoop
Mac 安装 Hadoop 大数据框架完整教程
最新发布
qq_53401830的博客
10-16 668
mac电脑安装hadoop大数据框架，包含spark，flink安装教程
MAC系统安装Hadoop
weixin_45535519的博客
12-09 1500
MAC系统安装Hadoop
Mac安装hadoop
oracle8090的博客
09-12 388
mac 安装hadoop
Mac下安装Hadoop的
尼古拉斯大树的博客
11-29 470
mac安装hadoop yarn
Mac 安装Hadoop教程（HomeBrew安装）
总结复盘，才能不迷失自己！
08-31 3421
本教程旨在介绍在Mac 电脑上安装Hadoop，便于编程开发人员对大数据技术的熟悉和掌握。
mac下安装hadoop与hive
wz1226864411的博客
03-02 1725
hadoop 3.x安装 1、ssh免密登陆配置 ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys chmod 0600 ~/.ssh/authorized_keys 2、下载并安装hadoop brew install hadoop 下载完后hadoop...
Mac 上安装Hadoop
qq_42603181的博客
09-14 1041
1.安装JAVA 安装java就不详细说了，直接下载jdk，安装。现在mac新版本好像都不用专门给java和python配置环境变量就直接能用。 终端输入java -version 如果显示出java版本号就ok了。如果没有，使用命令vim ~/.bash_profile 修改一下环境变量。 2.下载Hadoop 网址：https://hadoop.apache.org/releases.html 根据想下载的版本，选一个，下载解压。 3.下载的同时，修改mac的配置。 系统偏好设置–>选择共享–&
Mac 安装 Hadoop 详细教程（安装包 and Homebrew）
weixin_39149333的博客
10-16 3023
JDK 版本高于 JDK 8，可能会导致 Hadoop ResourceManager 打不开，从而导致无法访问 localhost:8088。因此最好的方法，就是准备好 JDK 8 的环境，然后导入到 Hadoop 当中。PS: 这种安装方式可能会少 lib/native 文件夹，具体原因未知。2. 如果失败，则在本地设置中，搜索“共享”，打开“远程登录”。4. 点击，下载到本地，然后解压，放在自己需要的目录中，我放在了。
Mac系统安装Hadoop
菜鸟码农升职记
05-05 1928
我的系统是
mac安装hadoop
m0_64965705的博客
12-12 1883
1.安装Hadoop 首先确保正确安装了brew以及jdk,在终端键入： 1.安装Hadoop 首先确保正确安装了brew以及jdk,在终端键入： 来查看hadoop的版本信息（此处为3.2.1版本) 2.配置Hadoop (1)配置环境变量HADOOP_HOME(注意版本号的区别)： (2)修改配置文件: 默认情况下，Hadoop的配置文件在如下目录中： /usr/local/Cellar/hadoop/3.2.1/libexec/etc/hadoop/ 可以利用ls命令...
mac系统下安装hadoop+hbase+spark单机版+IDEA和scala编写使用spark来计算的helloworld程序
sxj的专栏
01-13 5713
一、启动ssh服务 1、首先找到系统偏好设置，如下图所示： 2、然后选择共享，如下图所示： 3、然后将远程登录选上，并选择所有用户，如下图所示： 4、此时即可通过ssh登录了。 二、建立ssh无密码登录本机 1、ssh生成密钥有rsa和dsa两种生成方式，默认情况下采用rsa方式，首先主机上创建ssh-key，这里我们采用rsa方式。使用如下命令(P是要大写的，后面跟""，...
Hadoop 安装教程 (Mac m1/m2版)
xiaoqingqing521的博客
10-12 5487
中内容替换如下，路径需换成自己的路径。(4)打开core-site.sh文件【vim core-site.xml】，将标签
【hadoop】在Mac m1下搭建安装hadoop环境（亲测有效版）
zjutkarma的博客
10-11 4214
在Mac m1环境下安装hadoop教程 亲测有效 超简单版
Mac安装Hadoop
Likes的博客
08-25 262
https://www.jianshu.com/p/2c3b04ac498d
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值