MACOS Ventura 本地安装HDFS 3.1.4

最新推荐文章于 2025-12-23 14:29:58 发布

原创

最新推荐文章于 2025-12-23 14:29:58 发布 · 597 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#macos #hdfs #hadoop

1、终端，输入第一条命令一直回车即可，然后将生成的将公钥内容写入到~/.ssh/authorized_keys中

ssh-keygen -t rsa

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

2、系统登录-共享-远程登录，打开。如下：

3、官网下载安装包并且解压：

Apache Hadoop

cd ~
tar -zxvf hadoop-3.1.4.tar.gz

4、修改 core-site.xml

cd ~/hadoop-3.1.4/etc/hadoop
vim core-site.xml

<configuration>
    <property>
       <name>hadoop.tmp.dir</name>
       <value>file:/Users/winhye/hadoop/tmp</value>
    </property>
    <property>
        <!-- fs.default.name 已过期，推荐使用 fs.defaultFS -->
        <name>fs.defaultFS</name>
        <value>hdfs://hadoop:9000</value>
    </property>
    <!-- 缓冲区大小，根据服务器性能动态调整 -->
    <property>
        <name>io.file.buffer.size</name>
        <value>4096</value>
    </property>
    <!-- 开启垃圾桶机制，删除掉的数据可以从垃圾桶中回收，单位分钟 -->
    <property>